Re: Rebuildworld/kernel 11.x vs. 12.x

2019-08-20 Tema obsahu Miroslav Lachman

Marek Soudny wrote on 2019/08/20 08:26:

Mirku, upgrad rsyncem me nikdy nenapadl, ale kdyz uz jsi ho zminil, 
rozumim tomu dobre, ze na 1 "builder" stroji udelas klasicky make 
buildworld, buildkernel, installkernel a installworld, vcetne rebootu a 
mergemaster(u) a vysledny (base?) system pak "jednoduse" rsyncnes, s 
osetrenim nejakyho exclude listu s /etc/{passwd,group,master.passwd}, na 
ostatni servery, ktery pak jenom rebootnes?


Ano, tak nejak to je. Nejdriv jsem pouzival centralni build, 
primountovany na ostatni masiny pres NFS, takze na cilovych strojich se 
spoustel uz jen installkernel a installworld. Coz sice funguje, ale i s 
kazdym patch level updatem se prepisuji vsechny soubory v base, coz na 
nekterych VM trva strasne dlouho, protoze jsou od provideral imitovane 
na 200 IOPS. Takze to, co normalne trva 2 minuty tam trva pul hodiny.


Takze pak jsem prisel s tim, udelat na buildserveru samostatny adresar, 
do ktereho udelam installkernel a installworld s nastavenim DESTDIR. Tim 
vznikne instalace bez souboru v /etc/, takze tohle uz se da rsyncem 
prenaset na ostatni stroje.
Porad tam je ale problem s tim, ze se zmeni cas modifikace u souboru, u 
kterych se nezmenil jejich obsah (respektive byly prepsane stejnym 
obsahem). Sice se po siti nemusi obsah souboru prenaset, ale zmena casu 
na cilovem stroji stejne vyvola dalsi diskovou operaci. Tomu jsem se 
potreboval vyhnout.


Takze jsem to pak posunul jeste o kousek dal a na build serveru mam tech 
adresaru vice:


/vol0/rsync_updates/11.3-RELEASE_amd64
/vol0/rsync_updates/11.3-RELEASE-p1_amd64
/vol0/rsync_updates/11.3-RELEASE-p2_amd64
/vol0/rsync_updates/11.3-UPDATED_amd64
/vol0/rsync_updates/11.3-CHANGES_amd64

Takze kdyz vysla 11.3, udelal jsem make installkernel a installworld 
DESTDIR=/vol0/rsync_updates/11.3-RELEASE_amd64
Naklonoval ho do 11.3-UPDATED_amd64 (pouzivam ZFS) a z toho 
11.3-UPDATED_amd64 se pak pouziva rsync pro kopirovani na cilove stroje


Kdyz vysla 11.3-RELEASE-p1, tak jsem udelal instalaci s DESTDIR do 
11.3-RELEASE-p1_amd64. Nasledne pak spocitam checksumy pro vsechny 
soubory v 11.3-RELEASE_amd64 a v 11.3-RELEASE-p1_amd64 - tam, kde se 
checksum a velikost souboru lisi, soubor prekopiruju do 
11.3-UPDATED_amd64 a do 11.3-CHANGES_amd64
Takze v 11.3-UPDATED_amd64 je zase kompletni base system (bez /etc/) v 
aktualni verzi a v 11.3-CHANGES_amd64 jsou jenom soubory, ktere se mezi 
RELEASE a RELEASE-p1 zmenily - to pro pripad, ze bych je chtel 
distribuovat i nejak jinak. Treba si z nich zabalit TAR atp.


Kdyz vysla 11.3-RELEASE-p2, tak se zase udela buildworld buildkernel, 
installkernel a installworld do adresare 11.3-RELEASE-p2_amd64, 
spocitaji checksumy, rozdilne soubory se nakopiruji do 
11.3-UPDATED_amd64 a 11.3-CHANGES_amd64 a z 11.3-UPDATED_amd64 se to 
rsyncem roznese na cilove stroje.


Nemuzu zatim prohlasit, jak moc (ne)spolehlivy tenhle system je. 
Pouzivam to asi pul roku. Na zacatku bylo v planu pouzivat na version 
upgrade to reseni s NFS a jen na patch level updaty pouzivat rsync, ale 
jednou jsem si to omylem pustil na stroji, kde byla 10.4 a rsyncem jsem 
to upgradnul na 11.2. Takze kdyz to proslo a stroj nabootoval, trosku 
jsem si jeste pohral se scriptem, aby me to upozornilo na rozdilne verze 
atd., ale ted delam upgrady z 11.2 na 11.3 taky rsyncem a zatim jsem na 
problem nenarazil. Cimz nerikam, ze problem nastat nemuze. Urcite muze.


Zatim jsem mel ale daleko vetsi prusvih s tim, kdyz jsem se pokusil po 
tom rsync upgrade pouzit etcupdate misto stareho dobreho mergemasteru 
(necim se /etc/ updatovat musi, to rsync vyresit nemuze)


etcupdate mi na vsech strojich, kde jsem ho zkousel, zmeni prava na 
skriptech v /etc/rc.d - nenastavi jim spustitelnost - tem, ktere 
etcupdate musel mergovat - takze po rebootu nenabehly nejake sluzby a 
treba taky ldconfig.


Navic mi etcupdate hlasi konflikty i v souborech, do kterych jsem ja 
nezasahoval a mergemaster je dokaze sam v poklidu updatovat bez 
manualniho zasahu.


Pouzivate nekdo uspesne etcupdate?

Mirek
--
FreeBSD mailing list (users-l@freebsd.cz)
http://www.freebsd.cz/listserv/listinfo/users-l


Re: Rebuildworld/kernel 11.x vs. 12.x

2019-08-20 Tema obsahu Marek Soudny

Dobre rano,

Delam vzdy jen jeden reboot. At uz to instaluju pres installkernel + 
installworld, nebo cely update zkopiruju rsyncem.


Mirek


Mirku, upgrad rsyncem me nikdy nenapadl, ale kdyz uz jsi ho zminil, 
rozumim tomu dobre, ze na 1 "builder" stroji udelas klasicky make 
buildworld, buildkernel, installkernel a installworld, vcetne rebootu a 
mergemaster(u) a vysledny (base?) system pak "jednoduse" rsyncnes, s 
osetrenim nejakyho exclude listu s /etc/{passwd,group,master.passwd}, na 
ostatni servery, ktery pak jenom rebootnes?


Tenhle postup by se mi totiz pravdepodobne hodil.

Dekuju,
Marek
--
FreeBSD mailing list (users-l@freebsd.cz)
http://www.freebsd.cz/listserv/listinfo/users-l


Re: Rebuildworld/kernel 11.x vs. 12.x

2019-08-19 Tema obsahu Miroslav Lachman

Peter Hodur wrote on 2019/08/19 17:45:


Preto som sa opytal ci sa nieco zmenilo. Je uz bezpecne upgrad vykonat za
plnej prevadzky systemu len s dvoma restartmi? A k tejto teme - je ten prvy
restart naozaj dolezity? Nie je mozne to zkompilovat a nainstalovat a iba
restartnut? je nutne pri installworld mat uz novy kernel?


Delam vzdy jen jeden reboot. At uz to instaluju pres installkernel + 
installworld, nebo cely update zkopiruju rsyncem.


V krajnich pripadech muze dojit k problemum, ze se spusti novy userland 
program na starem kernelu, ale nikdy mi to nezkomplikovalo zivot.


Mirek
--
FreeBSD mailing list (users-l@freebsd.cz)
http://www.freebsd.cz/listserv/listinfo/users-l


Re: Rebuildworld/kernel 11.x vs. 12.x

2019-08-19 Tema obsahu Peter Hodur
Pozdravujem,

Zatim tu padla informace, ze se zmenil doporuceny postup. Ale zadny
> popis nejakeho problemu, ktery mas ani zadna otazka ...
>
> Takze napady na co ?
>
>
no, ja som bol vzdy v tom, ze upgrade zo zdrojakov treba v single user mode
aby sa co najviac minimalizovaldopad na beh sluzieb. Jendoducho ze na zivom
systeme, kde bezia sluzby to nie je jendoducho bezpecne a moze sa "nieco"
pokazit.

Teraz som si vsimol, ze odporucany postup je zkompilovat, nainstalovat
kernel, reboot, nainstalovat world, mergemaster a reboot.

Pred tym som dokonca pustal mergemaster v tzv. prebuild mode.

Preto som sa opytal ci sa nieco zmenilo. Je uz bezpecne upgrad vykonat za
plnej prevadzky systemu len s dvoma restartmi? A k tejto teme - je ten prvy
restart naozaj dolezity? Nie je mozne to zkompilovat a nainstalovat a iba
restartnut? je nutne pri installworld mat uz novy kernel?


dakujem

Peter ml.
-- 
FreeBSD mailing list (users-l@freebsd.cz)
http://www.freebsd.cz/listserv/listinfo/users-l


Re: Rebuildworld/kernel 11.x vs. 12.x

2019-08-16 Tema obsahu Miroslav Lachman

Peter Hodur wrote on 2019/08/16 05:21:

Ahojte,

vsimli ste si, ze v Handbooku sa zmenil odporucany postup pri reinstalacii
zo zdrojakov?

Viete o tom nieco viac?




#; drop into single user mode
#; re-mount fs (ZFS)
zfs set readonly=off zroot
zfs mount -a


Nevim, co se zmenilo na oficialni urovni, ale ja jsem nikdy do single 
user rezimu neprechazel a z mailinglistu vim, ze to nedela ani spousta 
jinych lidi. Tak se to mozna zmenilo i v dokumentaci.


Mirek
--
FreeBSD mailing list (users-l@freebsd.cz)
http://www.freebsd.cz/listserv/listinfo/users-l


Re: Rebuildworld/kernel 11.x vs. 12.x

2019-08-15 Tema obsahu Dan Lukes

On 16.8.2019 5:21, Peter Hodur wrote:

no a teraz mi handbook odporuca UPLNE iny postup. Dokonca nieje tam ani len
zmienka o single user a mergemaster v prebuild mode.

Nejake napady?


Zatim tu padla informace, ze se zmenil doporuceny postup. Ale zadny 
popis nejakeho problemu, ktery mas ani zadna otazka ...


Takze napady na co ?

Dan

--
FreeBSD mailing list (users-l@freebsd.cz)
http://www.freebsd.cz/listserv/listinfo/users-l