Kontejnerové sendviče

18.5. 18:19 | Přečteno: 1011× | Za vším hledej Linux | poslední úprava: 18.5. 18:24

Čeká mne aktualizace MediaWiki z LTS verze 1.39.x na novější a rád bych si předtím ověřil, co bude a nebude fungovat. Od novějších verzí byl totiž implementován nový parser a tím se mění i docela dost věcí, takže nechci riskovat, že se pak zaseknu na nějaké ptákovině. Nejdřív si chci všechno v klidu otestovat, v izolovaném prostředí a případné problémy vyřešit předem. Je to i vhodná příležitosti k separaci jednotlivých služeb do samostatných kontejnerů. A tak je otázkou jen to, jakou technologii využít.

Když jsem si hrál s kontejnery před 10 lety, bylo v nabídce jen LXC. Vyzkoušel jsem to, ale neměl jsem pro ně praktické využití jelikož pro disklessovou infrastrukturu je výhodnější plná virtualizace, která umožňuje téměř cokoliv. Po nějakém čase jsem začal, místo klasické kombinace nabindovaných adresářů a chrootu, využívat systemd-nspawn při aktualizaci systémových vrstev disklessu. Ale to je tak banální využití, že snad ani nestojí za řeč.

Při výuce na katedře kybernetiky se využívá Singularity, takže ho máme jako standardní součástí našeho disklessu. Vyučující si dělají svůj kontejner na míru a pak záleží jak a kde s ním chtějí pracovat. Kupř. turtleboti si po startu jednoduchým způsobem otestují, zda-li je vše při starém a pokud ne, pokusí se o stažení aktuální verze kontejneru na lokální úložiště. Stejně jako kešování i tohle se využívá k tomu aby byla komunikace turtlebotů přes WiFi co nejefektivnější. Stačí totiž jen málo k tomu, abyste si vyrvali zoufalstvím své kučery, máte-li připojen adresář sdílený přes NFS ve kterém je milion malých souborů, na stroji, který může komunikovat jen přes WiFi. U strojů na rychlé ethernetové síti to až problém není a pokud se používá overlay je dokonce výhodnější mít kontejner vybalený, protože se dají dělat a rovnou testovat úpravy kódu přímo ve vrstvě co je součástí sendviče. Protože singularity pracuje s kontejnerem, který je ve stavu read-only, takže nevzniká problém "Stale file handle".

To je docela záludný problém, který vzniká pokud se takový kontejner nabootuje přes systemd-nspawn. Původně jsem chtěl využít, podobně jako u singularity, disklessový sendvič. Jenže systemd sáhne na některé soubory takovým způsobem, že je dostane do stavu "Stale file handle" a zřejmě je pak někde drží, protože obvyklá finta s remountem nefunguje. To byla věc, které jsem se zrovna snažil přijít na kloub, když jsem se zmínil o tom že smolím něco o kontejnerech v diskuzi karkarovi. Projevovalo se to tak, že apt nedokázal vyresolvovat doménové jméno, ale ping na doménu při tom fungoval.

Jenže Singularity zatím v distribuci Debianu není. I když chvíli bylo, ale pak ho z nějakého důvodu zase vyřadili. Možná proto, že ho nahradí jeho fork Apptainer. Samozřejmě že jsou i jiné alternativy. Docker, Podman, nebo Incus, fork LXD, který pracuje s již zmíněnými LXC kontejnery.

Nakonec je to vcelku jedno. Na Apptaineru (Singularity) se mi líbí, to že pokud ho pustím nad sendvičem, mohu hrabat do libovolné vrstvy a podle potřeby tak modifikovat obsah kontejneru. Kontejnerový sendvič totiž není v podstatě nic jiného, než vybalený kontejner, překrytý pomocí fuse-overlayfs jinými adresáři. Takto lze do něj velice jednoduše propašovat libovolná data, s nimiž chci pracovat, aniž by hrozilo jejich poškození. A záleží jen na tom, jestli bude horní vrstva, do které se ukládají změny v adresáři umístěná nad tmpfs, který se při restartu zahodí, nebo někde jinde. A taky nic nebrání tomu, prolinkovat adresáře a zabalit hotový kontejner do squashovaného read-only .simg kontejneru, který mohu zkopírovat i jinam.

       

Komentáře

[RealJ]

Alesi, ty kontejnerove sendvice jsi taky vymyslel? Ptam se pro kamarada…

[Want]

Polib mu prdel!

[Want]

Koukám, že si vystačíte. Jen pro forma - nikde jsem netvrdil, že jsem vymyslel diskless, ale disklessovou technologii, která umožňuje udělat jako diskless infrastrukturu, ze které běží. Což ten kapouní mozeček RealJ ne a ne pochopit.

[_]

takze dedkovi uz ani neslouzi pamet... udrzis jeste vubec moc, kdyz myslenku uz ne? ta diskuze o disklessu dopadla uplne jasne, ze tys tam dal blil neco, o cem si zas myslis, ze narovnalo vnimani o tvy debilite.. jen potvrzuje tvoji debilitu

[Want]

Ať ti nezaskočí slina.

[uroloh]

ani moc a jak koukam na jeho blogy ani stolici

[RealJ]

No a vymyslel jsi ty kontejnerove sendvice nebo ne? Klidne napis ze jsi vymyslel i kontejnery samotne…

[Aleš Kapica]

Buď dodej odkaz na text, kde o tom píše někdo jiný, nebo kušuj. Ten blogpost není pro pitomce jako jsi ty či podtržítkoví pindalové, ale pro ty, co budou chtít někdy řešit něco podobného. Nemá smysl sem psát konkrétní řešení – dá se dohledat před odkazované stránky. Důležité je, že budou alespoň vědět, koho se můžou zeptat. Od tebe se totiž kloudné rady nedočkají.

[_ pin.dal _]

Nahodou J je expert na FE|BE reseni za 1$ a ma koule tam pouzit PHP,

[RealJ]

ale hovno, kdyby jsi nezral ty Alesove hovna tak vis ze mam wordpress za $1 mesicne pro 5 stranek protoze nikdo jiny mi nic levnejsiho nenabidnul. Ze si tady par lidi honi triko s tim, ze umi FE/BE reseni ktere si daji na 1 VPS za $10 mesicne je jejich debilita. A ze neco bezi na PHP je mi u prdele pokud mi o to nekdo za ten $1 mesicne pecuje.

[ShadowJ]

Proc te to porad triggeruje? To je nejaka uchylka nebo co? Proste jses kokot co pouziva wordprc, se s tim smir, nic jineho v tom neni Ty penize tady nikoho nezajimaji, jde o princip, ze ze sebe opakovane delas kokota

[karkar]

JJ joomla rulez :)

[RealJ]

To uz snad i drupal je lepsi, ne?

[karkar]

Mě přišla vždycky joomla lepší než drupal, jednodušší a tak nějak víc lehčí.

[Kmet]

Tvl jste jak duchodci v tramvaji co se bavi o svych nemocech...

[RealJ]

klidne napis co preferuji dnesni decka... :D

[//]

ale hovno, zapisek je akorat, abys mohl hladit svoje ego, jak zas necemu rozumis beda, jak nekdo poda nejakou namitku, to zas bude mentalni vyvrtka az do vesmiru... z nas debily neudelas, ze sebe zas neudelas nic jinyho, takze o co se tu vlastne snazis diskless jsi celou dobu naprosto jednoznacne prezentoval, jako SVUJ vynalez, akorat to neproslo, co, ty maslo jedno muzes to zkouset pretlacit, ale vytlacis ze sebe - naprosto evidentne - akorat o neco smradlavejsi hovno

[\\\]

...to musi bejt dobrej zoufalec, co neco bude delat podle Kapucy a jeste mu za ty jeho moudra bude vdecnej, takovyho chci potkat to Aleska ale zrejme ani nenapadlo, tak si klidne na plny koule napise, ze to pise pro ostatni totalni tragikomedie Ostatni umi pouzivat Internet a nepotrebujou zadny Abclinuxu, kam uz chodi akorat takovyhle mentalni trosky, co si pripadaj tak moc vyjimecne

[...]

to musi bejt proste chlastem -- Alesi, nechlastej a po case se ti mozna prestanem tolik smat

[Hrdobec]

Toz chlast nevylucuji jako katalyzator, ale dle mne se divame na ukazkovou poruchu osobnosti zpusobenou nadmernym pouzivanim linuxoveho desktopu.

[karkar]

Největší duševní poruchou trpí applovce.

[iSteve]

Od kdy je zdravy rozum porucha? I ta AI ti rekla ze apple je volbou profesionalu a ajtaku co jsou za vodou. Nas apple ovecek je tady par pecovatelu na cely vas linuxovy abickovy cvokhaus

[karkar]

[Want]

Stejně nejspíš rozumoval i Kozák, než dospěl k názoru, že je nutné očistit svět od holek na UK.

[plostenka]

Nemuzu souhlasit se systemem "kdo ma nejrychlejsi PXE response, toho backdoory bootuje cela ucebna", ale jako PoC masivniho overlayovani to je zajimave.

[Want]

Nemuzu souhlasit se systemem "kdo ma nejrychlejsi PXE response, toho backdoory bootuje cela ucebna", ale jako PoC masivniho overlayovani to je zajimave.

A jak by sis představoval realizaci? V reálu, když se objeví jiný DHCP server totiž nebootuje nic. A k čemu by ty backdoory měly být? Aby získal uživatel přístup na roota? Proč? Ti co to potřebují na něj heslo znají. Náš zákazník je náš pán, takže co vyučující chtějí, to mají.

[plostenka]

když se objeví jiný DHCP server totiž nebootuje nic

Takze mas ten bootloader podepsany UEFI klicem? Nebo mas whitelist DHCP/PXE packetu na vsech routerech?

k čemu by ty backdoory měly být?

Treba se studenti prihlasi k nejakemu osobnimu uctu nekde... A systemove heslo vyucujiciho je jeste mnohem cennejsi (urcite bootuje stejny sitovy image)...

Ti co to potřebují na něj heslo znají.

Ze nemaji vlastni klic v authorized_keys, ale sdili jedno root heslo, je problem sam o sobe.

[Aleš Kapica]

Ze nemaji vlastni klic v authorized_keys, ale sdili jedno root heslo, je problem sam o sobe.

To je pouze úhel pohledu.

To heslo je otázkou určité vrstvy, která přeplácne výchozí soubor shadow. Proč bychom to měli komplikovat klíčema? Vyučující je uživatel jako každý jiný. Přihlásí na svůj účet, kde má svůj vlastní soubor authorized_keys i svoje klíče, ale ověřit se musí svým heslem, protože dokud se tím heslem nepřipojí, nemá proxy připojený jeho profil a tím pádem ani dostupný ten jeho soubor authorized_keys. A pak už heslo nepotřebuje, protože leze přes svůj klíč, který je součástí jeho uživatelského profilu.

A kdo se dostane nějakým způsobem na lokálního roota, ten už se nemusí s nějakým heslem zdržovat. Ze souboru shadow získá jenom hash, který mu je sám o sobě k prdu. Heslo na lokálního roota se hodí jen těm, co si chtějí čas od času něco zkusmo nainstalovat a přepínají se na něj přes su. Sudo se využívá jen pro určité konkrétní aplikace.

Nebo mas whitelist DHCP/PXE packetu na vsech routerech?

Vzhledem k tomu, že síť a síťové prvky jsou mimo mou kompetenci, přeptal jsem se kolegy. Je to tak, že normálně se mezi jednotlivé VLAN tyhle pakety nepropouští. A když to někdy potřebuje, nahodí si DHCP relay.

Treba se studenti prihlasi k nejakemu osobnimu uctu nekde...

No a? Myslíš jako, že by někdo nacpal backdoor do software, který je pouze v RAM a ten by nějakým záhadným způsobem přežil restart? Ano. Čas od času se stává, že někdo odejde od kompu aniž by se obtěžoval s vypnutím, či restartem. Ovšem to je pouze jeho blbost, za kterou si může sám. Restart laboratorního stroje, to je základní předpokladem pro jeho použití. Jednak se tím dostane do výchozí konfigurace, a zároveň se při tom zahodí vše, co tam napáchal předchozí uživatel.

A systemove heslo vyucujiciho je jeste mnohem cennejsi (urcite bootuje stejny sitovy image)...

Žádný síťový image nikdo nebootuje. Stroje používají generický ramdisk, který si stahuje konfiguraci podle situace. Když mu podstrčíš něco jiného nenabootuješ, nebo zůstaneš na něčem viset.

[plostenka]

který si stahuje konfiguraci podle situace

Jak mas osetreno, ze se student MitM wiresharkem nepodiva co se deje pri bootu, a pak kolegum/cvicicimu ve vhodne chvili nepodstrci svuj fake setup (kdyz jsou ve stejne ucebne, tak i na stejne VLAN)? To je to co me zajima, k cemu konkretne to vyuzije uz je vedlejsi.

[RealJ]

Ta jeho security je navrzena pro decka z pomocne skoly ktere se poprve potkavaji s pocitacem.

[Want]

Na to nepotřebuje wireshark. Pokud není slepý, tak to vidí při bootu. A opravdu se zájmem bych se podíval, jak by se to někdo pokoušel nabořit. Chceš-li si to zkusit, klidně se stav. Moc dobře vím, kde to má slabá místa. Je to jen školní laboratorní systém, který má nabízet jednotné SW vybavení pokud možno v blbuvzdorném balení.

[plostenka]

Takze tu konfiguraci (grub, co ze ktereho NFS) zadnym klicem podepsanou nemas, jinak uz bys to vyklopil.

laboratorní systém, který má nabízet jednotné SW vybavení pokud možno v blbuvzdorném balení

Proti tomu zadna, mnozina transparentnich overlayu je jasna volba.

[Want]

Uveď jediný rozumný důvod proč bych si tím měl komplikovat život?

[plostenka]

Aha... nemam dalsich otazek. FTP a telnet prece staci, nac si komplikovat zivot s SSH.

[Aleš Kapica]

Takže žádný. OK. Nechápu co sem pleteš FTP, přes které se posílají jen soubory, ve kterých žádná citlivá informace není. Mohl by sis také uvědomit, že není smyslem komplikovat si život víc než je nezbytně nutné.

[Martin Tůma]

Žádný síťový image nikdo nebootuje. Stroje používají generický ramdisk, který si stahuje konfiguraci podle situace. Když mu podstrčíš něco jiného nenabootuješ, nebo zůstaneš na něčem viset.

Kde se ten ramdisk bere, když ne ze sítě? Rozumím tomu správně, že ten proslulý "Kapicův objevný diskless" je tedy stroj, který bez disku nenabootuje?!

[Aleš Kapica]

Nerozumíš tomu vůbec.

[Martin Tůma]

To je dost dobře možný - porozumět těm tvejm textům, kde nejsou dvě věty za sebou, co by měly hlavu a patu, je takřka nemožný. A na jednoduchou otázku, jak ty stroje bootují, jestli přes PXE nebo z lokálního disku taky nejsi schopnej odpovědět... Když to ještě vyšperkuješ tvrzením, že jsi diskless (co možná ani žádný diskless není) vymyslel, nemůžeš se divit, že z tebe tady všichni mají akorát srandu.

[popcorn time]

A jeje zacne souboj titanu. Dva nejvetsi mizantropi abicka se zas dostali do krizku

[Vantomas]

Nebo mas whitelist DHCP/PXE packetu na vsech routerech?

Whitelist? Ta technika se jmenuje DHCP snooping. Právě ses propálil, že o tom nic nevíš a jen nám tu předhazuješ zvýrazněný slova z letáčku o průmyslu 4.0.

[plostenka]

Jak udelas snooping kdyz ti router zahodi packet (nemas spravnou adresu na spravnem portu)? Povidej, prehanej...

[Vantomas]

Takovou debatu nemá cenu s tebou vést, protože je evidentní, že ani nevíš co se stará o kterou vrstvu, ani neznáš charakteristiku DHCP trafficu.

Můžeme jen doufat, že pro nikoho "tu bezpečnost na síti" neděláš, protože je akorát chudákem, který evidentně slepě ve tvé schopnosti důvěřuje a ty ho jen taháš za nos.

[plostenka]

Az jednou dostanes do ruky nejaky aktivni prvek, tak mozna v nastaveni pod magickym sluvkem "Advanced" najdes filtrovani provozu podle protokolu, DHCP nevyjimaje. Kdyztak popros tatinka, at ti s tim pomuze...

[Vantomas]

[anketář]

Myslíte si že je Kapica coomer? Podle mne jo.

[loomer]

Ne. Nestoji mu.

[dal]

+1, zcela evidentní

[RealJ]

a ma mu vubec co stat?

[bardus]

mozna vlasy na hlave? aaa, taky ne :((((

[_ __]

ževraj Lenka Králová je programátor_ka

tak mi napadlo, či nebude linuxáč_ka

[v tranzu]

Jestli ma na to koule tak jo.