Dotaz: kopirovani adresare

[Milan Roubal]

Jaka je rozumna alternativa k prikazu

cp -a source target

Da se pouzit rsync nebo dopadnu stejne?

Pokusil jsem se zkopirovat obsah puvodniho filesystemu na novy v serveru Synology a po 3 dnech behu a 4 TB zkopirovanych dat se kopirovani vyrazne zpomalilo a zacal na serveru radit OOM zabijak. Podle vsech indicii to vypada, ze si cp uchovava seznam vsech zkopirovanych souboru pro dohledavani hardlinku a vytvoreni teto struktury pomalu sezere veskerou dostupnou pamet a neni mi zcela jasne, zda a jak se tomuto chovani da vyhnout (hardlinky na filesystemu pouzity nejsou).

Je fakt hrozne, ze uz ani na programy jako je cp se neda plne spolehnout, ze proste dobehnou do konce :(

Odpovědi

[Carth_Onasi]

To, že 4 TB se ti kopírovalo 3 dny, je problém. Pokud je to na localu, za 3 hodiny máš mít hotovo. Jaký je zdroj a cíl?

[Milan Roubal]

Čas je v pořádku, uvnitř Synology jsem vyměnil disky a to původní pole (tedy zdroj) je teď tvořeno disky připojenými přes USB2.

[Jendа]

Tak ten rsync zkus (normálně na to, jak to teď je).

[Milan Roubal]

zatim to bezi, podle rsync FAQ potrebuje rsync prumerne 100B na soubor. Souboru tam muze byt odhadem tak 20M, tak jsem zvedavej jak to dopadne. Ta masina ma 512 MB RAM a 2,5 GB swap. Ta struktura od cp se asi drzela jen v RAM, protoze vyuziti swapu kdyz jsem to sestreloval bylo minimalni.

[lertimir]

zase kolik tvého času tě stojí vytvořit dokonalé řešení na jeden příkaz. Já osobně bych to nehrotil, udělal porovnání velikosti adresářu na první urovni adresáře na 1 urovni udělal ručně a rozdělil kopirování na cca 5-20 samostatných cp skoro stejně velkých částí, sdružených za sebou do jednoho bashe. pak každý příkaz skončí paměti si vymaže a jde zase od nuly.

[Milan Roubal]

pokud bych to udelal hned na zacatku, tak by to fungovalo. Bohuzel ted je to horsi, cp na synology je soucasti busyboxu a tam neni parametr -u pro zachovani jiz dokoncene casti. Do cile uz chybel jen 1 TB, rsync z toho uz polovinu ubral, tak snad to do rana dokonci.