Zálohování dat v domácnostech (technologie, postupy, soft, tipy)

tohle je u ruznych vyrobcu ruzne, me ale dost zaujal clanek o tom, ze u novych extreme velkych disku, jako je napr. 2GB, uz dramaticky roste pravdepodobnost, ze behem relativne kratke doby nastane URE, neboli uncoverable read error. Zasadni parametr, ktery s timto souvisi (URE) je totiz uz asi 10 let konstantni (10^14 u SOHO, enterpise 10^15), kapacita ale jaksi ponekud povyrostla (toho si vyrobci patrne nevsimli). 10^14 znamena jedna neopravitelna chyba prumerne kazdych 12TB, coz znamena ze staci 6x precist cely 2TB disk a disk na oznami, ze mu to je skutecne lito, ale ze mame proste smulu a onen sektor proste neprecte. Toto ma zasadni vliv nejen na integritu nasich dat, ale predevsim zasadni dopad na RAID5, protoze v pripade rekonstrukce 12TB degraded pole je pravdepodobnost presne 50%, ze nam OS ci radic nam oznami, ze mame smulu a rekonstrukce se nepovede (pri rekonstrukci pole je potreba precist ze vsech disku jejich celou kapacitu, tedy velikost pole). Onen radic ci OS mozna pujde premluvit, aby pokracoval i pres tuto chybu, ale data (nedej boze FS) vporadku nebudou. Reseni je RAID 6 (jeste tragictejsi random zapis nez RAID5) ci 10 a samozrejme nutna zaloha.

vice zde: http://blogs.zdnet.com/storage/?p=162
http://www.tomshardware.com/news/RAI...2009,6525.html
anebo google: URE RAID 5

Záloha je nutná vždycky, té nás žádný RAID nezbaví. :-)

Citace:

---

Původně odeslal Petrik

tohle je u ruznych vyrobcu ruzne, me ale dost zaujal clanek o tom, ze u novych extreme velkych disku, jako je napr. 2GB, uz dramaticky roste pravdepodobnost...

---

Předpokládám, že tam má být 2TB... ;)

Connor má se zálohou naprostou pravdu, ale pro RAID pole hovoří (ne)jeden bonus. Jedním je to, že URE je vyhodnoceno samostatně a pokud je to opravdu URE na disku, tak se data dají vypočítat z ostatních a druhý, že před URE je několik RE, o kterém se řadič RAIDu dozví a je jen na firmware výrobce, zda s tím něco udělá či ne. Totální úmrtí jednoho disku už šanci "na průser" posouvá k vyšší pravděpodobnosti.

Jinak ten výpočet s polem je poněkud zavádějící, protože sice píšeš o 12TB poli, ale z každého disku se přečte jen 2TB... ;)

Citace:

---

Původně odeslal Connor

Záloha je nutná vždycky, té nás žádný RAID nezbaví. :-)

---

Jsou ovšem situace, kde záloha prostě nejde použít, ať už z technických, nebo logických důvodů.

Shodou okolností řeším problém na RAIDu, takže při prohledávání jsem narazil i na diskuse šílenců co mají doma >20TB pole, to se pak zálohuje dost špatně ;D

Citace:

---

Původně odeslal Aigor

Jsou ovšem situace, kde záloha prostě nejde použít, ať už z technických, nebo logických důvodů.

Shodou okolností řeším problém na RAIDu, takže při prohledávání jsem narazil i na diskuse šílenců co mají doma >20TB pole, to se pak zálohuje dost špatně ;D

---

Kdy například? Bavíme se o domácích podmínkách, nebo už ne? Tam je taky na zvážení, zda má někdo vůbec potřebu zálohovat, tj. když o své HDripy přijde tak se nezblázní a stačí mu zálohovat jen ty dokumenty a fotky, které pro něj mají hodnotu.
Add příklad 20TB šílenců: 20TB na pásky (nebo kopie na zálohovací disky) není problém i za rozumné peníze, tím spíš, že doma neočekávám databázi, ale 99% neměnících se dat. :-)

P.S. Dřív nikdo moc (myslím doma) nezálohoval, protože myslel, že o data přijít nemůže a musel být poučen nějakým virem, maďarským bluescreenem ve Win95, Norton Disk Doctorem apod. Dnes to samé poučení čeká na ty, kteří si pletou RAID se zálohou. :-) - to sem chtěl přechozím příspěvkem říct, nebylo to myšleno nijak osobně

Sorry, za offtopic zde.

Citace:

---

Původně odeslal Connor

Kdy například? Bavíme se o domácích podmínkách, nebo už ne?

---

Samozřejmě nejde o domácí podmínky, jinak platí přesně to co píšeš. (i když sám mám už skoro 600GB privátních dat a narůstají čím dál rychleji - viz digitální kamery a rozlišení foťáků).

Chtěl jsem tím naznačit, že i v mnoha profi nasazeních už dnes zálohování suplují různě nastavené RAID pole, protože zálohovat klasickou cestou desítky TB je prostě nereálné.

Citace:

---

Původně odeslal Paolo

Předpokládám, že tam má být 2TB... ;)

Connor má se zálohou naprostou pravdu, ale pro RAID pole hovoří (ne)jeden bonus. Jedním je to, že URE je vyhodnoceno samostatně a pokud je to opravdu URE na disku, tak se data dají vypočítat z ostatních a druhý, že před URE je několik RE, o kterém se řadič RAIDu dozví a je jen na firmware výrobce, zda s tím něco udělá či ne. Totální úmrtí jednoho disku už šanci "na průser" posouvá k vyšší pravděpodobnosti.

Jinak ten výpočet s polem je poněkud zavádějící, protože sice píšeš o 12TB poli, ale z každého disku se přečte jen 2TB... ;)

---

Ted presne nevim co znamena RE a zda se o nem radic resp. OS skutecne dozvi, ale problem je, ze k zadnemu RE dojit vubec nemusi, protoze napr. ty data moc nepouzivame, anebo se jedna o XOR paritu, ktera se IMHO standardne necte (pouze se updatuje pri zapisu). Rekneme tedy, ze mame 12TB pole, do ktereho jenom zapisujeme (backup server) a malo z nej cteme. Najednou, z niceho nic, jeden disk umre, nebo ho RAID vyhodi z pole po URE ci jine chybe, coz se deje pomerne dost casto, predevsim pokud mame v poli 7 disku. Disk tedy vymenime a RAID zacne pole rekonstruovat. Pri tomto procesu musi RAID chte nechte precist celych 12TB ze zbyvajicich disku a protoze URE konstanta 10^14 je stejna pro vsechny disky, je presne 50% sance, ze nastane (dalsi) URE. Ono je totiz bohuzel jedno, zdali tech 12TB precteme z jednoho disku, ci z 6ti, statistika (onen URE udaj) je neuprosna a bohuzel funguje dost spolehlive, pokud se pletu, prosim opravte me. Je tedy presne 50% sance, ze se pole nepodari korektne zrekonstruovat! A nejde jen o URE, jelikoz kapacita disku roste rychleji nez jejich rychlost, trva stale dele, nez se cely disk precte a tedy roste pravdepodobnost, ze se z duvodu nahleho plneho zatizeni disku, ktery se doposud jen flakal, projevi nejake pripadne vyrobni vady, zvysena teplota a pod. Na toto tema existuje spoustastatistik a bohuze potvrzuji, ze nove velke disky jsou na tyto problemy stale vice a vice nachylnejsi.

citace z http://blogs.zdnet.com/storage/?p=164:

Intelligent RAID 6 Theory Overview And Implementation

RAID 5 systems are commonly deployed for data protection in most business environments. However, RAID 5 systems only tolerate a single drive failure, and the probability of encountering latent defects [i.e. UREs, among other problems] of drives approaches 100 percent as disk capacity and array width increase

Every engineer in the RAID business knows this.

Teď v noci se mě už nechce přemejšlet nad pravděpodobností a procentama, ale právě pro tyhle případy umí řadiče plánované kontroly a taky jsou v každým manuálu doporučovaný. Já teda dělám verifikaci tak 2x do měsíce, ale doporučují každých 7 dní. Potom se rizika znatelně snižují (2TB se kontrolují cca 2-4hod podle nastavení priorit).
Krom toho každý slušný řadič umí pokračovat v rekonstrukci i když narazí na chybu na dalším disku. Takže v nejhorším přijdeme jen o jednu část.

Citace:

---

Původně odeslal Connor

to samé poučení čeká na ty, kteří si pletou RAID se zálohou. :-) -

---

Zde bych si dovolil mírně oponovat. Už nějakou dobu nosím v hlavně, jak pořešit zálohování v naší domácí síti (zatím 2 PC). Došel jsem k tomu. Pro méně důležitá data dá do PC Raid1. Středně důležitá data mít na Raidu+záloha na NAS. U extrémně důležitých dat Raid,NAS a zašifrovat a pronajmout si diskový prostor někde na druhé straně světa.

Vymyslené to máš pekne, ale
1. ja by som v tom po čase stratil prehľad.
2. ak mám 600GB extrémne dôležité dáta a 2TB menej dôležité dáta, tak sa takýto systém môže dosť predražiť hlavne ak tie disky majú byť v PC ešte aj v RAID1.

Citace:

---

Původně odeslal e1

..ak mám 600GB extrémne dôležité dáta a 2TB menej dôležité dáta, tak sa takýto systém môže dosť predražiť..

---

Na to je jednoduchá odpověď - záleží jen na tom, nakolik si svoje data ceníš ;)
Ale fakt to není sranda. Já teď plánuju přejít na RAID6 kvůli duální paritě, přitom extrémně důležitý data čas od času přesypu na externí 1TB, ostatní prostě nezálohuju :oops:

V domácích podmínkách si dokážu představit třeba zálohování do vzájemně mezi několika podobně postiženýma na cizí úložiště. Je to "zadarmo", ale provozovatelné jedině někde na sídliši po "lokálu" (a samozřejmě šifrovat)

PS: Nechtělo by to raději samostatnej thread ?

Citace:

---

Původně odeslal e1

Vymyslené to máš pekne, ale
1. ja by som v tom po čase stratil prehľad.
2. ak mám 600GB extrémne dôležité dáta a 2TB menej dôležité dáta, tak sa takýto systém môže dosť predražiť hlavne ak tie disky majú byť v PC ešte aj v RAID1.

---

Samozřejmě....záleží na velikosti dat. Vzhledem k tomu,že u nás se celkové množství dat pohybuje maximálně v řádech stovek gigabajtů a důležitých je maximálně několik desítek GB, tak by bylo pohodlné zálohování na NAS i přes 100 mbit. Ohledně zálohování velmi důležitých dat jde pouze o jejich velikost a kapacity linky. Můj návrh není univerzální, ale pokud se s množství dat pohybuješ do 1TB, tak stačí. Proč ztratil přehled? Na raidu se ti data "zálohují" automaticky. A zálohu na NAS či net budeš dělat každou neděli. Možná zálohování na NAS by šlo zautomatizovat.

Mno nejlevnější je mít všechno na jednom disku a nic nezálohovat...:-) Ohledně většího množství dat bych do PC nasadil pole s Raid5. Samozřejmě, že je to dražší, ale pokud máš extrémně důležitá data, tak jdou peníze dost stranou

Citace:

---

Původně odeslal Mastr

Zde bych si dovolil mírně oponovat. Už nějakou dobu nosím v hlavně, jak pořešit zálohování v naší domácí síti (zatím 2 PC). Došel jsem k tomu. Pro méně důležitá data dá do PC Raid1. Středně důležitá data mít na Raidu+záloha na NAS. U extrémně důležitých dat Raid,NAS a zašifrovat a pronajmout si diskový prostor někde na druhé straně světa.

---

Ale vždyť nijak neoponuješ, pouze "méně důležitá data" nezálohuješ a na tom není nic špatného, pokud ti nebude zas tak moc vadit, když bys o ně přišel....

P.S. Může to někdo odpíchnout do samostatného threadu?

velmi pekna debatka musim uznat, no a pridam sa a musim povedat ze sa mi stalo par krat ze som prisiel o komplet data za x rokov a bolo to tesne pred zalohovanim (vecer som zlial data na jeden disk ostatne preforamtoval nahodil novy system setko bolo pripravene k spatnemu prekopirovaniu ale vecer sa mi to uz nechcelo tak som to nechal na rano a rano ma cakalo nemile prekvapenie kedy disky kde boli moje setky data nenastartoval !!!) - uz to nechcem zazit...
pri najblizssom upgrade HDD by som presiel na nejake pole vidim to na RAID5 s 4x1TB diskami a samozrejme na samostatnom radici
neviem ci je to dobry system zalohy samo je tu aj raid 1 ale ten je nakladnejsi, mozno by stacilo aby sa pred vypnutim pc skopirovali vybrane adresare na dalsi hdd inak to asi nevidim
osobne su pre mna setky data dolezite ale da sa to samozrejme rozdelit na nenahraditelne veci najdolezitejsie 10ky GT, nahraditelne ale ked uz to ma clovek na disku setko rozmiestnene tak je to tazssie znova nahradzat par 100vak GB :) a potom na menej dolezite ktore staci niekde stiahnut ak treba ak nie tak clovek len ziska viac volneho miesta hehe

ad. raid a zalohovani ... hlavne nezapominejte na to, ze kdyz se vam (z libovolnyho duvodu) posere FS, tak vas sebelepsi raid nezachrani, ale obcas naopak prodrazi rekonstrukci ...

ale jak rika jeden znamej ... 'zalohuji jenom srabi' :-D

no nějak si nedovedu představit terrabajty důležitých dat:rolleyes: kapacitu nejvíce žerou multimédia a těch na netu spousty, teď mně napadly možná "specifická" data u "specifické skupiny uživatelů" tam bych bral důležité terra , ale spíše opačně "jak se jich v okamžiku nerekonstruoavaně zbavit" a to si myslím je možné u SSD;)

Citace:

---

Původně odeslal zwierzak

no nějak si nedovedu představit terrabajty důležitých dat:rolleyes: kapacitu nejvíce žerou multimédia a těch na netu spousty, teď mně napadly možná "specifická" data u "specifické skupiny uživatelů" tam bych bral důležité terra , ale spíše opačně "jak se jich v okamžiku nerekonstruoavaně zbavit" a to si myslím je možné u SSD;)

---

zbavit se muzes libovolnych dat zasifrovanych dostatecne silnou sifrou v momente zapomenuti klice ... at uz je to FDE, nebo neco na bazi OS.

a ja treba semtam dohlizim na pole cca 12TB dat v cene par mega ... a ano, jsou to multimedia, resp. jejich RAW material ... tam se zalohuje pomerne casto.

Citace:

---

Původně odeslal zwierzak

no nějak si nedovedu představit terrabajty důležitých dat:rolleyes: ...

---

Analog fotka z kinofilmovýho skeneru má cca 60-90MB *36 = film, filmů mám kolem stovky a rozhodně zatím nemám tolik času všechny zpracovávat do finálního JPG (cca 10-20MB)
DSLR fotka (náhled + RAW) = 6-10MB, počty jdou do tisíců, na jednu stranu hodně je odpad, na druhou stranu spousta "odpadu" zakázky, které musím prostě skladovat
Analog kamera = nagrabované & zpracované video DivX jako 1h film
DV kamera = 1kazeta 12GB + případný střihový projekt

Vynásob si, že fotím asi 20 let, filmuju 8. Stačí pro představu? :cool:

Citace:

---

Původně odeslal Fox!MURDER

ad. raid a zalohovani ... hlavne nezapominejte na to, ze kdyz se vam (z libovolnyho duvodu) posere FS, tak vas sebelepsi raid nezachrani, ale obcas naopak prodrazi rekonstrukci ...

---

Osobně Raid uvažuji jako ochranu proti fyzickému selhání disku. Nic víc, nic míň...

Citace:

---

Původně odeslal Mastr

Osobně Raid uvažuji jako ochranu proti fyzickému selhání disku. Nic víc, nic míň...

---

Přesně k tomu účelu byl stvořen (a já jej také přesně k tomu účelu používám).

Otvírám téma, které mi tu chybí a různě se o něm debatuje v jiných threadech.

Jak zálohovat data v domácích podmínkách?

Jaké způsobem?
Na co zálohovat?
Čím zálohovat?
Podle čeho vybrat způsob zálohování? atd. atd.


P.S. Neřešme tu prosím zálohování firemních serverů a sítí, to nechme tomu kdo
je za to placený, tady by se nám to jen motalo.

P.P.S. Pokud se to sem do sekce opravdu nehodí, prosím admina o přesun, ale vhodnější místo jsem nenašel...

Pro začátek pár tipů k zamyšlení: :-)

1) RAID není zálohování, ale ochrana proti HW chybě
2) způsob a médium na zálohování je vhodné určit podle objemu dat a podle jejich důležitosti - datový objem v domácnostech se může dost lišit, od pár GB dokumentů, přes desítky GB fotek až po stovky GB a TB domácích (i nedomácích) video souborů
3) někomu na zálohu stačí DVD média, někdo koketuje s Bluray disky, někdo používá páskové DAT mechaniky, ale cenově nejdostupnější pro domácnosti se mi jeví externí pevné disky
4) nemyslete jenom na zálohu, ale taky na případnou obnovu :-)
5) zálohování a archivace není totéž - ale pro účely domácnosti si nebudeme hrát se slovíčky a pořešme to jedním šmahem :-)
6) velký objem dat (desítky a stovky GB) některé technologie (DVD) diskvalifikuje, protože to je časově náročné
7) rozdělte si data do skupin podle důležitosti, např.: a) extrémně důležité (dokumenty, účetnictví), b) silně důležité (rodinná fota, videa), c) méně důležité (HDripy, hry, instalačky a jiné snadno obnovitelné zdroje) .... a nejméně důležitou kategorii třeba vůbec nezálohujte nebo jen ponechte zabezpečené RAIDem... ušetří to nervy i peníze
8) zálohujte pravidelně a s rozmyslem... takže nejlépe tu činnost nějak zautomatizujte. Jsou šikovné programy zdarma, např. Cobian Backup
9) než se rozhodnete jak zálohovat, tak se zamyslete proti čemu data chráníte a jaké nebezpečí hrozí: proti HW poruše, proti SW poruše, proti chybě uživatele, proti zloději, proti požáru, apod.
10) pokud chcete zálohovat na věčné časy (tj. archivovat), tak zkuste 2 kopie na různých médiích (třeba DVD-RAM a externí HDD) a uchovejte je na různých místech (šuplík doma, šuplík v práci)

To by asi pro začátek stačilo... :-)

Citace:

---

Původně odeslal Connor

5) zálohování a archivace není totéž - ale pro účely domácnosti si nebudeme hrát se slovíčky a pořešme to jedním šmahem

---

Dovolím si nesouhlasit - přesně toto je zdrojem nedorozumění ve většině diskusí, kde se pletou pojmy a každý mluví o něčem jiném.

Zálohování
- uložení kopie dat se kterými pracuji na "záložní" médium/úložiště
- potřebuji pokud možno rychle mít možnost libovolnou část najít a obnovit
- často se obnovuje, interval záleží na frekvenci změny dat
- vzhledem k použití nemá smysl řešit dlouhodobou trvanlivost médií

Archivace
- přesun části dat (která by nám jinak zabírala cenné místo) na archivační médium/úložiště
- trvanlivost a spolehlivost je nadřazená možnosti rychlé obnovy a dostupnosti (např. umístění na páskách v jiné lokalitě, etc.)
- nejdůležitější je trvanlivost záznamu (médium, technologie, formát)

Aigor: Máš pravdu. A v čem nesouhlasíš? :-)

Když to zjednoduším, tak záloha je další kopie dat (na původním úložišti data zůstanou) a archiv je jediná nebo jediné kopie dat (na původním místě data nezůstanou).

Nesouhlasíš tedy s tím, abychom to řešili najednou? OK, proč ne, ale necháme to ve stejném vlákně. :-)
Modří vědí, ale spousta domácích userů to řešit nebude a jejich cílem je, aby když se jim něco v kompu podělá a přijdou o data, tak aby je někde měli ještě jednou. :-) Na dobu obnovy hledět moc nebudou, hlavně aby to šlo a nestálo to majlant. :-)

Connor:
Samozřejmě jsem pro jedno vlákno - ani nevyvracím tvúj názor, jen po zkušenostech chci na začátku jednoznačně rozlišit tyto dva pojmy. Pochopitelně, že problematika "ukládání" se pro archivaci i zálohování dá řešit najednout.

Nesouhlasím tedy s částí "nebudeme hrát se slovíčky" ;-)

Ber to tak, že pak tady bude user1 tvrdit, že nejlepší záloha je vypálit na DVD a zavézt na chatu a user2 ho bude přesvědčovat, že je to pitomost, protože až bude chtít z toho DVD pár fotek, je pro něj jednodušší vytáhnout ze skříně externí HDD na který přesype fotky každej týden.

Pravdu mají oba, ale hádají o každý o něco jiného. Je proto lepší si na začátku ujasnit pojmy.