Domaci datovy server, jaky OS?

[Dix]

Mam doma postaveny datovy server, Celeron 420, 4gb ram, nejaka gigabyte green deska a zakladni grafika. Na tom bezi 4-6 disku (1 - 1.5tb) s ruznymi typy dat, jako hlavne fotky, zalohy filmu a hudby, zalohy her, instalacky atd. Driv tam byli XP, ale protoze je nutnost hotswap, tak byl problem, ze se pri kazdym vyndani disku zprehazely jmenovky disku, nebylo to stabilni a navic to bylo docela pomaly pri pripojeni vic pc. Ted tam uz nejakou dobu jsou Visty, neni to spatny, ale zas je to nestablini. A neprehazuje jmenovky. Uz je to zase tak rozbombardovany, ze je na case dalsi preinstalace, ale co tam dat? W7? Linux? Vicemene se nicemu nebranim, staci pristupnost z windows, neprehazovani jmenovek, wakeup po siti a funkcnost s WD TV live (prepokladam, ze to by nemel bejt problem). Diky

[Peca-on-line]

Pokud je to nestabilní, nebude problém v OS, ale někde ovladačích nebo hw. XP ani jiný Widle sami od sebe nepadaj (většinou :-P). Co by tě mohlo zajímat jeko OS je http://freenas.org/

[monsoon]

Pokud to ma slouzit skutecne jen na data, tak asi solaris kvuli zfs, jednodussi varianta je samozrejem linux s nejakym md raidem. Jaky linux, to uz zalezi, co kdo zna, na tohle neni potreba skoro nic a ten zaklad je vsude stejnej (jadro, mdadm, samba).

[Dix]

Pokud je to nestabilní, nebude problém v OS, ale někde ovladačích nebo hw. XP ani jiný Widle sami od sebe nepadaj (většinou :-P). Co by tě mohlo zajímat jeko OS je http://freenas.org/

Jj, problem as v ovladaci radice disku, pouzivanej je interni. Pokud je tam vic pristupu najednou, tak Visty proste lehnou. Ale XP byly v tomhle ohledu stabilni, hot swap se jim moc nelibil. Free NAS vypada zajimave, urcite zkusim, diky. Nic moc od toho stejne nechci, jako testovaci aplikacni stejne pouzivam notebook .

[Dix]

Pokud to ma slouzit skutecne jen na data, tak asi solaris kvuli zfs, jednodussi varianta je samozrejem linux s nejakym md raidem. Jaky linux, to uz zalezi, co kdo zna, na tohle neni potreba skoro nic a ten zaklad je vsude stejnej (jadro, mdadm, samba).

A je neco co by jsi mi mohl doporucit? (krome uz zminenyho freenas, ktery zusim zitra) Nechce se mi s tim moc delat, idealni by byla distribuce primo na tohle pouziti, urcite neco existuje, ale v linuxu nedelam.

[Fox!MURDER]

Pokud to ma slouzit skutecne jen na data, tak asi solaris kvuli zfs, jednodussi varianta je samozrejem linux s nejakym md raidem. Jaky linux, to uz zalezi, co kdo zna, na tohle neni potreba skoro nic a ten zaklad je vsude stejnej (jadro, mdadm, samba).

popr linux s btrfs ... bohuzel zatim neumi r3/r5, ale r1/r10 ano

[monsoon]

popr linux s btrfs ... bohuzel zatim neumi r3/r5, ale r1/r10 ano

v btrfs vkladam velke nadeje, ale data bych na to prozatim nedaval.
jedu na jsf.

[Marty]

Hlasuju za linux, na tohle použití jsou windows IMHO dost nevhodné.

Jestli se ptáš jaký, tak FreeNAS jako plug-and-play je fajn. Pokud přímo nějaká standardní distribuce, tak zkus ubuntu server. Já mám na svém NASu Debian, což je ubuntu v bleděmodrém.

[Matess]

zdravim, resil jsem velice podobny problem a nahodil jsem freenas. Mam gigabyte EP35-DS3 4x sata z chipsetu, 2x sata z pridavneho radice. 6 disku samsung 1,5TB 5k4 rpm, cpu celeron 1,8GHz verzi free nas mam stable 0.7.2 v amd64 provedeni (i386 padala). Vytvoril jsem ekvivalent k raidu 5 v ZFS, rozjel sambu a vse se zdalo byt v poradku. Nahral jsem tam zalohu zpet (coz trvalo nekolik dni) a ted kdyz uz ji nemam zjistuji ze to nejak blbne. Kdyz tam koukam na fotky, tak se kolikrat otevrou poskozene... kdyz je otevru znovu tak je to ok. Kdyz se z tama snazim instalovat nejakou hru, tzn image pripojim pres daemona, tak zkoncim po chvilce ze z CD nejde cist. Pritom treba serialy a mp3 jsou bez problemu jen u DVD se mi obcas stane ze zaskrbtne na 500ms jednou za hodinu... Kdyz po nem napriklad chci vytvorit playlist z mp3 ve winampu, tak to bezi nejakou dobu a je tak 50% sance ze se to povede, ale taky je tam docela velka ze se to nepovede. Vcera jsem tu chybu stihnul vyfotit takze tady je:

http://img109.imageshack.us/img109/8743/dscf0022u.jpg (nicmene pak jsem ten obrazek nahral blbec na NAS)

Pokud je tu nekdo kdo se v tom vyzna a je schopen mi neco zjistit klidne tomu nasu dam verejnou adresu a pustim ho do toho... Nejvic me vytaci ze uz nemam zadnou zalohu a nevim v jakem stava ta data vlastne jsou.

Prosim pomozte

[Peca-on-line]

Pokud se poškozená fotka napodruhý otevře v pořádku => data jsou ok, problém je někde na trase. Moje osobní sázka je nalomenej kabel, nebo blbej kontakt v nějakým konktoru, ale může to bejt víc věcí.

[Matess]

a ted se zeptam trosku hloupe protoze se smb nemam moc zkusenosti.. to tam neni neco jako CRC aby byla jistota ze data dorazi v poradku? Napriklad nejsem schopen precist zadny image file korektne.. vzdy to najde nejakou chybu. Snizeni prenosover rychlosti site na 100Mb/s take nepomaha. Jiny sitovy kabel to stejne.

Mam takovy pocit ze tu nekolik denni zalohu jsem delat nemusel protoze jsem uz o data pravdepodobne z velke miry prisel.

[Peca-on-line]

Koukám, že jsem tu myšlenku nedotáhnul do konce, myslel jsem kabely deska <=> disk. Kontrolní součty se samozřejmě používají a to na různejch úrovních, ale to ještě neznamená, že nemůže projít chyba. Složitej kontrolní algoritmus zdržuje a zvětšuje objem přenášených dat, naopak čím jednodušší, tím náchylnější k propouštění chyb. Další vrstva (třeba ten ethernet) už se pak stará jen o to, že data doručí, tak jak je dostala, nezkoumá co posílá.

EDIT: Je otázka jestli ti to ty data prasí jen při čtení (z dosavadního popisu imho pravděpodobnější), nebo i při zápisu. Kdyby jen při čtení, přijdeš jen o to, co jsi s chybou přečetl a znova zapsal, ale pokud i při zápisu, tak to upřímnou soustrast.

[Matess]

no uprime jak na to mam prijit? jedine ze bych zkusil nejaka data ktera vim ze jsou funkcni nahrat po siti do nas a potom pripojit treba SD kartu kam bych to prekopiroval a otestoval....

[Peca-on-line]

No je to dost prekérní situace. Jsi schopnej se nějak dostat k výpisu SMART hodnot u jednotlivejch disků? Jestli ano, tak to bych udělal jako první a hledal jakýkoliv anomální hodnoty, hlavně u položek typu checksum error. Pokud se ke SMARTu nedostaneš nebo jako druhej krok bych tu bednu rozdělal a omrknul kabely. Pokud máš náhradní, tak ty co ti přijdou něčím podezřelý vyměň (starý zatím nevyhazuj, můžou bejt ok). U všech ostatních nebo pokud náhradní nemáš doporučuju alespoň odpojit, očistit kontakty a zase připojit.

Napiš jak jsi dopadl a pokdle toho kdyžtak vymyslíme další postup.

[Matess]

kabely jsou opticky v poradku... pouzival jsem je predtim v pc (disky jely normalne jenom jsem si rekl ze by bylo fajn oddelit si raid pole od systemu)

vypisy ze smartu mam... nestudoval jsem je presne, ale pise to na konci no errors logged

zkusil jsem tam neco funkcniho po siti nahrat a potom prekopirovat pres web management na usb disk ktery jsem primountoval do systemu a hodilo mi to nejaky error ze cannot read v logu se mi objevilo tohle:

Dec 17 19:09:36 freenas root: ZFS: checksum mismatch, zpool=Raid5 path=/dev/ad14 offset=150103699968 size=26112
Dec 17 19:07:23 freenas smbd[2129]: send_file_readX: sendfile failed for file Data/hry/ut04/UT04.nrg (Input/output error). Terminating
Dec 17 19:07:23 freenas smbd[2129]: [2010/12/17 19:07:23.944701, 0] smbd/reply.c:3517(send_file_readX)
Dec 17 19:07:23 freenas root: ZFS: zpool I/O failure, zpool=Raid5 error=86
Dec 17 19:07:23 freenas root: ZFS: checksum mismatch, zpool=Raid5 path=/dev/ad6 offset=515433020416 size=26112
Dec 17 19:07:23 freenas root: ZFS: checksum mismatch, zpool=Raid5 path=/dev/ad4 offset=515433020416 size=26112
Dec 17 19:07:23 freenas root: ZFS: checksum mismatch, zpool=Raid5 path=/dev/ad16 offset=515433019904 size=26112
Dec 17 19:07:23 freenas root: ZFS: checksum mismatch, zpool=Raid5 path=/dev/ad14 offset=515433019904 size=26112
Dec 17 19:07:23 freenas root: ZFS: checksum mismatch, zpool=Raid5 path=/dev/ad10 offset=515433019904 size=26624
Dec 17 19:07:23 freenas root: ZFS: checksum mismatch, zpool=Raid5 path=/dev/ad12 offset=515433019904 size=26624
Dec 17 19:07:23 freenas root: ZFS: checksum mismatch, zpool=Raid5 path=/dev/ad6 offset=515433020416 size=26112
Dec 17 19:07:23 freenas root: ZFS: checksum mismatch, zpool=Raid5 path=/dev/ad4 offset=515433020416 size=26112
Dec 17 19:07:23 freenas root: ZFS: checksum mismatch, zpool=Raid5 path=/dev/ad16 offset=515433019904 size=26112
Dec 17 19:07:23 freenas root: ZFS: checksum mismatch, zpool=Raid5 path=/dev/ad14 offset=515433019904 size=26112
Dec 17 19:07:23 freenas root: ZFS: checksum mismatch, zpool=Raid5 path=/dev/ad10 offset=515433019904 size=26624
Dec 17 19:07:23 freenas root: ZFS: checksum mismatch, zpool=Raid5 path=/dev/ad12 offset=515433019904 size=26624


SMART: http://www.edisk.cz/stahni/54752/SMART.txt_24.8KB.html

[Peca-on-line]

Dec 17 19:07:23 freenas root: ZFS: zpool I/O failure, zpool=Raid5 error=86

..tohle bude asi klíčový. Google našel pár lidí, který to hlásilo tenhle problém a moc optimisticky to teda nevyznívá, údajně to může bejt:
1) bug řadiče - není tvůj problém, používáš dva různý
2) bug ve FW disku - jsou disky úplně stejný?
3) vadná RAMka
4) bug v ZFS

Skus se toho zeptat na "zpool status" případně "zpool status -v", jestli mám to něco zajímavýho neřekne.

[Matess]

jj taky jsem googlil, ale moc nadseny jsem z vysledku zrovna nebyl - obvykle jsem tomu moc nerozumel.

disky jsou stejne... kupovane ve stejnou dobu.

vadna ram... mam tu i jine moduly a ano nekompatibilita je mozna. Da se to nejak otestovat abych tu nestrlilel od boku?

bug v zfs.... toho se uprime bojim.

$ zpool status -v
pool: Raid5
state: ONLINE
status: One or more devices has experienced an error resulting in data
corruption. Applications may be affected.
action: Restore the file in question if possible. Otherwise restore the
entire pool from backup.
see: http://www.sun.com/msg/ZFS-8000-8A
scrub: none requested
config:

NAME STATE READ WRITE CKSUM
Raid5 ONLINE 0 0 8
raidz1 ONLINE 0 0 16
ad4 ONLINE 0 0 0
ad6 ONLINE 0 0 0
ad10 ONLINE 0 0 0
ad12 ONLINE 0 0 0
ad14 ONLINE 0 0 1
ad16 ONLINE 0 0 0

errors: Permanent errors have been detected in the following files:

/mnt/Raid5/Data/hry/ut04/UT04.nrg
/mnt/Raid5/Data/mp3/Tanecni Liga 47 - Tanecni Liga 47/13 - The Soundlovers - Living In Your Head.mp3

vzhledem k tomu ze mi tech souboru ale nejede vic... jde udelat nejaky check? snazil jsem se k tomu neco najit a vsude bylo jen napsane ze to dela automaticky samo

[Marty]

1) bug řadiče - není tvůj problém, používáš dva různý
2) bug ve FW disku - jsou disky úplně stejný?
3) vadná RAMka
4) bug v ZFS

1) bych nezatracoval, vzhledem k tomu, že tam má víc disků, je pravděpodobné, že při zápisu bude hrabat na víc než jeden disk. Takže bych 1 nechal jako vysoce pravděpodobné
2) u SW RAIDu bych FW disku nepodezíral
3) taky celkem pravděpodobné, jako 1
4) nevím nevím...

[Peca-on-line]

Takže možnost bugu ve FW disku tu teoreticky je, ale imho malá pravděpodobnost.

RAMku otestuješ snadno - nabootuješ cokoliv co má v sobě Memtest 86+ a necháš ho chíli běžet, doporučuje se 24 hodin, ale většinou rozhoduje první hodina.

Ten zpool status zrovna optimisticky nevypadá a přiznám se, že moc moudrej z toho nejsem. Kontrola se dá spustit i manuálně, viz

Scrubbing is an additional type of data protection available on ZFS. This is a mechanism that performs regular validation of all data. Manual scrubbing can be performed by:
zpool scrub pool-name
The results can be viewed via:
zpool status
Any issues should be cleared with:
zpool clear pool-name
The scrubbing operation walks through the pool metadata to read each copy of each block. Each copy is validated against its checksum and corrected if it has become corrupted.

...ale je otázkou jestli je dobrej nápad pouštět tam něco, co zapisuje, protože pokud tam něco prasí data, mohlo by se to tím ještě zhoršit. Moc zkušeností se ZFS nemám a fakt nerad bych ti poradil blbě, takže tady už si netroufnu říkat ti co máš dělat.

[Matess]

dobra takze si sezenu neco co ma bootovatelny memtest.. nekde jsem to kdysi davno mel... vyhrabu
pokud to teda mohu shrnout tak resime problem kompatibility radice se systemem, nebo vadnou ram. V ethernetu problem neni, disky jsou tez ok.

[Fox!MURDER]

otestoval bych to memtestem a az v pripade, ze si budes jistej, ze je pamet ok, dal na to hrabal.
zvlast ten scrub by ti moh nadelat velkej bordel na tom svazku ....

a btw. podle toho page faultu bych ja tipoval prave tu pamet ...

[Matess]

tolik cerveneho bordelu jsem v memtestu snad jeste nikdy v zivote nevidel. Zkusil jsem 2 jine ram moduly a hazi to chyby mene, ale take, takze to vypada na vadnou zakladni desku (vzal jsem ji z vyrazenych, takze na tom asi neco bude. Sezenu jinou a zkusim to znovu... asi to uz ani nebudu zalohovat nema to smysl...