Raidz eller Raidz2? Vad kör du? Vad föredrar du?

Ju fler diskar desto större argument för att använda raidz2. Jag kör själv med 10 (virtuella) diskar på 500 GB vardera och skillnaden i diskförlust (procentuellt sett) blir då inte stor alls.

Fördelen med att använda raidz2 är att du inte har samma behov av att skaffa sig en ny disk så fort som möjligt. Man kan oftast glatt skicka in sin disk på reparation/utbyte och fortfarande sova gott på kvällarna.

ps. I just mitt fall så är det också lite speciellt då jag använder mig av super billiga SATA kontrollers från eBay. Jag vill ogärna att min array ska dyka om en av kontrollerna dör. Då varje kontroller har två diskar ikopplade så gör raidz2 så att jag inte bara kan tappa två diskar och fortfarande ha all data intakt men även om jag tappar en hel kontroller.

Jag är på gång att migrera till raidz2 från raidz1. Anledning är främst att jag vill ha högre datasäkerhet och att jag aldrig någonsin kan motivera för mig själv att ha en hotspare-disk i min hemmaserver. Att jag tappar lite plats känns inte så viktigt, jag har ändå så det bör räcka tills det är dags att byta ut diskarna pga hög ålder (garantin har gått ut)

Raidz2 känns som en lagom kompromiss för min del.

Tekniskt sett kör jag VMware ESXi 4.0 men det mesta av utrymmet är dedikerat till den virtuella NFS/Samba servern som just nu kör FreeBSD 8.0-Current (kompilerad någon gång runt maj; planerad att uppgraderas till den stabila versionen (även om den nuvarande är fullständigt stabil för mig) som planeras att släppas om någon månad). Diskarna är inte riktigt 10 st 500GB diskar utan tre av dem är aningen större (640GB and 1TB) och innehåller dem virtuella system-diskarna (mjukvaru-raid-1 med tre diskar i varje virtuellt system).

SATA-kontrollerkorten är två (egentligen tre men har inte tillräckligt många PCI platser på mitt Asus P5Q Deluxe) kort hittad på eBay och som kör SiI 3114 kretsen. Jag har ett annat bättre PCI-Express kort, men tyvärr är VMware ESXi väldigt kräsen på vilka komponenter som man kan ha.

Tidigare körde jag FreeBSD direkt, utan någon virtualisering, och då fungerar det självklart i princip med all vanlig hårdvara.

När man läser lite utav seriösa sysadmins så rekommenderar alla de raidz2. De säger att om en disk kraschar, så kan det hända att en till disk kraschar när du bytt ut den trasiga disken till en ny. En till disk kan krascha pga det blir mycket stress på diskarna när man försöker återskapa raidet med den nya disken. Och då har 2 diskar kraschat inom kort tid, och det är då kört med raidz1. Detta gäller alla raid-5 också, förstås. Detta händer oftare än man tror, säger de.

Nu i efterhand känner jag mig lite orolig med raidz1 och har funderat på raidz2 lite halvseriöst. Om en disk kraschar, och jag byter ut den till en ny, så kommer jag sitta som på nålar tills raidet återskapats. Tänk om en till disk kraschar under återskapandet?

Jag har hört att varje minnessticka drar runt 10W. Så det är bättre med 2st 4GB stickor (20W) än 4st 2GB stickor (40W).

EDIT: Din freebsd tråd visar hyfsade "iozone" prestanda för 24 diskar som 3st raidz2:

"Write speeds range from 236 MBytes/sec to 582 MBytes/sec for sequential; and from 242 MBytes/sec to 550 MBytes/sec for random.

Read speeds range from 3.3 GBytes/sec to 5.5 GBytes/sec for sequential; and from 1.8 GBytes/sec to 5.5 GBytes/sec for random."

Jag tror att du missuppfattat något... JBOD krävs inte för att ZFS skall fungera. Att köra ZFS på en JBOD-volym undergräver i princip hela idén med ZFS och i all synnerhet idén med RAIDZ.

En vild gissning; alla kontroller som stödjer JBOD, kan köra diskarna i single mode..? Kanske därför dom söker efter JBOD-stöd hos kontrollern?
Alltså, ett raidkort utan JBOD-stöd kan inte köra en ensam disk? Endast 2 eller fler diskar i raid.
Men jag kan nog vara helt fel ute här..

EDIT:

(http://en.wikipedia.org/wiki/Standard_RAID_levels)

Jag är inte helt fel ute även om jag inte var helt rätt heller
Läs stycket under "Concatenation (SPAN)"

Detta får alltså raidkortet att agera som ett enkelt kontrollerkort.
(Tyvärr säljs inte kontrollerkort med mer än 4 portar, mig veterligen.. så man får vackert punga ut med raidkort om man vill ha fler portar.)

I stand corrected!
Har aldrig sett rena kontrollerkort som det innan. Lite synd att det är PCI-X dock. Hade gärna sett en version med PCIe. (Annars måste man leta upp moderkort med PCI-X; menar inte att PCI-X är dåligt, det klarar ju uppenbarligen av bandbredden för de 8 diskarna)

*Suck.*

För ZFS så ska man fullständigt strunta i om korten/chipsen klarar JBOD/RAID. Det enda som spelar roll här är om operativsystemet kan se diskarna individuellt (och självklart förmågan att boota från dem).

OpenSolaris rekommenderar kort med JBOD stöd eftersom vissa RAID kort annars endast klarar av att köra RAID (med flera diskar).

Nej, mitt tips här är att hitta ett hyfsat moderkort baserat på P45/ICH10 (R eller inte spelar ingen roll) och med ett stort antalt SATA portar från kontrollern i fråga. Om ännu fler diskar behövs så kan man börja överväga extra SATA kontrollerkort (icke-RAID varianter duger utmärkt, då dem oftast är mycket billigare).

Att använda Workstation/Server moderkort med stöd för ECC är intressant, men oftast ack så mycket dyrare.

Jag tänkte använda mig av min vän rsync och mellanlagra på annan disk. Eller möjligen tar. Inte så avancerat men jag tror det komner att fungerar. Men det får bli i höst eller när regnet kommer...

Med en fullbackup som är tillgänglig "online" så skulle inte jag heller anse att raidz2 är nödvändigt.

Kör rsync eller zfs send och zfs receive, om du ska mellanlagra. Med zfs send/receive måste du först göra en snapshot, och det är den snapshoten som skickas vidare. Efteråt raderar du snapshoten så är allt som förrut.

raidz3 är på väg. Kommer i build 120 tror jag.

Detta borde innebära att dom kommer rekommendera ungefär 10-12 diskar, mot raidz2'ans rekommenderade 6-8 diskar per pool?

Trevliga nyheter dock, för dom som kommer behöva det

Det är bara företag i skarp drift som lär behöva det. Men jag har upptäckt att jag tror inte jag behöver fler än 5 diskar. Om jag vill expandera så byter jag ut mina 1TB diskar mot 2TB eller 3TB som kommer om ett tag. Det jag försöker säga är att det kanske är onödigt att stoppa in 10-20 små diskar i sin dator. Det är bättre att köra några få stora, och sen byta ut dem mot större än att adda grupper av diskar till sitt ZFS raid, hela tiden. 10-20 små diskar tar upp massa plats, låter mycket och drar ström. Visst, du får högre genomströmning och snabbare och säkrare (om du kör raidz2) - men ändå. Du kan ju inte minska antal diskar i en pool - än så länge.

Hehe, man ska ha hårdvara som klarar av att få igenom all den informationen också
Jag har svårt att se någon privatperson som behöver 10-20 diskar och all den genomströmningen. Säkerheten säger jag inget om, den är högst önskvärd för alla! Synd att inte alla filsystem har samma principer.

Jag tror precis som du att runt 6st diskar är väldigt bra balanserat för en hemanvändare om man ska använda en filserver med ZFS.

-- OffTopic
Nu ska jag studera i 3 år till att börja med, men har redan börjat spåna på ett serverbygge jag ska införskaffa mig när det lider. Chieftec har fina 2x5.25" hotswap fack, som ger 3st 3.5" fack. Ihop med ett 4U rack, med 10st 5.25" (det finns i skrivande stund i Dustin.se's sortiment, minns ej namnet) blir det ett trevligt bygge, som jag tänkte placera i ett kommande garageförråd; slippa installera värme i garagebyggnaden
Hade tänkt använda mig utav 6-8 diskar, och något ZFS-operativ samt bra stöd för virtualisering.

Sen använda mig utan tunna klienter i huset som är kopplade till detta rack med, vid den tidpunkten, bra och beprövad teknik, 10 Gbit eller vad det nu månde vara. En rejäl burk i garaget som jag slipper höra när jag sitter vid datorn (denna burken låter som en bordsfläkt numera, med full folding och dubbla radiatorer..)

Det är min lilla våta dröm ..
-- /OffTopic

EDIT
Chassit är ett Chieftec UNC-410F. 3 795 kr.
Hotswapkassetten är Chieftec 2x5.25" till 3x3,5". 775kr/st. 3-4st ger 9-12 diskar.
(Chassit står inte med i kompabilitetslistan dock, men den måste inte vara komplett antar jag, håller hoppet uppe)
Detta skulle isf landa på "bara" .. 6895kr för 4st kassetter och chassi. "ouch".

EDIT 2
Den mittersta av dessa är det jag tänkt mig.

Och chassit i fråga..