Ukratko o RAID-u i poljima, osnovna pitanja te prednosti i nedostaci

[monolithx]

Bubba, gle, došao sam pričati o RAID-u i pitati savjet i čuti iskustva ljudi koji aktivno koriste RAID, te njihova zapažanja.
Apsolutno me ne interesira tvoja dječačka znatiželja niti ogorčenost na balavurdiju koja se svakodnevno kurči tatinim novcem po forumima.
Nemam se što tu pravdati.
Ako možeš pomoći, pomozi; ako ne, nemoj, ali nemoj razgovarati tako sa mnom jer nismo zajedno ovce čuvali.

---

Autor Old Iggy

Ajmo ispocetka:

1. Kad kazes 30 kkn, o cemu govoris? Za 30 kkn kupis mid-range server s dva procesora, 8 GB RAM-a, pravim kontrolerom i 6 do 8 SAS diskova.

Ma radi se o farmi nekakvoj. Manji cluster koji se spaja na malo veći grid.
Radimo rendering i dinamičke analize 3d skenova pomoću raytracea s dinamičkim algoritmima koji se generiraju na osnovu podataka koji se nalaze na Oracle bazi.
Tu su mi daleko bitnije grafičke kartice i cpu nego bilo što drugo jer za dodatni postprocessing koristimo GLSL pa nam je sve malo. Sve radimo sami na desetak računala ukupno. Zato štedim na ostalome maksimalno. Nemam za skupe FireGL kartice i duple Xeone i diskove pa štedim kupujući najbolje što mogu od desktop komponenti za segment koji mi je najmanje bitan. Grafika i cpu su najvazniji, sve je clockano na max. Sam cpu košta 1.5k dolara, svaka graficka jos 1k. Tako da kad uracunas duple 30" monitore ne ostane bas puno za storage. Negdje moram reci stop.

2. Spominjes potrebu brzog pristupa diskovima, a imas i SATA diskove i virtualizaciju? Oboje je no-no za brza polja.

Opet problem: scsi nam je preskup. sata diskovi su više manje solidni, velikog kapaciteta i dovoljno brzi.
Virtualizacija nam treba jer moramo mnogo toga raditi na linuxu, a windows nam je osnova, pa imamo problem. Da se ima novca ne bih to radio u garaži na 2 računala nego hali na 50.

3. Ako se dvoumis izmedju RAID 0 i RAID 10, a imas backup i treba ti prostor, onda idi na RAID 0 jer ti "mali" kontroleri ionako ne mogu progutati toliko da bi se vidjela bitna razlika.

Misliš na povećani bandwidth kod paralelizma u čitanju?

4. Moras vidjeti gdje si spreman na kompromis. S jedne strane dajes dosta jake zahtjeve, s druge se vrtis na SATA diskovima, obicnom kontroleru, virtualiziranim masinama i slicno. To ne hoda. Ili idi step by step pa nabavljaj koliko mozes ili pregrizi i u komadu napravi veliku investiciju. Sam raw kapacitet u pravilu nista ne znaci ako ti je primarna brzina.

Problem je što imamo 3% od budžeta koji bi nam trebao, a radimo stvar koja košta i koja je dosta velik zalogaj za nas.
Da se radi o velikoj firmi, vjerojatno bi oni uložili 3300% našeg novca preko investitora.

5. Moj prijedlog, probaj izracunati I/O zahtjeve, tj daj neke numericke podatke.
6. Kod nas se sve da nabaviti.

[/quote]

A ne znam to izračunati. Evo, kod za projekt trenutno ima 146MB, kod generiranja imam 998 MB objektnog koda (zadnju build). Resursa je oko 16GB i to se radi o čistim matricama. Kad ja to stanem učitavat i zapisivat sve umire.

Dakle, treba mi nešto što stvarno daje na performansama. Ako je moguće.
Ako nije, ništa od toga. Čekat ću još novca pa pljunuti za kontrolere, sas itd.

Ali malo mi je naporno ovo opravdavanje i igranje mačke i miša s nekima.


Hvala na pomoći.

[yedwy]

Kolko sam ja skužio ti imaš - aktualni "otvoreni" projekt koji papa brzinu diskovlja a kapacitet nije tolko strašno opterećen - mislim ako imaš 16GB to je ništa čak i da imaš par instanci nećeš pojesti 600GB koje ti daje RAID 0+1 ali asvejedno - stavi RAID 0 sa 8kb chunkom i 500GB + 500GB incremental backup - kako su ti horza i iggy gore rekli, to je IMHO najprimjerenije za ovo kaj ti imaš iskoristiti kolko se može ali imaj na umu da svi diskovi imaju "rok trajanja" jel i da će prije ili kasnije jedan otegnut...

E sad neznam kako si zamislio backup ali ono budi siguran da je redovit i da je kompletan...

[Old Iggy]

Autor monolithx

A ne znam to izračunati. Evo, kod za projekt trenutno ima 146MB, kod generiranja imam 998 MB objektnog koda (zadnju build). Resursa je oko 16GB i to se radi o čistim matricama. Kad ja to stanem učitavat i zapisivat sve umire.

Dakle, treba mi nešto što stvarno daje na performansama. Ako je moguće.
Ako nije, ništa od toga. Čekat ću još novca pa pljunuti za kontrolere, sas itd.

Ali malo mi je naporno ovo opravdavanje i igranje mačke i miša s nekima.

Hvala na pomoći.

Ma nema frke, probaj startati performance countere na diskovima i posebno obrati paznju na average queue length u citanju i pisanju kod obrade.

[monolithx]

Obavio sam nekoliko testova i čini se da je situacija slijedeća:

1. definitivno je raid brži od single diska, pogotovo kad pišem na istom (virtualnom) disku, što je i najčešći slučaj.
2. najčešći slučaj kopiranja projektnog rezultata (4369 datoteka ili 8.77GB) na single disku je 35-45 MB/s, na (4)RAID0 je 120MB/s a na RAID01 je 65MB/s.
Rezultat na RAID-u 10 je očito zbog sporijeg pisanja, a ne čitanja koje je isto skoro kao na RAID0 polju.

Sad me zanima koliko često mogu očekivati raspad RAID polja. Backup radim sigurno. Dva nova diska sjede u ladici.
Ići na RAID0 i restorati sistem kad se RAID raspadne ili ići na RAID10 i izgubiti 0 vremena.

Koliko je RAID sam od sebe stabilan?

[yedwy]

Ako ti se raspadne RAID polje moraš ga rebuildati, neovisno jer RADI 0, 1 ili 0+1 tj 10 tako da svakako gubiš vrijeme samo ne gubiš podatke ako crkne disk jer imaš mirror dok kod RAID 0 nije slučaj...

Inače ekipa je dosta zadovoljna sa ICH kontrolerom ali naravno to je home okružje...

[monolithx]

Da znam. Desilo mi se nekoliko puta na drugom računalu da mi puca RAID10. Praktički se taj RAID rebuilda u radu. Uopće ne smeta.
Međutim, sad me brine ovo pisanje- gubim li preiše paranojom i odlaskom na raid 10
Vidjet ćemo

[yedwy]

To samo ti znaš ali onaj pad ti je skoro izvjesno uzrokovan lošim (low performance) kontrolerrom, nema dosta cachea da to proguta vjerojatno pa zato slabo ide ruku na srce ali svi ti integrirci su u biti zamišljeni za 2 diska u RAID 0 ili 1 a ne baš za 4 komada u nekim žešćim setupima...

Naravno cjena je ovdje problem pa ono jbga što imaš imaš jel, a sad vidi jel tti bitnija paranoja ili ta ekstra brzina pisanja...

[Old Iggy]

Autor monolithx

Obavio sam nekoliko testova i čini se da je situacija slijedeća:

1. definitivno je raid brži od single diska, pogotovo kad pišem na istom (virtualnom) disku, što je i najčešći slučaj.
2. najčešći slučaj kopiranja projektnog rezultata (4369 datoteka ili 8.77GB) na single disku je 35-45 MB/s, na (4)RAID0 je 120MB/s a na RAID01 je 65MB/s.
Rezultat na RAID-u 10 je očito zbog sporijeg pisanja, a ne čitanja koje je isto skoro kao na RAID0 polju.

Sad me zanima koliko često mogu očekivati raspad RAID polja. Backup radim sigurno. Dva nova diska sjede u ladici.
Ići na RAID0 i restorati sistem kad se RAID raspadne ili ići na RAID10 i izgubiti 0 vremena.

Koliko je RAID sam od sebe stabilan?

RAID polja se tesko "raspadaju", tj. ako dodje do pada jednog diska to se ne smatra posebno velikim problemom. Tome RAID i na kraju sluzi.

Ako radis backup (pazi, minimalno svakodnevni) mozes i na RAID 0. Ne zaboravi da treba vremena za restauraciju stanja.

Autor monolithx

Da znam. Desilo mi se nekoliko puta na drugom računalu da mi puca RAID10. Praktički se taj RAID rebuilda u radu. Uopće ne smeta.
Međutim, sad me brine ovo pisanje- gubim li preiše paranojom i odlaskom na raid 10
Vidjet ćemo

Puca polje ili crkne disk? Ogromna razlika.

Sto se brzine tice, pogledaj ono sto sam ti rekao, queue length pri zapisivanju.

[monolithx]

Mislio sam baš na raspad polja (ako se uopće može desit).
Na RAID10 mi se desilo nekoliko puta da kod rušenja sistema treba recheckat polje što traje sat-dva.
Sad je tu UPS pa nebi trebalo bit strašno. (Usput imaš li preporuku za tihi 1300VA+ UPS (da nije line int.)?).

Kojim alatom gledat performanse diskova?
Kod queua mislip na queue zapisivanja na disk?

Dnevni backup moram radit, ali vjerojatno će bit full backup u 14:00 i 02:00.
To je dovoljno jer radim cijeli image back up.

Odlučio sam na RAID 0 ići. Sat-dva restoranja backupa nije problem. Sumnjam da će sve pasti češće od jednom mjesečno što mogu priuštiti zauzvrat brzine.

[Old Iggy]

Autor monolithx

Mislio sam baš na raspad polja (ako se uopće može desit).
Na RAID10 mi se desilo nekoliko puta da kod rušenja sistema treba recheckat polje što traje sat-dva.

Hm, kod ozbiljnih kontrolera to se ne smije nikada dogoditi.

Autor monolithx

Sad je tu UPS pa nebi trebalo bit strašno. (Usput imaš li preporuku za tihi 1300VA+ UPS (da nije line int.)?).

Socomec Sicon on-line UPS, ali i kosta.

Autor monolithx

Kojim alatom gledat performanse diskova?
Kod queua mislip na queue zapisivanja na disk?

Ako imas Server 2003, imas one performance countere u administrativnim alatima. Bas taj queue. Startaj sve sto moze pratiti zapis da vidis da li je usko grlo disk ili nesto drugo.

Autor monolithx

Dnevni backup moram radit, ali vjerojatno će bit full backup u 14:00 i 02:00.
To je dovoljno jer radim cijeli image back up.

Odlučio sam na RAID 0 ići. Sat-dva restoranja backupa nije problem. Sumnjam da će sve pasti češće od jednom mjesečno što mogu priuštiti zauzvrat brzine.

Ne bi smjelo pasti nikad, osim kod kvara diskova.

[monolithx]

Za UPS mi cijena nije bitna. Treba mi stabilnih 900W reaktivne snage.

Ne, nisam stavio 2003 nego Vistu i na server će ići Server 2008 zbog virtualizacije.

EDIT: Socomec-a nema nigdje na Nabavi

Imaš preporuku za nešto što se da nabavit relativno regularnim putem?

Ne mora bit ultra skupo, al bitno da drži 900W 3 minute i da drži napon stabilno.

[Old Iggy]

Autor monolithx

Za UPS mi cijena nije bitna. Treba mi stabilnih 900W reaktivne snage.

Ne, nisam stavio 2003 nego Vistu i na server će ići Server 2008 zbog virtualizacije.

Ako si knap s parama ne znam da li ima smisla ici na on-line UPS-ove.

A isto tako, kad bi isao na virtualizaciju prije bi uzeo Windows Server 2003 + VMware nego 2008. 2003 je ipak provjereno rock-solid sustav.

[monolithx]

Imam već online UPS i osim što nije dovoljan (600W/1000VA) ima ventilator. Trebam 3 takva, buka koju stvara me dekoncentrira i iritira. Zato želim neki silent model

Što se tiče servera, 2003 nema HyperV A treba nam jer se doslovno paralelno mora izvodit i nix. A za posebne mašine, nema se love.

[Old Iggy]

Autor monolithx

Imam već online UPS i osim što nije dovoljan (600W/1000VA) ima ventilator. Trebam 3 takva, buka koju stvara me dekoncentrira i iritira. Zato želim neki silent model

Što se tiče servera, 2003 nema HyperV A treba nam jer se doslovno paralelno mora izvodit i nix. A za posebne mašine, nema se love.

Onda bolje uzeti jaci pa ga smjestiti negdje sa strane i napraviti razvod.

Hmmm, ja svejedno ne bi isao na novi server...

[yedwy]

Za kućni rad sa RAIDom je dobitak zanemariv, više ćeš dobiti time da istweakaš pošteno sustav i defragaš ga a onda na drugi disk staviš "mlinac" procese kao torrente, virtualnu i ostalo kaj stalno malo po malo šrota po disku tako da nemoraš trpiti premješttanje glave diska sim tam kad nekaj loadaš što treba sistemu ili programima...

[greg SE]

si probao pa znas?
meni recimo radi odlicno i vjeruj mi da se osjeti.
iako sada vec mi postalo sporo, prije godinu i pola kad sam ih ubacio u raid0 bili su jos diskovi neke standardne brzine. ovi novi su pun k brzi, mislim da cu prodati ove i uzeti dva brza gonzalesa i opet ici na raid0

a sto se tice toga kako prvo treba u biosu prebaciti sata u raid mod (obicno pod advanced settings/bios options, ovisno o tipu biosa je naziv drugaciji) i kod boota kada mu izbaci ono press f10 to enter raid bios/settings (opet ovisi o chipu) treba, tko bi rekao, pritisniti f10
zatim new aray (type stripe), dodati ta dva diska u njega i save. to je to.

[yedwy]

Jesam...

Mislim gle vidi se tu i tamo ali neisplativa investicija prostora (RAID 1) većini ljudi koji rade nešto diskovno zahtjevno jednom mjesečno - mene uključivo...

A RAID 0 ipak bez dobrog i redovitog backupa nebi savjetovao nikome...

[Sa_Stilom]

Koristim RAID0 već 5godina, nikad problema...
Razlika se dakako osjeti, i to debelo...

Doduše, Maxline diskovi...

[yedwy]

Pitanje je i što radiš na kanti...

Inače i da si 505 g ja bi svejedno sa RAID 0 tjerao paranoju...

[Sa_Stilom]

Iako imam 600GB prostora, ne koristim nikada više od 300GB.
Raid0 koristim najviše zbog brzine.

Moguće da osobno nikada nisam imao problema, jer sam "pomno" birao svaku komponentu koju sam uzimao.

Trenutno slinim na SSD, čekam da stignu, e to će bit revolucija na kanti...
Ne toliko što će biti duplo brži od mojih diskova (Trenutni BURST Speed je 250MB/s, Average 110MB/s, Random Access: 13,3ms) nego zato što ću moći istovremeno raditi više stvari bez pada perfomansi, te Access time 0.1ms

Na kanti radim svašta ovisi, kako mi radi mašta...

[LiquiD SileNcE]

Da se i ja ubacim. Nemam raid al planiram uskoro preć na raid0. Uglavnom jer moguće na raid polju napraviti particije?

[Sa_Stilom]

Naravno.
Kad diskove staviš u RAID, oni se ponašaju kao jedan disk
Kao i na običnom disku, particije pomažu i kod RAIDa.

(barem u mojoj praksi)

[Lihto]

Autor Sa_Stilom

Trenutno slinim na SSD, čekam da stignu, e to će bit revolucija na kanti...
Ne toliko što će biti duplo brži od mojih diskova (Trenutni BURST Speed je 250MB/s, Average 110MB/s, Random Access: 13,3ms) [/B][/I]

samo jedna paralela koliko su diskovi napredovali, jedan Speedy2 ima average slican ko ova dva maxline-a u RAID 0

[Sa_Stilom]

Kaj da?

Speedy2 - korisnik ili neki disk

Bemti, ja ove diskove kupio, pa ima već 3 godine... I to sam u Switz išao po njih, platio ih 2400kn, dok su kod nas koštali 5500kn...

Zel sam ih, jer kad su izašli bili su bolji od 2xRaptor 74GB (raid0), a daleko daleko tiši...

[Lihto]

Autor Sa_Stilom

Kaj da?

Speedy2 - korisnik ili neki disk

Bemti, ja ove diskove kupio, pa ima već 3 godine... I to sam u Switz išao po njih, platio ih 2400kn, dok su kod nas koštali 5500kn...

Zel sam ih, jer kad su izašli bili su bolji od 2xRaptor 74GB (raid0), a daleko daleko tiši...

pa nije valjda vec 3god proslo,sjecam se ja kad si uzimao to,pod speedy2 mislim na novi seagate 320gb sa jednom plocom,neznam ako si gledao malo teme pod diskovima...

[majk]

Nekoliko pitanja za znalce:

1. da li RAID moze mijenjati kontrolere ako krepa MBO? Ili je jedna ploca-jedan bios-jedan raid?

2. koliki je data overhead % u RAID0?

3. kako se ponasa RAID0 kad jedan hard pocne krepivati? Iskustva - jel tko sta spasio?

4. kolika je razlika u brzini izmedju "fake" HW RAID-a, LVM-a u Win-u ili RAID-a u Lin-u? Iskustva? Da li LVM moze promijeniti komp bez gubitka RAID-a?

[Sa_Stilom]

2 i pol godine... (no opet, vrijeme leti...)

Baš gledam onaj tvoj review tamo, pa Avarage u RAID0 je jednak mojim diskovima u RAID0. Doduša, imaš veći Burst, i veći Access...

Al, što je jest, napreduju dosta brzo...

edit: moraju nam nekak pare musti

[DiSc-jOcKeY]

Autor greg SE

si probao pa znas?
meni recimo radi odlicno i vjeruj mi da se osjeti.
iako sada vec mi postalo sporo, prije godinu i pola kad sam ih ubacio u raid0 bili su jos diskovi neke standardne brzine. ovi novi su pun k brzi, mislim da cu prodati ove i uzeti dva brza gonzalesa i opet ici na raid0

a sto se tice toga kako prvo treba u biosu prebaciti sata u raid mod (obicno pod advanced settings/bios options, ovisno o tipu biosa je naziv drugaciji) i kod boota kada mu izbaci ono press f10 to enter raid bios/settings (opet ovisi o chipu) treba, tko bi rekao, pritisniti f10
zatim new aray (type stripe), dodati ta dva diska u njega i save. to je to.

******************************************************************

[Sa_Stilom]

Autor majk

Nekoliko pitanja za znalce:

1. da li RAID moze mijenjati kontrolere ako krepa MBO? Ili je jedna ploca-jedan bios-jedan raid?


2. koliki je data overhead % u RAID0?

3. kako se ponasa RAID0 kad jedan hard pocne krepivati? Iskustva - jel tko sta spasio?

4. kolika je razlika u brzini izmedju "fake" HW RAID-a, LVM-a u Win-u ili RAID-a u Lin-u? Iskustva? Da li LVM moze promijeniti komp bez gubitka RAID-a?

Evo moja osobna iskustva:
1.
Mijenjanje ploče s istim čipsetom, RAID ostaje stabilan.
Mijenjanje ploče s drugačijim čipsetom - rušenje i instalacija ponovnog RAID0

3. Ja sam uspio sve spasiti, kažu ovdje ("lucky").
- Doduše, dosta yebade, radio sam "Disk Image kojih 60GB" na drugi disk, i onda s Image Explorerom izvlačio što mi je trebalo

Autor DiSc-jOcKeY

******************************************************************

Al ako ništa, čovjek je dobro rekao za kontroler...

Autor Lihto

samo jedna paralela koliko su diskovi napredovali, jedan Speedy2 ima average slican ko ova dva maxline-a u RAID 0

Gledam baš ovo:
Jedna slikica do 50k može, ostalo mora u thumbs :-)


Isseee....
Onda nisam trebal kupovat SSDovce Mogel sam bez beda zet 4 takva i u RAID

[majk]

Autor Sa_Stilom

Evo moja osobna iskustva:
Mijenjanje ploče s drugačijim čipsetom - rušenje i instalacija ponovnog RAID0

"rusenje" podrazumjeva napraviti novo raid polje i zaboraviti sve sta je bilo prije na diskovima?

Autor Sa_Stilom

Evo moja osobna iskustva:
3. Ja sam uspio sve spasiti, kažu ovdje ("lucky")

Da li ima RAID neki "compatibility mod" da rade "DOS" programi tipa Acronis ili Ghost, ili nista bez RAID drivera (live linux distra)?

Riskantno bi bilo staviti 2x500 u RAID0 to je je**** puno izgubljenih podataka ako se nesto dogodi