PC Ekspert Forum

PC Ekspert Forum (https://forum.pcekspert.com/index.php)
-   Diskovi SSD/HDD (https://forum.pcekspert.com/forumdisplay.php?f=33)
-   -   Ukratko o RAID-u i poljima, osnovna pitanja te prednosti i nedostaci (https://forum.pcekspert.com/showthread.php?t=62627)

monolithx 09.02.2008. 01:05

Bubba, gle, došao sam pričati o RAID-u i pitati savjet i čuti iskustva ljudi koji aktivno koriste RAID, te njihova zapažanja.
Apsolutno me ne interesira tvoja dječačka znatiželja niti ogorčenost na balavurdiju koja se svakodnevno kurči tatinim novcem po forumima.
Nemam se što tu pravdati.
Ako možeš pomoći, pomozi; ako ne, nemoj, ali nemoj razgovarati tako sa mnom jer nismo zajedno ovce čuvali.

---

Citiraj:

Autor Old Iggy (Post 946831)
Ajmo ispocetka:

1. Kad kazes 30 kkn, o cemu govoris? Za 30 kkn kupis mid-range server s dva procesora, 8 GB RAM-a, pravim kontrolerom i 6 do 8 SAS diskova.

Ma radi se o farmi nekakvoj. Manji cluster koji se spaja na malo veći grid.
Radimo rendering i dinamičke analize 3d skenova pomoću raytracea s dinamičkim algoritmima koji se generiraju na osnovu podataka koji se nalaze na Oracle bazi.
Tu su mi daleko bitnije grafičke kartice i cpu nego bilo što drugo jer za dodatni postprocessing koristimo GLSL pa nam je sve malo. Sve radimo sami na desetak računala ukupno. Zato štedim na ostalome maksimalno. Nemam za skupe FireGL kartice i duple Xeone i diskove pa štedim kupujući najbolje što mogu od desktop komponenti za segment koji mi je najmanje bitan. Grafika i cpu su najvazniji, sve je clockano na max. Sam cpu košta 1.5k dolara, svaka graficka jos 1k. Tako da kad uracunas duple 30" monitore ne ostane bas puno za storage. Negdje moram reci stop.

Citiraj:

2. Spominjes potrebu brzog pristupa diskovima, a imas i SATA diskove i virtualizaciju? Oboje je no-no za brza polja.
Opet problem: scsi nam je preskup. sata diskovi su više manje solidni, velikog kapaciteta i dovoljno brzi.
Virtualizacija nam treba jer moramo mnogo toga raditi na linuxu, a windows nam je osnova, pa imamo problem. Da se ima novca ne bih to radio u garaži na 2 računala nego hali na 50. :D

Citiraj:

3. Ako se dvoumis izmedju RAID 0 i RAID 10, a imas backup i treba ti prostor, onda idi na RAID 0 jer ti "mali" kontroleri ionako ne mogu progutati toliko da bi se vidjela bitna razlika.
Misliš na povećani bandwidth kod paralelizma u čitanju?

Citiraj:

4. Moras vidjeti gdje si spreman na kompromis. S jedne strane dajes dosta jake zahtjeve, s druge se vrtis na SATA diskovima, obicnom kontroleru, virtualiziranim masinama i slicno. To ne hoda. Ili idi step by step pa nabavljaj koliko mozes ili pregrizi i u komadu napravi veliku investiciju. Sam raw kapacitet u pravilu nista ne znaci ako ti je primarna brzina.
Problem je što imamo 3% od budžeta koji bi nam trebao, a radimo stvar koja košta i koja je dosta velik zalogaj za nas.
Da se radi o velikoj firmi, vjerojatno bi oni uložili 3300% našeg novca preko investitora.

Citiraj:

5. Moj prijedlog, probaj izracunati I/O zahtjeve, tj daj neke numericke podatke.
6. Kod nas se sve da nabaviti. :D
[/quote]

A ne znam to izračunati. Evo, kod za projekt trenutno ima 146MB, kod generiranja imam 998 MB objektnog koda (zadnju build). Resursa je oko 16GB i to se radi o čistim matricama. Kad ja to stanem učitavat i zapisivat sve umire.

Dakle, treba mi nešto što stvarno daje na performansama. Ako je moguće.
Ako nije, ništa od toga. Čekat ću još novca pa pljunuti za kontrolere, sas itd.

Ali malo mi je naporno ovo opravdavanje i igranje mačke i miša s nekima.


Hvala na pomoći.

yedwy 09.02.2008. 08:42

Kolko sam ja skužio ti imaš - aktualni "otvoreni" projekt koji papa brzinu diskovlja a kapacitet nije tolko strašno opterećen - mislim ako imaš 16GB to je ništa čak i da imaš par instanci nećeš pojesti 600GB koje ti daje RAID 0+1 ali asvejedno - stavi RAID 0 sa 8kb chunkom i 500GB + 500GB incremental backup - kako su ti horza i iggy gore rekli, to je IMHO najprimjerenije za ovo kaj ti imaš iskoristiti kolko se može ali imaj na umu da svi diskovi imaju "rok trajanja" jel i da će prije ili kasnije jedan otegnut...

E sad neznam kako si zamislio backup ali ono budi siguran da je redovit i da je kompletan...

Old Iggy 09.02.2008. 22:21

Citiraj:

Autor monolithx (Post 946905)
A ne znam to izračunati. Evo, kod za projekt trenutno ima 146MB, kod generiranja imam 998 MB objektnog koda (zadnju build). Resursa je oko 16GB i to se radi o čistim matricama. Kad ja to stanem učitavat i zapisivat sve umire.

Dakle, treba mi nešto što stvarno daje na performansama. Ako je moguće.
Ako nije, ništa od toga. Čekat ću još novca pa pljunuti za kontrolere, sas itd.

Ali malo mi je naporno ovo opravdavanje i igranje mačke i miša s nekima.

Hvala na pomoći.

Ma nema frke, probaj startati performance countere na diskovima i posebno obrati paznju na average queue length u citanju i pisanju kod obrade.

monolithx 09.02.2008. 23:53

Obavio sam nekoliko testova i čini se da je situacija slijedeća:

1. definitivno je raid brži od single diska, pogotovo kad pišem na istom (virtualnom) disku, što je i najčešći slučaj.
2. najčešći slučaj kopiranja projektnog rezultata (4369 datoteka ili 8.77GB) na single disku je 35-45 MB/s, na (4)RAID0 je 120MB/s a na RAID01 je 65MB/s.
Rezultat na RAID-u 10 je očito zbog sporijeg pisanja, a ne čitanja koje je isto skoro kao na RAID0 polju.

Sad me zanima koliko često mogu očekivati raspad RAID polja. Backup radim sigurno. Dva nova diska sjede u ladici.
Ići na RAID0 i restorati sistem kad se RAID raspadne ili ići na RAID10 i izgubiti 0 vremena.

Koliko je RAID sam od sebe stabilan?

yedwy 10.02.2008. 00:00

Ako ti se raspadne RAID polje moraš ga rebuildati, neovisno jer RADI 0, 1 ili 0+1 tj 10 tako da svakako gubiš vrijeme samo ne gubiš podatke ako crkne disk jer imaš mirror dok kod RAID 0 nije slučaj... ;)

Inače ekipa je dosta zadovoljna sa ICH kontrolerom ali naravno to je home okružje...

monolithx 10.02.2008. 01:31

Da znam. Desilo mi se nekoliko puta na drugom računalu da mi puca RAID10. Praktički se taj RAID rebuilda u radu. Uopće ne smeta.
Međutim, sad me brine ovo pisanje- gubim li preiše paranojom i odlaskom na raid 10 :)
Vidjet ćemo:)

yedwy 10.02.2008. 08:07

To samo ti znaš ali onaj pad ti je skoro izvjesno uzrokovan lošim (low performance) kontrolerrom, nema dosta cachea da to proguta vjerojatno pa zato slabo ide ruku na srce ali svi ti integrirci su u biti zamišljeni za 2 diska u RAID 0 ili 1 a ne baš za 4 komada u nekim žešćim setupima... :)

Naravno cjena je ovdje problem pa ono jbga što imaš imaš jel, a sad vidi jel tti bitnija paranoja ili ta ekstra brzina pisanja...

Old Iggy 10.02.2008. 15:09

Citiraj:

Autor monolithx (Post 947661)
Obavio sam nekoliko testova i čini se da je situacija slijedeća:

1. definitivno je raid brži od single diska, pogotovo kad pišem na istom (virtualnom) disku, što je i najčešći slučaj.
2. najčešći slučaj kopiranja projektnog rezultata (4369 datoteka ili 8.77GB) na single disku je 35-45 MB/s, na (4)RAID0 je 120MB/s a na RAID01 je 65MB/s.
Rezultat na RAID-u 10 je očito zbog sporijeg pisanja, a ne čitanja koje je isto skoro kao na RAID0 polju.

Sad me zanima koliko često mogu očekivati raspad RAID polja. Backup radim sigurno. Dva nova diska sjede u ladici.
Ići na RAID0 i restorati sistem kad se RAID raspadne ili ići na RAID10 i izgubiti 0 vremena.

Koliko je RAID sam od sebe stabilan?

RAID polja se tesko "raspadaju", tj. ako dodje do pada jednog diska to se ne smatra posebno velikim problemom. Tome RAID i na kraju sluzi.

Ako radis backup (pazi, minimalno svakodnevni) mozes i na RAID 0. Ne zaboravi da treba vremena za restauraciju stanja.

Citiraj:

Autor monolithx (Post 947701)
Da znam. Desilo mi se nekoliko puta na drugom računalu da mi puca RAID10. Praktički se taj RAID rebuilda u radu. Uopće ne smeta.
Međutim, sad me brine ovo pisanje- gubim li preiše paranojom i odlaskom na raid 10 :)
Vidjet ćemo:)

Puca polje ili crkne disk? Ogromna razlika.

Sto se brzine tice, pogledaj ono sto sam ti rekao, queue length pri zapisivanju.

monolithx 10.02.2008. 18:19

Mislio sam baš na raspad polja (ako se uopće može desit).
Na RAID10 mi se desilo nekoliko puta da kod rušenja sistema treba recheckat polje što traje sat-dva.
Sad je tu UPS pa nebi trebalo bit strašno. (Usput imaš li preporuku za tihi 1300VA+ UPS (da nije line int.)?).

Kojim alatom gledat performanse diskova?
Kod queua mislip na queue zapisivanja na disk?

Dnevni backup moram radit, ali vjerojatno će bit full backup u 14:00 i 02:00.
To je dovoljno jer radim cijeli image back up.

Odlučio sam na RAID 0 ići. Sat-dva restoranja backupa nije problem. Sumnjam da će sve pasti češće od jednom mjesečno što mogu priuštiti zauzvrat brzine.

Old Iggy 10.02.2008. 18:33

Citiraj:

Autor monolithx (Post 948234)
Mislio sam baš na raspad polja (ako se uopće može desit).
Na RAID10 mi se desilo nekoliko puta da kod rušenja sistema treba recheckat polje što traje sat-dva.

Hm, kod ozbiljnih kontrolera to se ne smije nikada dogoditi.

Citiraj:

Autor monolithx (Post 948234)
Sad je tu UPS pa nebi trebalo bit strašno. (Usput imaš li preporuku za tihi 1300VA+ UPS (da nije line int.)?).

Socomec Sicon on-line UPS, ali i kosta.

Citiraj:

Autor monolithx (Post 948234)
Kojim alatom gledat performanse diskova?
Kod queua mislip na queue zapisivanja na disk?

Ako imas Server 2003, imas one performance countere u administrativnim alatima. Bas taj queue. Startaj sve sto moze pratiti zapis da vidis da li je usko grlo disk ili nesto drugo.

Citiraj:

Autor monolithx (Post 948234)
Dnevni backup moram radit, ali vjerojatno će bit full backup u 14:00 i 02:00.
To je dovoljno jer radim cijeli image back up.

Odlučio sam na RAID 0 ići. Sat-dva restoranja backupa nije problem. Sumnjam da će sve pasti češće od jednom mjesečno što mogu priuštiti zauzvrat brzine.

Ne bi smjelo pasti nikad, osim kod kvara diskova.

monolithx 10.02.2008. 18:36

Za UPS mi cijena nije bitna. Treba mi stabilnih 900W reaktivne snage.

Ne, nisam stavio 2003 nego Vistu i na server će ići Server 2008 zbog virtualizacije.

EDIT: Socomec-a nema nigdje na Nabavi:)

Imaš preporuku za nešto što se da nabavit relativno regularnim putem?:)

Ne mora bit ultra skupo, al bitno da drži 900W 3 minute i da drži napon stabilno.

Old Iggy 10.02.2008. 18:45

Citiraj:

Autor monolithx (Post 948247)
Za UPS mi cijena nije bitna. Treba mi stabilnih 900W reaktivne snage.

Ne, nisam stavio 2003 nego Vistu i na server će ići Server 2008 zbog virtualizacije.

Ako si knap s parama ne znam da li ima smisla ici na on-line UPS-ove.

A isto tako, kad bi isao na virtualizaciju prije bi uzeo Windows Server 2003 + VMware nego 2008. 2003 je ipak provjereno rock-solid sustav.

monolithx 10.02.2008. 19:26

Imam već online UPS i osim što nije dovoljan (600W/1000VA) ima ventilator. Trebam 3 takva, buka koju stvara me dekoncentrira i iritira. Zato želim neki silent model :)

Što se tiče servera, 2003 nema HyperV :) A treba nam jer se doslovno paralelno mora izvodit i nix. A za posebne mašine, nema se love.

Old Iggy 10.02.2008. 19:48

Citiraj:

Autor monolithx (Post 948299)
Imam već online UPS i osim što nije dovoljan (600W/1000VA) ima ventilator. Trebam 3 takva, buka koju stvara me dekoncentrira i iritira. Zato želim neki silent model :)

Što se tiče servera, 2003 nema HyperV :) A treba nam jer se doslovno paralelno mora izvodit i nix. A za posebne mašine, nema se love.

Onda bolje uzeti jaci pa ga smjestiti negdje sa strane i napraviti razvod. :D

Hmmm, ja svejedno ne bi isao na novi server...

yedwy 12.04.2008. 19:21

Za kućni rad sa RAIDom je dobitak zanemariv, više ćeš dobiti time da istweakaš pošteno sustav i defragaš ga a onda na drugi disk staviš "mlinac" procese kao torrente, virtualnu i ostalo kaj stalno malo po malo šrota po disku tako da nemoraš trpiti premješttanje glave diska sim tam kad nekaj loadaš što treba sistemu ili programima...

greg SE 12.04.2008. 20:03

si probao pa znas? :)
meni recimo radi odlicno i vjeruj mi da se osjeti.
iako sada vec mi postalo sporo, prije godinu i pola kad sam ih ubacio u raid0 bili su jos diskovi neke standardne brzine. ovi novi su pun k brzi, mislim da cu prodati ove i uzeti dva brza gonzalesa i opet ici na raid0

a sto se tice toga kako prvo treba u biosu prebaciti sata u raid mod (obicno pod advanced settings/bios options, ovisno o tipu biosa je naziv drugaciji) i kod boota kada mu izbaci ono press f10 to enter raid bios/settings (opet ovisi o chipu) treba, tko bi rekao, pritisniti f10 :D
zatim new aray (type stripe), dodati ta dva diska u njega i save. to je to.

yedwy 12.04.2008. 20:08

Jesam... :D

Mislim gle vidi se tu i tamo ali neisplativa investicija prostora (RAID 1) većini ljudi koji rade nešto diskovno zahtjevno jednom mjesečno - mene uključivo... :D

A RAID 0 ipak bez dobrog i redovitog backupa nebi savjetovao nikome...

Sa_Stilom 13.04.2008. 19:25

Koristim RAID0 već 5godina, nikad problema...
Razlika se dakako osjeti, i to debelo...

Doduše, Maxline diskovi... :)

yedwy 13.04.2008. 19:38

Pitanje je i što radiš na kanti... :D

Inače i da si 505 g ja bi svejedno sa RAID 0 tjerao paranoju... :D

Sa_Stilom 13.04.2008. 19:55

Iako imam 600GB prostora, ne koristim nikada više od 300GB.
Raid0 koristim najviše zbog brzine.

Moguće da osobno nikada nisam imao problema, jer sam "pomno" birao svaku komponentu koju sam uzimao.

Trenutno slinim na SSD, čekam da stignu, e to će bit revolucija na kanti...
Ne toliko što će biti duplo brži od mojih diskova (Trenutni BURST Speed je 250MB/s, Average 110MB/s, Random Access: 13,3ms) nego zato što ću moći istovremeno raditi više stvari bez pada perfomansi, te Access time 0.1ms :) :D

Na kanti radim svašta ovisi, kako mi radi mašta... :D

LiquiD SileNcE 13.04.2008. 20:13

Da se i ja ubacim. Nemam raid al planiram uskoro preć na raid0. Uglavnom jer moguće na raid polju napraviti particije?

Sa_Stilom 13.04.2008. 20:21

Naravno.
Kad diskove staviš u RAID, oni se ponašaju kao jedan disk :)
Kao i na običnom disku, particije pomažu i kod RAIDa. ;)

(barem u mojoj praksi)

Lihto 13.04.2008. 20:38

Citiraj:

Autor Sa_Stilom (Post 1000652)

Trenutno slinim na SSD, čekam da stignu, e to će bit revolucija na kanti...
Ne toliko što će biti duplo brži od mojih diskova (Trenutni BURST Speed je 250MB/s, Average 110MB/s, Random Access: 13,3ms) [/B][/I]

samo jedna paralela koliko su diskovi napredovali, jedan Speedy2 ima average slican ko ova dva maxline-a u RAID 0:D

Sa_Stilom 13.04.2008. 20:49

Kaj da? :D

Speedy2 - korisnik ili neki disk :)

Bemti, ja ove diskove kupio, pa ima već 3 godine... I to sam u Switz išao po njih, platio ih 2400kn, dok su kod nas koštali 5500kn...

Zel sam ih, jer kad su izašli bili su bolji od 2xRaptor 74GB (raid0), a daleko daleko tiši...

Lihto 13.04.2008. 21:04

Citiraj:

Autor Sa_Stilom (Post 1000727)
Kaj da? :D

Speedy2 - korisnik ili neki disk :)

Bemti, ja ove diskove kupio, pa ima već 3 godine... I to sam u Switz išao po njih, platio ih 2400kn, dok su kod nas koštali 5500kn...

Zel sam ih, jer kad su izašli bili su bolji od 2xRaptor 74GB (raid0), a daleko daleko tiši...

pa nije valjda vec 3god proslo:D,sjecam se ja kad si uzimao to,pod speedy2 mislim na novi seagate 320gb sa jednom plocom,neznam ako si gledao malo teme pod diskovima...

majk 13.04.2008. 21:27

Nekoliko pitanja za znalce:

1. da li RAID moze mijenjati kontrolere ako krepa MBO? Ili je jedna ploca-jedan bios-jedan raid?

2. koliki je data overhead % u RAID0?

3. kako se ponasa RAID0 kad jedan hard pocne krepivati? Iskustva - jel tko sta spasio?

4. kolika je razlika u brzini izmedju "fake" HW RAID-a, LVM-a u Win-u ili RAID-a u Lin-u? Iskustva? Da li LVM moze promijeniti komp bez gubitka RAID-a?

Sa_Stilom 13.04.2008. 21:32

2 i pol godine... :D (no opet, vrijeme leti...)

Baš gledam onaj tvoj review tamo, pa Avarage u RAID0 je jednak mojim diskovima u RAID0. Doduša, imaš veći Burst, i veći Access...

Al, što je jest, napreduju dosta brzo...

edit: moraju nam nekak pare musti :D

DiSc-jOcKeY 13.04.2008. 21:33

Citiraj:

Autor greg SE (Post 999836)
si probao pa znas? :)
meni recimo radi odlicno i vjeruj mi da se osjeti.
iako sada vec mi postalo sporo, prije godinu i pola kad sam ih ubacio u raid0 bili su jos diskovi neke standardne brzine. ovi novi su pun k brzi, mislim da cu prodati ove i uzeti dva brza gonzalesa i opet ici na raid0

a sto se tice toga kako prvo treba u biosu prebaciti sata u raid mod (obicno pod advanced settings/bios options, ovisno o tipu biosa je naziv drugaciji) i kod boota kada mu izbaci ono press f10 to enter raid bios/settings (opet ovisi o chipu) treba, tko bi rekao, pritisniti f10 :D
zatim new aray (type stripe), dodati ta dva diska u njega i save. to je to.


******************************************************************

Sa_Stilom 13.04.2008. 21:36

Citiraj:

Autor majk (Post 1000770)
Nekoliko pitanja za znalce:

1. da li RAID moze mijenjati kontrolere ako krepa MBO? Ili je jedna ploca-jedan bios-jedan raid?


2. koliki je data overhead % u RAID0?

3. kako se ponasa RAID0 kad jedan hard pocne krepivati? Iskustva - jel tko sta spasio?

4. kolika je razlika u brzini izmedju "fake" HW RAID-a, LVM-a u Win-u ili RAID-a u Lin-u? Iskustva? Da li LVM moze promijeniti komp bez gubitka RAID-a?

Evo moja osobna iskustva:
1.
Mijenjanje ploče s istim čipsetom, RAID ostaje stabilan.
Mijenjanje ploče s drugačijim čipsetom - rušenje i instalacija ponovnog RAID0

3. Ja sam uspio sve spasiti, kažu ovdje ("lucky").
- Doduše, dosta yebade, radio sam "Disk Image kojih 60GB" na drugi disk, i onda s Image Explorerom izvlačio što mi je trebalo :D

Citiraj:

Autor DiSc-jOcKeY (Post 1000780)
******************************************************************

Al ako ništa, čovjek je dobro rekao za kontroler...

Citiraj:

Autor Lihto (Post 1000717)
samo jedna paralela koliko su diskovi napredovali, jedan Speedy2 ima average slican ko ova dva maxline-a u RAID 0:D


Gledam baš ovo:
Jedna slikica do 50k može, ostalo mora u thumbs :-)


Isseee....
Onda nisam trebal kupovat SSDovce :D Mogel sam bez beda zet 4 takva :) i u RAID :)

majk 13.04.2008. 21:43

Citiraj:

Autor Sa_Stilom (Post 1000790)
Evo moja osobna iskustva:
Mijenjanje ploče s drugačijim čipsetom - rušenje i instalacija ponovnog RAID0

"rusenje" podrazumjeva napraviti novo raid polje i zaboraviti sve sta je bilo prije na diskovima? :wtf2:


Citiraj:

Autor Sa_Stilom (Post 1000790)
Evo moja osobna iskustva:
3. Ja sam uspio sve spasiti, kažu ovdje ("lucky")

Da li ima RAID neki "compatibility mod" da rade "DOS" programi tipa Acronis ili Ghost, ili nista bez RAID drivera (live linux distra)?

Riskantno bi bilo staviti 2x500 u RAID0 to je je**** puno izgubljenih podataka ako se nesto dogodi :fiju:


Sva vremena su GMT +2. Sada je 05:59.

Powered by vBulletin®
Copyright ©2000 - 2025, Jelsoft Enterprises Ltd.
© 1999-2024 PC Ekspert - Sva prava pridržana ISSN 1334-2940
Ad Management by RedTyger