nije jos gotovo... iako je prvobitna racunica bila ok, nakon 51h (sad i koji vise) diskovi su tek na 3 prolazu 0xff, i to od 25 do 50%. Posto ostaje jos cetvrti 0x00 prolaz vjerojatno prije petka nece bit gotovi... pozitivno u svemu je sto zasad nema zabiljezenih gresaka.

Ko da pričaš sam sa sobom :D

Svi mudro šute al vjerujem da prate šta će na kraju ispasti.

Eto zašto bi trebalo testirati nove hdd, a ujedno i zašto to ekipa rijetko radi (jer traje i traje).

Da sad ne tražim u temi, jeli to bio 1 od 4 da ne valja ?
Jesi pokrenio proceduru reklamacije ?

1 od 6 ne valja... danas je dostava dosla po njega...
vidia sam onu drugu temu, sto reci... nebi nakon xy miseci, mozda i vise tia otkrit da nesto ne stima... bolje odma u startu...
istina... ovo traje... ali ne pita me kruva... nek traje... dobia sam i uvid koji od x diskova je brzi a koji sporiji iako su nazivno isti...

Evo, za "future reference" sta se kaze... 6TB red, testiranje s badblocks, izmedju 90 i 100 sati, ovisno o disku... za ova 4, sve je ok osim sto sam imaju priko 100 radnih sati...

https://i.ibb.co/3WDTLpK/hddtest1.jpg

https://i.ibb.co/SrZCGKx/hddtest2.jpg

sad mogu ic u pogon...

Moram priznati da nisam nikad nijedan novi disk testirao na ovaj način. Al da ima smisla, itekako ima. Na svu sreću nisam imao problema, ali da, jednom kad nakrcaš 5-8tb podataka gore onda je kaos kada treba reklamirati. Ako se uopće uspiju prebaciti nazad podatke.

Problem je sto podaci koji su "zapisani" nisu nuzno verificirani, pa mozes ostat u uvjerenju da je sve u redu dok god ne pokusas iste te podatke procitat mozda misecima posli... a ovo su relativno veliki diskovi da bi ih prepustia slucaju... racunaj raw 36TB i onda jos zfs2 cistih 24TB. Dok se to zapuni moze proc vrimena...

... zato lijepo ZFS gore, i periodicki scrub.

Sent from my SM-G900F using Tapatalk

Da sad ne kompliciramo, manje je bitno (mada ima veze) koji i kakav je file system,
bitna je razlika jesu li hdd - ovi (medij) na neki način verificiran ili nije.
Je x dana masiranja i "potrošenih" 100 sati rada ali si ipak sigurniji.

U vecini slucajeva, medij ce biti ispravan.
Isto tako, disk moze umrijeti kad god.. ili pojaviti se bad blockovi.
Kod ZFS-a je korisno sto mozes raditi jednostavno scrub, koji provjerava checksum, i to za dio podataka koji su aktivno na disku. Ovo je naravno vrlo korisno, pogotovo kad postoji redundancija na nivou diskova.
Ovakaj nacin cekiranja ne rade ni storage sustavi na tom nivou...
No, tko voli... :)

U biti, mnogi rade, samo treba uključiti.
Problem je više što ljudi vole "plug'n'play", stave igračku na stol i odmah peri deri. Ja sam obično svaki storage puštao par dana "na prazno" baš zbog tih početnih grešaka, no korisnici bi radije odmah to puštali u produkciju.

@Iggy: Svaki 'storage' (ono sto se koristi za pravi rad), ionako se nikad ne upogoni u produkciju za manje od par tjedana nakon paljenja. Sama instalacija, inicijalizacija, spajanje, testiranja (acceptance testovi), pa samo testiranje jos prije seljenja produkcije.
No, i u tom slucaju sami diskovi nisu prepisani 3-4 puta i testirani na takav nacin. Prepisani su jednom, i to je to... peri-deri ;)

evo disk je napokon dosa s reklamacije. stiga je drugi disk jer je utvrdjeno ocito - onaj je bia neispravan. problem u ciloj prici je ocit kad se pogleda vremenski raspon od prijave problema do rjesenja, a za koji je bilo potrebno prakticki misec ipo dana, a mozda bi i duze da nisam nedavno posla upit sto je s tim.
sad me ceka test ovog diska od kojih 100 sati, a onda napokon zamjena 1tb za 6tb diskove.

mozda sam negdje preskocio, za sto ti to te diskove koristis da bi ga isao testirati tako dugo prije upotrebe, koja je svrha toga?

mislim da sam jos na pocetku nesto napisa, ali uglavnom na njemu su live podaci ljudi s posla, s tim da je 10tak jako aktivno, nekih 40 srednje, a ostatak je u pravilu read only. za ono bitno postoji backup ali ovaj reklamirani disk je dokaz da je bolje ne pustat u pogon nesto sto ce u startu bit neispravno...
npr. da sam podatke pokusa prebacit na ove nove diskove i onda utvrdia da nesto ne valja, opet sve vracaj na staro, dok su podaci offline neko vrime. ovako stavim test za jedan ili pet diskova, traje istih 100tinjak sati za 6tb, ali sam onda miran...

Od 6 starih diskova u jednom od NAS-eva, jedan je danas proklikta i vise nije vidljiv u freenas-u. Ovo je samo kulminacija problema s tim diskom (a jos dva su problematicna), pa me sad definitivno ceka zamjena.
Citava prica vrlo lako je posljedica nedavnog velikog backupa gdje je citavi sadrzaj kopiran, a onda i moguci nestanak struje (jer sam po drugi put u kratko vrimena zateka NAS iskljucenim).
Uglavnom, danas je NAS dobia i svoj ups, ali nazalost nema nikakvu mogucnost automatskog gasenja sustava pa ce bit koristan samo u slucaju kracih ispada.

Rekla bi baba (Vanga), crni sinko - NAS dobia i svoj ups - pa tek sad ? :fiju:
Kako nema nikakvo upravljanje ?
Koji je ups, jel ima usb ?

Ja sam si preko ATI podesio on/off NAS-a na poslu. Radi pon-pet 10-15h, incremental backup, svaki 5 backup je full backup.

Evo da i ja uletim s pitanjem, imam XPenology (AsRock J3455, DS3517xs 6.2) i APC 650 UPS. UPS ima USB konekciju za računalo, je li ima iskustva sa setiranjem toga na XPenologyu, dovoljno mi je kad nestane struje da napravi gracefull shutdown.

Osobno nisam to slagao ali u obje varijante (FreeNAS, XPnology) to mora raditi.

Kod jednog i drugog ima njihova implementacija čuvenog NUT - a.
Primjer za FreeNAS > https://www.cyberciti.biz/faq/how-to...reenas-server/

Prva / osnovna varijanta je spojiti UPS i NAS te podesiti šta treba da se NAS sigurno ugasi (prije nego se baterija ups - a skroz isprazni) a da ne dođe do greške na hdd - ovima (FS).

Za one koji imaju još po neki pc zajedno sa NAS - om na istom UPS - u nastavljaju konfig,
na NAS - u se aktivira server varijanta a na pc ide client koji "sluša" server te kad treba odradi shutdown pc - a. To sve radi preko mreže.

Ok, thanks. Probati ću to složiti pa javim što je uspjelo.

yup... i to izvuka neki APC krem boje s dvi baterije 2x9Ah koje sam mora prominit... Uglavnom na njemu nema niceg osim 1xIN i 4xOUT za struju...
Straga ima ogromnu kvadratnu rupcagu pa je mozda nekoc postoja kakvi modul, vjerojatno rs232, ali usb garant ne.


Uglavnom danas sam izvuka sve diskove, 3 su bila ispravna, 1 sam doda oz drugog temp servera, i stavia 2 nova.
Usput sve isa rusit i stavit 11.2, i naravno to nije upalilo na sticku od 8gb... na kraju sam stavia 11.1u7 pa napravia upgrade na 11.2u7. Dok sam do toga dosa po je dana proslo u svim mogucim kombinacijama bios/uefi, stick jedan, drugi... i na kraju na 8gb se moze radit upgrade ali ne i clean install 11.2uX. go figure...

Uf, fina "zabava" 😑
Daj vidi precizno koji je model, možda nešto izmislimo.

evo bas sam isa pogledat online mogu li prepoznat model... i koliko vidim to je APC smart-ups 700va, https://www.apc.com/shop/uk/en/produ...rrentSite=true

e sad, izgleda sam potpuno previdia postojanje rs232 na mom uredjaju, a ova rupcaga je ocito za mreznu management karticu https://download.schneider-electric....ASTE-6Z5QDZ_EN

sutra cu se malo poigrat onda s usb-serial adapterom pa vidit moze li se sto time postic. pristojni shutdown je jedini feature sto mi treba od tog ups-a, pa ako se moze izvuc, savrseno!

fun fact - nakon godinu ipo neprestanog rada, u node304 je zacudo iznimno malo prasine, prakticki jedino je ima minimalno na lopaticama ventilatora... ugodno sam iznenadjen...

Da ti olakšam a i da izbjegneš "spominjanje rodbine" :D
mora APC izmišljati toplu vodu, čitaj ima custom raspored na DB9 konektoru,
za taj Smart UPS SU700INET trebaš ovakav kabel > https://pinoutguide.com/UPS/apc_smar...e_pinout.shtml

Jeli treba napominjati da ćeš brže napraviti / prepraviti neki serial kabel nego ćeš naći gotovi ?
Računaj da je std. serial kabel DB9 ženski - DB9 ženski a tebi treba DB9 muški - DB9 ženski.

Edit: Evo potvrde iz još izvora > https://serverfault.com/questions/52...ly-proprietary
https://networkupstools.org/cables.html

Edit2: Ako ćeš koristiti usb-serial adapter nadam se da je onaj "pravi" koji se registrira kao serial tj. COMx.
Vezano za kabel onda napravi samo mali adapter, trebalo bi da ima u Chipoteke ali im je web kriminalan i nemoguće je naći artikle:
http://www.kronos.hr/index.php/nasa-...BEenski-detail
http://www.kronos.hr/index.php/nasa-...C5%A1ki-detail
2x ova http://www.kronos.hr/index.php/nasa-...e-9-pin-detail
ili
1x (samo radi slike) http://www.l-com.com/d-sub-half-d-su...9-gray-plastic

Kad je već Google našao, ima i gotovi "kit", samo zalemiš šta treba:
http://www.l-com.com/d-sub-plastic-p...b9-male-female

Juce kad sam gleda s cim imam posla onda sam naleta i na taj "feature" APC-a. Konkretno je to bila upravo ova stranica https://networkupstools.org/cables.html koju si stavia.
Jutros sam definitivno potvrdia da je rijec o tom modelu Smart 700, i vidi vraga, stvarno ima serijski port. Ocito cu sad morat malo zalemit taj adapter pa vidit hoce li funkcionirat. Imam USB-RS232 od FTDI-ja, a ako on ne radi, onda nema teorije da radi s prolificom ili cp2102.
Mislim da medju pustim skafetima vjerojatno negdi imam M-Z komplet d-sub9, iako bi nekako vise volia slozit ovu zadnju varijantu koju si stavia, na pcb-u.

I da, Chipoteka ima katastrofalan site, telefon koji u Splitu sluzi za sminku a ne pozive, i jedino sto jos uvik donekle funkcionira je upit mailom i osobni dolazak... A o izboru elektronike ne moze se bas pricat, Italvideo ih nadmasuje u tome. Nedavno smo tribali power mosfete pa na kraju u chipoteke imaju samo slabe irf-ove, a nama je tribalo >100A, >60V

I meni izgleda zgodno ta verzija sa pcb - om al brate mili čini se to mach pesos a ni kod kineza se teško nađe.
Srećom pa ima samo 5 žičica zalemiti.
Jedina moguća greška (obzirom da ćeš koristiti usb - serial adapter) je da zezneš Rx i Rx (2 i 3) ako su već "okrenuti".

pa uvik mogu napravit tu pcb verziju... ka sta kazes, samo je par pinova u igri...

Ja pripremio kokice a ono ništa :fiju:
Jel se priča sa UPS - om ? :D

bez brige, bit ce prilike za bestimanje, kad nesto ne bude radilo kako triba... zasad je samo bitno da je status OK, da se diskovi uredno vrte, napokon nema milijun upozorenja da su diskovi gecrkt...

trenutno se jedino mislim, nextcloud kao plugin/jail ili dignit full blown virtualku i nextcloud u njoj... ponajvise se mislim jer je prosli nextcloud zapea na nekoj staroj verziji 9 pa masu toga nije podrzava, a i ovaj mislim nije dosa dalje od 15 kao plugin, a 17 je aktualno...

zato cu vjerojatno prvo dignit virtualni freenas, s virtualnim diskovima, da se virtualno zaigram prije nego sve bacim u pogon na sljedecih bar godinu-dvi... mozda i duze...

bilo je sve ili nista pocevsi od cetvrtka. na freenas sam diga full blown virtualnu masinu s ubuntu 18.04LTS i nextcloudom 18, i taj nextcloud je sada dobio nevjerojatan test izdrzljivosti u vrime dok carnet muku muci sa svojim autentifikacijskim servisima. nadam se da ce i dalje uredno radit kako se povecava kolicina materijala koji se tamo nalaze i broj pristupa resursima.

Najs.

Kakav je FreeNAS što se tiče virtualizacije? Koliko usera ti se spaja na cloud?

Gledam da si nešto slično dignem, samo sam ja mislio ići na proxmox, u jednoj virtualci freenas i direktno prezentat diskove freenasu.

Da budem iskren, nisam ga planira ovako bacit "in production", ali iznimni uvjeti su zahtjevali iznimna rjesenja, pa je doslovce bacen u vatru i zasad se drzi sasvim ok.
Ubuntu Server i Nextcloud u njemu imaju 50 svakodnevno aktivnih editora s punim pristupom, i oko 600 korisnika s read-only pristupom. To je jedina virtualka koja se vrti na Freenas-u, iako ima prostora za prosirenje, sto memorijsko, sto po pitanju hdd-a.

Proxmox i XPC-ng su hipervizori s kojima se i dalje igram, nisam dosa do konacne odluke sto odabrati. Svakako, ako se freenas slaze kao virtualka u njima, pozeljno je da su mu diskovi direktno vidljivi.

Možda sam i ja trebao tako, ali ja napravio obrnuto, tj stavio FreeNAS u virtualku...da li je bhyve na kojem se bazira FreeNAS virtualizacija kompliciran za upotrebu?

mozda nisam dovoljno proucia citavi freenas sustav, ali smatram da je nepotrebno iskomplicirano, a to sam naucia na tezi nacin.

dakle, prije par dana odjednom sam dobia prijavu da nextcloud ne radi, nitko ne moze skidat ni stavljat materijale, uglavnom AJME!
i stvarno, idem na web od nextclouda, nula bodova.
otvaram web od freenasa, i on nasrecu radi, medjutim virtualka s nextcloudom pogasena. pokusavam pokrenit - javlja gresku! panika! sve moram radit remotely, i drzim fige da se sustav digne ispravno dok klikam na restart.
traje li ga traje taj restart... muka... napokon se pojavi web od freenasa, nedugo nakon toga i nextcloud. olaksanje...
ipak, ada0 disk koji je dio raid z1 polja od 4 diska na kojem se nalazi javlja reallocation sector greske, znaci definitivno ima problema.

ok, nema problema, idem prebacit virtualku na drugo raid1 polje od 2 diska. oh, shit, kako se to radi? di je move? jel mogu kako kopirat virtualku u neki normalni format pa je dignit na drugi server privremeno, u virtualbox, u hyper-v? nista ocito ne postoji! odustajem dok malo ne istrazim...

u medjuvremenu, dan-dva posli, opet ljudi javljaju da je nextcloud offline, i odma sam zna di ic... kvragu i corona, kvragu i dizanje sustava bez duzeg testiranja, kvragu i stari diskovi na koje sam prvotno stavia pool s virtualkom... moram nac nacin kako prebacit virtualku na ta 2 nova diska, inace ce sve otic kvragu...

i rjesenje, na kraju... zfs send | zfs receive... a zatim virtualku editirat tako da se dize s "diska" koji je na novom pool-u. zasto jednostavno kad moze komplicirano. mozda nekome tko je freenas i bsd koristia puno vise od mene ovo izgleda trivijalno, snalazi se u tom nacinu prebacivanja, ali ovo nije smilo poc po krivu, pa sam prvo napravia novu fejk virtualku, pa nju isa prebacit i vidit hoce li upalit, a tek onda isa na pravu stvar.

i zato ne, nebi reka da je freenas dobar za virtualke, bar ne na nacin kakav ocekujem od dobrog hypervisora. mislim da bi se sada prije odlucia na bare metal stavit hypervisor tipa proxmoxa, a na njega freenas i freenasu proslijedit fizicke diskove. ILI, jos bolje, sasvim odvojit dva box-a, virtualizirat linux+nextcloud i prezentirat mu storage koji je na freenasu.

cinjenica je da mi je virtualka u freenasu, igrom slucaja, zadala prilicno problema... istina, s ispravnim sustavom, a vjerojatno je tome pridonjelo i koristenje obicne (umjesto ECC) memorije, problema nebi bilo, ali bar znam na cemu sam.

Da, preporuka je da se freenas koristi za pohranu, ostalo ne, eventualno za test i igrarije.

Sto se tice ecc memorije, puno sam citao o tome, i to nije takav problem u praksi kako ga neki prezentiraju.

Nebih se sa tobom složio u vezi ECC memorije, ZFS i slični file sistemi "traže" takvu memoriju. Sve je ok dok se ne desi greška (jedan bit / bajt ispadne krivi a nema ECC mehanizma da se pokrpa), onda nastaju problemi.

Zaheb sa ECC je jer poskupljuje i komplicira nabavku hw (mobo + cpu + ram).

Ne razumijem samo zašto si išao dizati nextcloud u virtualki, kad ima i plugin za freenas, to bi trebalo biti DALEKO jednostavnije

pa kad je pohrana u pitanju, do sada nikad nisam imao problema s gubitkom podataka zbog non-ecc memorije, i moguce je da ni sada problem nije memorija... ipak, svakako je bolje drzat se preporuka...

ne mogu pinpointat u cemu je nastao problem kad se bas virtualka koristi. cinjenica je da sam i prije imao failing diskove, ali nikad se nije dogodilo nista "strasno" osim ocite obavijesti da sustav, odnosno diskovi imaju bad sectore, i nikad se sam freenas, cak ni sad nije crasha...
medjutim, sad, kad je radila virtualka i kad su se pojavile greske na samo jednom disku u poolu na kojem se nalazila virtualka ocito je nesto iznimno bitno bilo u smislu prisilnog gasenja te virtualke i blesiranja sustava, jer sam morao restartat freenas kako bi opet mogao pokrenuti nextcloud virtualku.

da, cijena takve opreme je visa, tipicno je rijec o enterprise opremi, a osim toga tu je nerijetko i jos jedna mana - puno veca potrosnja struje i buka. u ovom slucaju to mozda i nebi bilo toliko bitno, ali eto...
ono sto bi volia imat, a to je definitivno neka sljedeca nabava je IPMI pristup, jer bi me spasilo u slucajevima kada ne znam sto ce se dogodit od reseta do reseta, ili u slucaju gasenja. s obzirom da takve ploce koje podrzavaju IPMI u pravilu i jesu enterprise, onda s njima dolazi ECC po defaultu.

plugin dolazi s nextcloudom v17, a zadnji je v18, i osim toga, volim drzati sve pod kontrolom. primarni razlog za v18 je triba bit openoffice community server, ali na kraju mi je radia samo iz lokalne mreze, a ne i izvani, pa sam ga onemogucia. kasnije nisam provjerava zasto nije tia radit, jednostavno mi je ovako bia ok sustav, naravno do problema s poolom. uglavnom, da kucnem u drvo, otkako sam uspia prebacit virutalku na drugi pool, nije bilo neocekivanih problema.

mislim da bi u nekim drugim uvjetima freenas ostavia iskljucivo za podatke, a u isto vrime diga sasvim drugu fizicku masinu za linux+nextcloud, ili barem l+n izvea u nekom od "normalnih" hipervisora s kojima lako mogu kopirat i premjestat masine.

Viša cijena uglavnom da ali potrošnja ne nužno tj. ako nije "bijesni" hw.
Ako se može sanjati (u ova luda vremena korone) onda bi za do 4 hdd - a idealan bio second hand HP Microserver Gen8 > https://support.hpe.com/hpesc/public...r_na-c03793258
Ovisno kakav nabaviš jedina dodatna investicija je u povećanje ram - a i eventualno zamjena Celeron G1610(T) sa Xeon E3-1220Lv2 (opet second hand).
I da, ima IPMI tj. iLO.

Za žuntu:


https://www.ebay.com/itm/HP-Proliant...D/293530690721

:)

Mogu potvrditi da je pun pogodak taj microserver(Gen 8) za nekoga komu netreba više od 4 diska. Iako se može ubaciti još jedan ili 2 ssd-a (1 sigurno) bez modanja.