Upgrade na 10GBe mrezu - kako ?

[Mac_F]

Ne znam koliko ti treba 10G portova, ali milkrotik ima fanless 4-portni SFP+ switch za male novce,
https://mikrotik.com/product/crs305_1g_4s_in
A imaju i velikog brata koji pali ventilatore po potrebi: https://mikrotik.com/product/crs317_1g_16s_rm

10G RJ45 moduli: https://mikrotik.com/product/s_rj10
Jeftiniji direct-attach kablovi: https://mikrotik.com/product/SplusDA0003

[The Exiled]

Autor Lewis

Sadasnje stanje je :

1. WS - Dual Xeon e5-2698 v4 (4 grafe), 128 GB (1 port)
2. RS 1 - Dual Xeon E5-2690 (3 grafe + stize jos jedna), 64 GB (1 port)
3. RS 2 - i7 6850K (3 grafe), 64 GB ( 1port)
4. Switch HP 24 portni
5. NAS DS1817+ (4 porta za Link Aggregation)
6. NAS DS415+ (2 porta za LA) - offline backup NAS
7. Router Tcom (1 port na switchu + TV, AVR, mobiteli i sve ostale sitnarije te MaxTV)
8. Router VIP 4G (1 port + gateway samo za workstation in NAS)
9 .Printer (1 port)
10. APC UPS 3000VA (1 port na switchu)
11. APC UPS 2000VA (1 port na switchu)
12. Laptop (povremeno 1 port na switchu)
13. Servisna pozicija za razne kompove (jos 2 port na switchu)
14. TV/Hi-fi (1 port na switchu)
15. neka sitnarija dalje nebinta...

SVE je spojeno u HP switch i onda iz switcha u kompove i dva routera tako da ovaj Tcomov sluzi za sve po kuci a ovaj VIP samo za uredski dio i na njemu je Wi-FI OFF pa sam preko gatewaya razdjelio koji uredjaji vide koji router.

IMHO, ti si idealan kandidat za dva-tri single-socket EPYC (7551P + MZ31-AR0) rješenja, jer kolko god da je ovo tvoje trenutno impresivno, po svemu sudeći odavno si nadišel tzv. kućna rješenja.

Pitanje je vremena do kad bude ti isplatilo nadograđivati postojeće, prije nego ti pukne film i kreneš slagati serversku sobu ili dedicirani mrežni ormar i popratno veselje (1 - 2 - 3 - 4 - 5).

Bez zajebancije, stavi si sve opcije na papir - EPYC je tu samo za primjer i Intel ima sličnih rješenja.

[Lewis]

Autor Mac_F

Ne znam koliko ti treba 10G portova, ali milkrotik ima fanless 4-portni SFP+ switch za male novce,
https://mikrotik.com/product/crs305_1g_4s_in
A imaju i velikog brata koji pali ventilatore po potrebi: https://mikrotik.com/product/crs317_1g_16s_rm

10G RJ45 moduli: https://mikrotik.com/product/s_rj10
Jeftiniji direct-attach kablovi: https://mikrotik.com/product/SplusDA0003

Ovaj mali je premal a ova veca braca su bucni tj. imaju ventove koji ce se kad tad popalit kad upalim mashineriju . Ali hvala na ideji provjerit cu cijene jer sam vec i gledao Mikrotika.

Autor The Exiled

IMHO, ti si idealan kandidat za dva-tri single-socket EPYC (7551P + MZ31-AR0) rješenja, jer kolko god da je ovo tvoje trenutno impresivno, po svemu sudeći odavno si nadišel tzv. kućna rješenja.

Pitanje je vremena do kad bude ti isplatilo nadograđivati postojeće, prije nego ti pukne film i kreneš slagati serversku sobu ili dedicirani mrežni ormar i popratno veselje (1 - 2 - 3 - 4 - 5).

Bez zajebancije, stavi si sve opcije na papir - EPYC je tu samo za primjer i Intel ima sličnih rješenja.

Nista mi nemoj pricat vec gledam kako bi okrenuo ured/razmjestaj i roknuo Rack ali onda bi se zazelio i rack mounted NASa i svast nesta da to bude "lijepo i uredno" a onda ode sve u bananu i budzet i namjestaj u sobi i........ ma bolje da ne razmisljam dalje jer cu nakraju preselit ured u podrum .

Sto se tice AMDa/EPICa, prosle godine sam uzeo ovaj i7 samo zato sto AMD nema i dalje nijednu workstaiton maticnu, meni treba full sized 7 komada PCI-E slotova na ploci tj. prava workstaiton maticna sa mjestima za dosta grafi a da ploca ima standarni ATXE-ATX layout tj. da nije neka serverska perverzija koji nikad nikome vise necu moc prodat za 2-3 godine. AMD to i dalje nema cak ni sa ovim novim serijama Threadrippera a kamo li na EPYC koji su prvenstveno serijske ploce.

za sad je onaj TPLink definitnvo favorit samo moram kontatkirati firmu koja ih dila, vidim da prodaje Senetic (https://www.senetic.hr/product/T1700G-28TQ) ali oni nemaju poslovnicu u HR ako sam dobro skuzio premda im WEB ima i HR prijevode/kontakt vidim da su poslovnice po EU ?

[The Exiled]

Možeš se raspitati da li je UziShop u mogućnosti nabaviti TP-Link da se ne zajebavaš uokolo. Kaj se tiče AMD Threadripper WS ploča, iskreno ne znam ko je tu kriv, ali proizvođače ništa ne sprječava da naprave poštene E-ATX modele.

[Nikky]

Morat ću te ražalostiti u vezi tog TP-Link T1700G-28TQ:
- u principu samo su zadnja 4 SFP/SFP+ porta "sposobna" za 10 GB
- otvoriš Datasheet > https://static.tp-link.com/T1700_Series_Datasheet.pdf
i nađeš među službeno navedenim Auxiliary nema 10 GB copper (RJ45),
ima jedino "gotovi kit" dužine 1 M ili 3 M (da ne pišem slika sve govori) > https://www.tp-link.com/us/products/...C432-CU1M.html
- dali neki "tuđi" SFP/SFP+ 10 GB copper (RJ45) moduli rade "out of box" je pitanje

Pogledaj TP-Link T1700X-16TS > https://www.tp-link.com/uk/products/...700X-16TS.html
Info > https://www.linkdataguard.com/T1700X-16TS.asp
još kad vidiš cijene u US i ovdje

[Lewis]

Da sad to bi stvarno bilo blesavo da ne radi sa drugim, dodsue vidio sam na SpanTvu neke konvertere/adaptere od Cisco-a iz SFP u RJ45, to bi trebalo raditi svagdje jer inace bi bili totlano uselses ako su samo za jednu marku/proizvodjaca....

https://www.youtube.com/watch?v=vTBU3tinguk&t=3m5s

[Mac_F]

Autor Lewis

Da sad to bi stvarno bilo blesavo da ne radi sa drugim, dodsue vidio sam na SpanTvu neke konvertere/adaptere od Cisco-a iz SFP u RJ45, to bi trebalo raditi svagdje jer inace bi bili totlano uselses ako su samo za jednu marku/proizvodjaca....

https://www.youtube.com/watch?v=vTBU3tinguk&t=3m5s

Recimo jedna serija cisco 1G GLC-T (RJ45) sa zlatnom polugicom za vađenje provjereno NE radi sa MikroTikom. Ostale verzije rade
Ali veći proizvođači obično lockaju samo svoje uređaje samo na svoje module. (Cisco, HP...)

[Nick7]

Ne znam koliko ti je sve rasprseno po kuci/stanu, ali stvarno razmisli o onom sto ti ja predlozio.
Ovo bi zahtjevalo i redesign prostora sto imas...

Primjer:
Server sa SAS kontrolerom, mozes dodati lako onda i externe kutije s diskovima (SAS podrzava i SATA diskove, pa njih mozes lako nacukati).
OS, ako ides s Infinibandom, mozda najbolje cak da je Windows Server, a diskove slazes sa Storage Spaces-om. Kod IB-a je super i to sto koristi RDMA u ovom slucaju.
Preko Infinibanda imas spojene servere gdje su performanse bitne - same kartice i kablovi su relativno jeftini, a opet - drugi dio (ala laptopi, printeri i sl.) moze ici i preko 1Gbit LAN-a.
Ovo bi ipak bio koliko-toliko profesionalniji pristup, ali s drasticno visim performansama, imao bi u biti native brzinu storage-a.
No.. ovo sam ipak ja, koji voli cackati po svemu i svacemu, pa se meni vise svidja ovakav pristup

[Lewis]

Evo me nazad nakon par godina, sad definitivno idem/moran na 10GBit upgrade .

Uglavnom novi worstation stize sa dual 10Gbit portovima (RJ45) na ploci (ThreadRipper PRO) i sad gledam switcheve.

Kablovi su svi razvuceni na CAT6 do rack ormara i NASevi/kompovi su spojeni.

u NAS (Snyology DS 1817+) ce doci 10Gbit kartica sa RJ45
https://www.synology.com/en-global/p...10G18-T2#specs

ili SFP+ verzija
https://www.synology.com/en-global/products/E10G17-F2

I jos je jedina dilema switch.

Tu sam nasao dva switcha u cijeni od nekih 500-550 EUR

Ubiquity
https://dl.ubnt.com/datasheets/unifi...S-16-XG_DS.pdf

MikroTik
https://i.mt.lv/cdn/product_files/CR...-RM_190741.pdf

SFP+ i DAC/Optic kablovi su mi za sad nepotrebni (eventulano NAS to switch only u slucaju F2 kartice za Synology) pa gledma opciju da imam vise RJ45 portova (idealna kombinacija NAS u LA modu = 20Gbit i 3 kompa po 10 GBit = 5 portova ili svaki po 10Gbit = 4 porta bez LA na NASu) i u tom slucjau MikroTIK je u prendosti (posto UBQ ima samo 4 RJ45 porta). Ono sto me brine je 4 ventilatora kod MikroTika i deklarirana buka od skoro 42dB ???

Ok, bit ce u rack ormaru gdje su NASevi, switch, router, UPS i ostala skalamerija za mrezu pa mozda nece biti bucno ali volio bih cuti info iz prve ruke.

Ima li mozda kakvih promjena po pitanju trzista dana tj. fanless/passive Switcheva 10Gbit ?

Hhvala

[Pupo]

Fanless je onaj mali mtik 4 portni (CRS305-1G-4S+IN). Jedino što je to sfp+, pa ti trebaju adapteri na rj45 koji se navodno dosta griju.

[Nikky]

10 GB je još uvijek novitada i dosta skup sport,
a vidim da se svima chipovi poprilično griju, od vulgaris mrežne do ovih u switch - evima.

Taj MikroTik CRS312-4C+8XG-RM je zvjerka, možeš birati hoće li vrtiti njihov RouterOS ili SwOS, ...
Naravno da je bučan, nema 2 nego čak 4 ventilatora a kako je debljine 44 mm jasno da su morali staviti 40 mm "turbine" za ohladiti ga.

Evo ovdje review > https://www.servethehome.com/mikroti...switch-review/

EDIT: Netko je već pregrmio garu i mijenjao ventilatore > https://www.youtube.com/watch?v=5Bz0F6WTZ7I
temperature jesu nešto više u odnosu na stock ali je buka bitno manja.

Tu sam vidio Netgear ProSAFE XS708T alternativu > https://www.servethehome.com/netgear...base-t-switch/
Po review taj nije toliko bučan a treba vidjeti dobavljivost,
možda ti pokrije potrebe.

That's my 5 cents

[Pupo]

Nego, u NASu imaš all flash storiđ? Vidim da spominješ i LA za nas, to fakat treba mašinerija za saturirat taj link.

[Lewis]

Nemam flash/cache u NASu ali imam RAID 6 (u stvari SHR-2) tako da 6 diskova mogu potegnuti dobre read/write brzine (read im je oko 230-250 po disku znaci teoretski mogu prebacit i 10 GB read speed kad kopiram velike video fileove).

[Lewis]

Autor Nikky

EDIT: Netko je već pregrmio garu i mijenjao ventilatore > https://www.youtube.com/watch?v=5Bz0F6WTZ7I
temperature jesu nešto više u odnosu na stock ali je buka bitno manja.

Tu sam vidio Netgear ProSAFE XS708T alternativu > https://www.servethehome.com/netgear...base-t-switch/
Po review taj nije toliko bučan a treba vidjeti dobavljivost,
možda ti pokrije potrebe.

Da ovaj MikroTIK sa default ventovima je kao helikopter, strasno bucan .

Znaci ako njega kupujem moram racunati jos 600kn za 4 Noctuae i garancija out, hmmm.

Netgear nevidim kod nas dobavljiv a i cini se nesto skuplji od ova dva.

[Pupo]

Ak ćeš već izgubit jamstvo, ja bih odneo poklopac pod laser za 1x120mm vent. Slim stane 99%.

[Lewis]

Autor Pupo

Ak ćeš već izgubit jamstvo, ja bih odneo poklopac pod laser za 1x120mm vent. Slim stane 99%.

Mislim da moraju bit spojeni sva 4 jer inace pali lampicu (i moze bit neki hardware alarm) da neradi fan a neznam bas da stanu 4 komada 120mm ?

[Pupo]

Spliter ili neki otpornik. Neznam na koji način bilježi da su tu.


Realno, pretpostavljam da switch niti neće biti opterećen max stalno niti u vrućim uvjetima. Bubni otpornike na postojeće ventove.

[Lewis]

Ma sve mi se cini da cu ipak ici na Ubiquiti i onda sa 2 kom SFP+ Tranciverima iskorisitti 2 porta za NAS da mi ostanu 4 porta (RJ45) za Worsktation, 2 Renderslavea i link na 1Gbit sadasnji switch (za sve ostale stvari i internet/router vezu).

Samo sad treba istrazit jel trebam iskljucivo Ubiquti SFP+/RJ45 transciver ili moze radit bilo koji, recimo Mikrotikov
(https://ezy.hr/artikl/mikrotik_10g_s...k_s_rj10/25468)

BTW to malo djubre kosta 350-500kn/komad

[Nikky]

Da, da, ima kontrola, loše je spomenut taj detalj u videu,
nakon zamjene ventova mu je palio Fault Led (vjerojatno zbog temperatura),
a riješio je nakon šta je u managmentu prebacio "ciljanu temperaturu" sa 55 na 60.

Za DIY kemije ima raznih rješenja:
- ako nije problem vent može biti i sa vanjske strane poklopca
- detekciju se zavara na način da se rpm pin spoji na više fan headera
- kao prvi korak ja bi ostavio ventove kod psu i na sredini,
a ova dva kod heatpipe bi maknuo, stavio jedan 120 (makar i vani) + spomenuti štos sa rpm pinom

Za Netgear vidi jeli ga možeš dovući izvana > https://geizhals.eu/netgear-prosafe-...-a1444319.html

[Pupo]

Pogledaj si fs.com

Imas tamo ‘zamjenskih’ modula s listom na sto idu.

[Lewis]

Nego jesam ja nesto pobrkao pa treba jos neki dio ili bi ovakav DAC kabel bio dovoljan da spojim NAS (sa ovom SFP+ karticom https://www.synology.com/en-global/products/E10G17-F2) i Ubiquity switch u njegove SFP+ portove ?

Screengrab kabela:
https://www.dropbox.com/s/ok1ggs6g0h...C_SFP.jpg?dl=0

To je pasivni DAC kabel ali kolko kuzim ni netreba mi bolji ako nezelim prelaze sa SFP+ na RJ45 u kojem slucaju me samo dva Transcivera kostaju 800-900 kn + CAT 6 kabeli za posapajat ?

Znaci kupim ta dva kebela (za 200-250 kn zavisno od duzine koju trebam) i spojim NAS u taj Ubiquity switch direktno i to je to ? Ili trebam jos neke prijelaze/transcivere ?

[the_ghost]

Ako oba devicea rade s tim kablom, ne treba ti nista drugo. Kabel ima svoj integrirani receiver.

[Lewis]

Autor the_ghost

Ako oba devicea rade s tim kablom, ne treba ti nista drugo. Kabel ima svoj integrirani receiver.

Pa Ubiquity sigurno radi jer oni prodaju taj kabel uz svojoj ponudi
(https://eu.store.ui.com/collections/...31063415062637)

Sad samo da skuzim dali radi sa Synology F2 karticom (probat cu pitati na synology forumu).

Thx

[Nikky]

Nisam našao review za točno isti UniFi ali evo "slični model" > https://www.servethehome.com/ubiquit...ontrol-absent/
na test im je došao malo skršen

Nije bučan kao MikroTik - ov ali isto šuška i nije za držati blizu ...

[Lewis]

Autor Nikky

Nisam našao review za točno isti UniFi ali evo "slični model" > https://www.servethehome.com/ubiquit...ontrol-absent/
na test im je došao malo skršen

Nije bučan kao MikroTik - ov ali isto šuška i nije za držati blizu ...

Ima kod Lawrencea review i Ok je switch (plus jendnostanviji software nego MikroTik, bar za mene )
https://www.youtube.com/watch?v=bA9LjWVERy4

U biti njega sam i htio ali kad sam shvatio da trebam 6 RJ45 portova (2 za NAS, 1 za WS i 2 za RSlave te 1 link na 1Gbit switch) onda mi se upalila lampica da "moram" ici ili na SFP+ ili trazit ove Transcivere i tako sam naletio na Mikrotik ali radije bi UBQ a i cijenom su tu negdje oko 100 kn razlike .

[Nikky]

Po navedenom izgleda da je UBQ bolja opcija.

EDIT: Bilo bi dobro da napraviš bandwith test između bitnih klijenata sada pa usporediti kada digneš 10 GB upgrade.
Mali osvrt na potrebno i postignuto nebi bio na odmet.

Jasno da je razlika između SOHO i ozbiljnih business zahtjeva a jednako tako i cijenom svega skupa.

[Lewis]

Evo ma nazad.

Ormar je slozen i kupio sam Ubiquiti EdgeSwitch 16XG (12 SFP+ i 4 RJ45 10 Gbit porta).

Switch fino radi i sve je jednostavno (ima onaj detaljni GUI a ima i ovaj NEW GUI za nas Mrezne tutleke/pocetnike di je sve fensi šmensi ali sa 20% opcija koje ima obicni GUI, meni dosta ).
LAG (Link Aggregation) i LACP u Dynamic/Static modu se lako ukljuce na portovima. Sve je fino graficki kliknes na port i stisnes LAG 1,2,3,4,5,6 tj. koju grupu zelis linkati portove.

I sad problem:

Ja iz kompa (10Gbit mrezna u Threadripperu) spojim kroz patch panel sa RJ45 kabelom u Keystone (CAT 6 su keystone i kabeli) fino u port 13 na Switchu i on prijavi 10Gbit konekciju (svijetli bijela lampica i GUI kaze 10 Gbit) to je znaci ok.
Na Synology (DS 1817+ sa ukupno 4 RJ45 gigbit porta) ustekam 3 ostala RJ45 porta na Switch i stavim LAG1 na switchu i napravim Bond na Snyologyu od ta tri kabela i vidim da je ukupno 3000 MBit veza iz Synologya (tako bar on prijavi u control panelu/network).
Znaci super sad bi trenbao imati teoretski 3Gbit vezu komp/NAS...

Pokrenem BlackMagic Speed test ali Read/Write je i dalje 105/110 MB/s znaci isto kao i sa jednim kabelom ?

Ono sto vidim je dok radi speed test je da samo jedan port na switchu (od 3 komada u koje je spojen NAS) blinka samo jedan port zeleno (znaci 1 Gbit veza) i port 13 bijelo (10 Gbit mrezan na kompu).

Nekuzim sta me sad tu zaj.. switch ili NAS? Kako skuzit koji nezeli radit na/u 3Gbit tj. trunk/bond modu ?

Hvala

[Nikky]

Za počdtak, probaj sa parnim br. portova na Synology - ju za LAG.
Jeli ima primjera po internetu kako ga podesiti na DS1817+ ?

[medo]

Autor Lewis

Pokrenem BlackMagic Speed test ali Read/Write je i dalje 105/110 MB/s znaci isto kao i sa jednim kabelom ?

Ono sto vidim je dok radi speed test je da samo jedan port na switchu (od 3 komada u koje je spojen NAS) blinka samo jedan port zeleno (znaci 1 Gbit veza) i port 13 bijelo (10 Gbit mrezan na kompu).

Nekuzim sta me sad tu zaj.. switch ili NAS? Kako skuzit koji nezeli radit na/u 3Gbit tj. trunk/bond modu ?

Hvala

Trebat će ti NAS sa 10Gbe interfaceom EDIT: tvoj nas podržava 10Gbe preko dodatne PCIe kartice

Tako radi LACP. Ne može rastegnuti jedan session preko više portova. Da pokreneš tri bandwidth testa ili jedan bandwidth test sa tri ili više streamova imao bi ukupno blizu 3Gbps, ali niti jedan od njih ne bi bio preko 1Gbps pojedinačno. U datacentrima se npr. u agregaciji koristio iSCSI multipath da bi se iskoristili agregirani interfacei.

Nisam ranije vidio ovaj topic. Osobno mislim da je full 10Gbps u velikoj većini slučajeva za po doma bacanje novaca. Neki su već napisali da se za puno više novaca dobije puno manje ubrzanja i slažem se s time. Nadam se da stvarno imaš potrebu za desetkom.

[Lewis]

Probao sam i samo dva porta ali nema razlike.

Ima videa za synology i super je jednostavno a i pokaze mi link/bond da je 2000/3000 Mbps zavisno koliko portova spojim. Nekako mi se cini da nije problem kod synologya nego da mi nesto dali/nije dobro u switchu premda sam prošao kroz sve par puta da ne napravim greške.

@medo- Narucio sam dual 10Gbit SFP+ mreznu za synology ali cekam je vec 30ak dana pa sam htio probati ovako "seljacki" prije nego dodje kartica.
Znaci ovo je "normalno" i jedini nacin da ga saturiram je da pokrenem speedtest sa tri kompa odjednom?