PC Ekspert Forum

PC Ekspert Forum (https://forum.pcekspert.com/index.php)
-   Mreže (https://forum.pcekspert.com/forumdisplay.php?f=16)
-   -   Upgrade na 10GBe mrezu - kako ? (https://forum.pcekspert.com/showthread.php?t=295469)

Nikky 25.06.2021. 11:59

10 GB je još uvijek novitada i dosta skup sport,
a vidim da se svima chipovi poprilično griju, od vulgaris mrežne do ovih u switch - evima.

Taj MikroTik CRS312-4C+8XG-RM je zvjerka, možeš birati hoće li vrtiti njihov RouterOS ili SwOS, ...
Naravno da je bučan, nema 2 nego čak 4 ventilatora a kako je debljine 44 mm jasno da su morali staviti 40 mm "turbine" za ohladiti ga.

Evo ovdje review > https://www.servethehome.com/mikroti...switch-review/

EDIT: Netko je već pregrmio garu i mijenjao ventilatore > https://www.youtube.com/watch?v=5Bz0F6WTZ7I
temperature jesu nešto više u odnosu na stock ali je buka bitno manja.

Tu sam vidio Netgear ProSAFE XS708T alternativu > https://www.servethehome.com/netgear...base-t-switch/
Po review taj nije toliko bučan a treba vidjeti dobavljivost,
možda ti pokrije potrebe.

That's my 5 cents :)

Pupo 25.06.2021. 12:37

Nego, u NASu imaš all flash storiđ? Vidim da spominješ i LA za nas, to fakat treba mašinerija za saturirat taj link.

Lewis 25.06.2021. 12:40

Nemam flash/cache u NASu ali imam RAID 6 (u stvari SHR-2) tako da 6 diskova mogu potegnuti dobre read/write brzine (read im je oko 230-250 po disku znaci teoretski mogu prebacit i 10 GB read speed kad kopiram velike video fileove).

Lewis 25.06.2021. 13:25

Citiraj:

Autor Nikky (Post 3528039)
EDIT: Netko je već pregrmio garu i mijenjao ventilatore > https://www.youtube.com/watch?v=5Bz0F6WTZ7I
temperature jesu nešto više u odnosu na stock ali je buka bitno manja.

Tu sam vidio Netgear ProSAFE XS708T alternativu > https://www.servethehome.com/netgear...base-t-switch/
Po review taj nije toliko bučan a treba vidjeti dobavljivost,
možda ti pokrije potrebe.

Da ovaj MikroTIK sa default ventovima je kao helikopter, strasno bucan :(.

Znaci ako njega kupujem moram racunati jos 600kn za 4 Noctuae i garancija out, hmmm.

Netgear nevidim kod nas dobavljiv a i cini se nesto skuplji od ova dva.

Pupo 25.06.2021. 13:34

Ak ćeš već izgubit jamstvo, ja bih odneo poklopac pod laser za 1x120mm vent. Slim stane 99%.

Lewis 25.06.2021. 13:39

Citiraj:

Autor Pupo (Post 3528064)
Ak ćeš već izgubit jamstvo, ja bih odneo poklopac pod laser za 1x120mm vent. Slim stane 99%.

Mislim da moraju bit spojeni sva 4 jer inace pali lampicu (i moze bit neki hardware alarm) da neradi fan a neznam bas da stanu 4 komada 120mm :)?

Pupo 25.06.2021. 14:04

Spliter ili neki otpornik. Neznam na koji način bilježi da su tu.


Realno, pretpostavljam da switch niti neće biti opterećen max stalno niti u vrućim uvjetima. Bubni otpornike na postojeće ventove.

Lewis 25.06.2021. 14:11

Ma sve mi se cini da cu ipak ici na Ubiquiti i onda sa 2 kom SFP+ Tranciverima iskorisitti 2 porta za NAS da mi ostanu 4 porta (RJ45) za Worsktation, 2 Renderslavea i link na 1Gbit sadasnji switch (za sve ostale stvari i internet/router vezu).

Samo sad treba istrazit jel trebam iskljucivo Ubiquti SFP+/RJ45 transciver ili moze radit bilo koji, recimo Mikrotikov
(https://ezy.hr/artikl/mikrotik_10g_s...k_s_rj10/25468)

BTW to malo djubre kosta 350-500kn/komad :D

Nikky 25.06.2021. 14:14

Da, da, ima kontrola, loše je spomenut taj detalj u videu,
nakon zamjene ventova mu je palio Fault Led (vjerojatno zbog temperatura),
a riješio je nakon šta je u managmentu prebacio "ciljanu temperaturu" sa 55 na 60.

Za DIY kemije ima raznih rješenja:
- ako nije problem vent može biti i sa vanjske strane poklopca
- detekciju se zavara na način da se rpm pin spoji na više fan headera
- kao prvi korak ja bi ostavio ventove kod psu i na sredini,
a ova dva kod heatpipe bi maknuo, stavio jedan 120 (makar i vani) + spomenuti štos sa rpm pinom

Za Netgear vidi jeli ga možeš dovući izvana > https://geizhals.eu/netgear-prosafe-...-a1444319.html

Pupo 25.06.2021. 14:28

Pogledaj si fs.com

Imas tamo ‘zamjenskih’ modula s listom na sto idu.

Lewis 25.06.2021. 14:30

Nego jesam ja nesto pobrkao pa treba jos neki dio ili bi ovakav DAC kabel bio dovoljan da spojim NAS (sa ovom SFP+ karticom https://www.synology.com/en-global/products/E10G17-F2) i Ubiquity switch u njegove SFP+ portove ?

Screengrab kabela:
https://www.dropbox.com/s/ok1ggs6g0h...C_SFP.jpg?dl=0

To je pasivni DAC kabel ali kolko kuzim ni netreba mi bolji ako nezelim prelaze sa SFP+ na RJ45 u kojem slucaju me samo dva Transcivera kostaju 800-900 kn + CAT 6 kabeli za posapajat ?

Znaci kupim ta dva kebela (za 200-250 kn zavisno od duzine koju trebam) i spojim NAS u taj Ubiquity switch direktno i to je to ? Ili trebam jos neke prijelaze/transcivere ?

the_ghost 25.06.2021. 14:45

Ako oba devicea rade s tim kablom, ne treba ti nista drugo. Kabel ima svoj integrirani receiver.

Lewis 25.06.2021. 14:49

Citiraj:

Autor the_ghost (Post 3528095)
Ako oba devicea rade s tim kablom, ne treba ti nista drugo. Kabel ima svoj integrirani receiver.

Pa Ubiquity sigurno radi jer oni prodaju taj kabel uz svojoj ponudi
(https://eu.store.ui.com/collections/...31063415062637)

Sad samo da skuzim dali radi sa Synology F2 karticom (probat cu pitati na synology forumu).

Thx

Nikky 25.06.2021. 14:50

Nisam našao review za točno isti UniFi ali evo "slični model" > https://www.servethehome.com/ubiquit...ontrol-absent/
na test im je došao malo skršen :fiju:

Nije bučan kao MikroTik - ov ali isto šuška i nije za držati blizu ...

Lewis 25.06.2021. 14:57

Citiraj:

Autor Nikky (Post 3528098)
Nisam našao review za točno isti UniFi ali evo "slični model" > https://www.servethehome.com/ubiquit...ontrol-absent/
na test im je došao malo skršen :fiju:

Nije bučan kao MikroTik - ov ali isto šuška i nije za držati blizu ...


Ima kod Lawrencea review i Ok je switch (plus jendnostanviji software nego MikroTik, bar za mene :))
https://www.youtube.com/watch?v=bA9LjWVERy4

U biti njega sam i htio ali kad sam shvatio da trebam 6 RJ45 portova (2 za NAS, 1 za WS i 2 za RSlave te 1 link na 1Gbit switch) onda mi se upalila lampica da "moram" ici ili na SFP+ ili trazit ove Transcivere i tako sam naletio na Mikrotik ali radije bi UBQ a i cijenom su tu negdje oko 100 kn razlike :).

Nikky 25.06.2021. 15:22

Po navedenom izgleda da je UBQ bolja opcija.

EDIT: Bilo bi dobro da napraviš bandwith test između bitnih klijenata sada pa usporediti kada digneš 10 GB upgrade.
Mali osvrt na potrebno i postignuto nebi bio na odmet.

Jasno da je razlika između SOHO i ozbiljnih business zahtjeva a jednako tako i cijenom svega skupa.

Lewis 10.08.2021. 16:33

Evo ma nazad.

Ormar je slozen i kupio sam Ubiquiti EdgeSwitch 16XG (12 SFP+ i 4 RJ45 10 Gbit porta).

Switch fino radi i sve je jednostavno (ima onaj detaljni GUI a ima i ovaj NEW GUI za nas Mrezne tutleke/pocetnike di je sve fensi šmensi ali sa 20% opcija koje ima obicni GUI, meni dosta :)).
LAG (Link Aggregation) i LACP u Dynamic/Static modu se lako ukljuce na portovima. Sve je fino graficki kliknes na port i stisnes LAG 1,2,3,4,5,6 tj. koju grupu zelis linkati portove.

I sad problem:

Ja iz kompa (10Gbit mrezna u Threadripperu) spojim kroz patch panel sa RJ45 kabelom u Keystone (CAT 6 su keystone i kabeli) fino u port 13 na Switchu i on prijavi 10Gbit konekciju (svijetli bijela lampica i GUI kaze 10 Gbit) to je znaci ok.
Na Synology (DS 1817+ sa ukupno 4 RJ45 gigbit porta) ustekam 3 ostala RJ45 porta na Switch i stavim LAG1 na switchu i napravim Bond na Snyologyu od ta tri kabela i vidim da je ukupno 3000 MBit veza iz Synologya (tako bar on prijavi u control panelu/network).
Znaci super sad bi trenbao imati teoretski 3Gbit vezu komp/NAS...

Pokrenem BlackMagic Speed test ali Read/Write je i dalje 105/110 MB/s znaci isto kao i sa jednim kabelom ?

Ono sto vidim je dok radi speed test je da samo jedan port na switchu (od 3 komada u koje je spojen NAS) blinka samo jedan port zeleno (znaci 1 Gbit veza) i port 13 bijelo (10 Gbit mrezan na kompu).

Nekuzim sta me sad tu zaj.. switch ili NAS? Kako skuzit koji nezeli radit na/u 3Gbit tj. trunk/bond modu ?

Hvala

Nikky 10.08.2021. 16:53

Za počdtak, probaj sa parnim br. portova na Synology - ju za LAG.
Jeli ima primjera po internetu kako ga podesiti na DS1817+ ?

medo 10.08.2021. 16:55

Citiraj:

Autor Lewis (Post 3537641)
Pokrenem BlackMagic Speed test ali Read/Write je i dalje 105/110 MB/s znaci isto kao i sa jednim kabelom ?

Ono sto vidim je dok radi speed test je da samo jedan port na switchu (od 3 komada u koje je spojen NAS) blinka samo jedan port zeleno (znaci 1 Gbit veza) i port 13 bijelo (10 Gbit mrezan na kompu).

Nekuzim sta me sad tu zaj.. switch ili NAS? Kako skuzit koji nezeli radit na/u 3Gbit tj. trunk/bond modu ?

Hvala

Trebat će ti NAS sa 10Gbe interfaceom :beer: EDIT: tvoj nas podržava 10Gbe preko dodatne PCIe kartice

Tako radi LACP. Ne može rastegnuti jedan session preko više portova. Da pokreneš tri bandwidth testa ili jedan bandwidth test sa tri ili više streamova imao bi ukupno blizu 3Gbps, ali niti jedan od njih ne bi bio preko 1Gbps pojedinačno. U datacentrima se npr. u agregaciji koristio iSCSI multipath da bi se iskoristili agregirani interfacei.

Nisam ranije vidio ovaj topic. Osobno mislim da je full 10Gbps u velikoj većini slučajeva za po doma bacanje novaca. Neki su već napisali da se za puno više novaca dobije puno manje ubrzanja i slažem se s time. Nadam se da stvarno imaš potrebu za desetkom.

Lewis 10.08.2021. 16:57

Probao sam i samo dva porta ali nema razlike.

Ima videa za synology i super je jednostavno a i pokaze mi link/bond da je 2000/3000 Mbps zavisno koliko portova spojim. Nekako mi se cini da nije problem kod synologya nego da mi nesto dali/nije dobro u switchu premda sam prošao kroz sve par puta da ne napravim greške.

@medo- Narucio sam dual 10Gbit SFP+ mreznu za synology ali cekam je vec 30ak dana pa sam htio probati ovako "seljacki" prije nego dodje kartica.
Znaci ovo je "normalno" i jedini nacin da ga saturiram je da pokrenem speedtest sa tri kompa odjednom?

medo 10.08.2021. 17:05

Sve ti je normalno. Ili možeš jedan speedtest koji pokreće više streamova odjednom.

Koliko ti se grije switch?

Lewis 10.08.2021. 17:20

Citiraj:

Autor medo (Post 3537654)
Sve ti je normalno. Ili možeš jedan speedtest koji pokreće više streamova odjednom.

Koliko ti se grije switch?

Nemam pojma, pise "normal" :). Na dodir je mlak nista specijalno. Vise topline NAS izbacuje u rack nego sam(i) switch(evi).
Ovako se vidi pod Temp status:
https://prnt.sc/1mbjimo

Ima tu vise stvari u ormaru pa svako pomalo grije i cini mi se da ovaj gornji Gigabitni (EdgeSwitch 48LITE) se dosta vise grije nego ovaj 16XG 10Gbit model. Bar ovako na dodir.
https://www.dropbox.com/s/hpm3hwakhc..._v002.jpg?dl=0

medo 10.08.2021. 17:27

Super. Baš me zanima kako će ti raditi.

Jedan mali savjet: SFP+ transceiveri se puno više griju od običnih SFPova pogotovo RJ45. Dobro ih je razmaknuti po portovima u switchu da nisu jedan ispod drugoga jer se tako griju puno više.


EDIT: ono su aktivni ili pasivni DAC kabeli između dva UBNT switcha?

Lewis 10.08.2021. 17:43

Citiraj:

Autor medo (Post 3537660)
Super. Baš me zanima kako će ti raditi.

Jedan mali savjet: SFP+ transceiveri se puno više griju od običnih SFPova pogotovo RJ45. Dobro ih je razmaknuti po portovima u switchu da nisu jedan ispod drugoga jer se tako griju puno više.

Da to sam skuzio ali ovo moje su DAC kabeli bez klasicnog transcivera prijelaza na RJ45 pa se kao manje griju. Znaci ova dva trenutna kabela su ovaj model https://store.ui.com/collections/uni...ac-patch-cable
A i za Synology sam narucio SFP+ karticu (a ne RJ45) te imam jos 2 DAC SFP+ kebela od 1m da mi dohvate od NASa do switcha (njih nemogu provuci kroz patch panel tj. nisam nasao Keystone za SFP+ , postoji li to uopce ili ce patch paneli izumrijet :)?).

Sto se tice LAG/LACP u pravu si, sad sam isproboa sa dva kompa odjendom, cak i na obicnom Gigabitnom switchu (prebacio sam NAS na 4*1Gbit u ovaj gornji switch) oba kompa imaju 1Gbit brzine u isto vrijeme
Evo screen
https://prnt.sc/1mbqr30

U biti sam Linkao oba SFP+ porta iz 48ce u oba porta na 16XG tj. veza izmedju switchewa je failasfe/dupla tj. 20Gbit (ovo je overkil ali vise mi je bitno da u slucaju krepavanja kabela/porta i dalje sve radi nego sto mi treba 20Gbit vs 10Gbit) a LAG/Synology sam sad prebacio na 4 porta na 48ci.

Uglavnom bitno da sam sad nesto pametno naucio (Hvala), pogledao sam tolko videa i procito textova i niko nigdje u njima nije spomenuo da LAG/LACP ne zbraja promet prema jednom kompu/kabelu... Mislim svjedno sam narucio 10Gbit za Synology jos davno ali je switch stigo prije pa sam pomislio probat ovako seljacki dobit 3-4Gbit, e neces :) :).

medo 10.08.2021. 18:11

Hehe, mrežaš je uvijek u pravu :D Ili bar u većini slučajeva.... kad su mreže u pitanju :chears:

Lewis 10.08.2021. 18:17

Citiraj:

Autor medo (Post 3537668)
Hehe, mrežaš je uvijek u pravu :D Ili bar u većini slučajeva.... kad su mreže u pitanju :chears:

BTW gledam sad po UB forumima i ljudi pitaju ovo za temparature i za ove 24/48 portne (nema za ovaj 10Gbit) kaze UBNT da je normlano da bude 70C temperatura switcha i da pishe samo "normal", ako bude tako, brzo ce letit van racka :D.

Navodno je stari model bio passive a ovaj noviji ima dva Fana koji se vrte tek na 70ak C i nema stelanja krivulje...

medo 10.08.2021. 19:09

Zato sam pitao za temperature jer se 10Gbe switchevi prilično griju. Uzmi onaj mali MikroTik za soma kuna, stavi u njega četiri RJ45 SFP+ interfacea i nećeš ga moći primiti u ruku koliko bude vruć.

Mislim da još nisam vidio 10Gbps PCIe karticu koja nema pasivni hladnjak na ASICu. Zamisli sad switch sa 16x 10Gbe portova :)

Lewis 10.08.2021. 19:26

Citiraj:

Autor medo (Post 3537678)
Zato sam pitao za temperature jer se 10Gbe switchevi prilično griju. Uzmi onaj mali MikroTik za soma kuna, stavi u njega četiri RJ45 SFP+ interfacea i nećeš ga moći primiti u ruku koliko bude vruć.

Mislim da još nisam vidio 10Gbps PCIe karticu koja nema pasivni hladnjak na ASICu. Zamisli sad switch sa 16x 10Gbe portova :)

Nisam mislio 10Gbit switch, taj je hladniji (i to dosta) od ovog EdgeSwitch 48LITE, taj se grije ajme :).

Lewis 14.08.2021. 22:39

Nego da pitam , jel ovo normalno da ima "dropped" paketa ?
Vidim ima toga na svim portovima i svagdje je XYZ/Dropped a 0 Errors ali cisto da provjerim? Mislim sve radi OK, ne osjetim nikakve probleme u radu samo mi cudno da ima toliko tih izgubljenih paketa...
https://prnt.sc/1oppnzw

Pupo 15.08.2021. 10:47

Od 15 miliona paketa, ako ti dropa 300, no biggie :)

Inače, gore si sakriješ ip adresu, pa ti dolje ostane kod rutera :D

Lewis 15.08.2021. 10:48

Routerova je nebitna, prebojao sam MAC adresu

dadoremix 15.08.2021. 11:29

Cemo to skrivanje u lokalnoj mrezi?
Panic guy?

the_ghost 16.08.2021. 17:00

Citiraj:

Autor Lewis (Post 3538691)
Nego da pitam , jel ovo normalno da ima "dropped" paketa ?
Vidim ima toga na svim portovima i svagdje je XYZ/Dropped a 0 Errors ali cisto da provjerim? Mislim sve radi OK, ne osjetim nikakve probleme u radu samo mi cudno da ima toliko tih izgubljenih paketa...
https://prnt.sc/1oppnzw

Normalan TCP promet je jako bursty, ti nemas nikada kontinurani stream podataka, i onda kada saljes promet sa 10G porta (jer stroj npr moze poslati toliko), on ce i pokusati. Kada taj promet dodje na 1G port, ne moze proci istog trena, zato switchevi imaju buffere da to odhendlaju, ako je buffer premali a na vecini switcheva je, moze doci do dropanja paketa. realno, ne bi trebalo brinuti jer ce TCP se pobrinuti za error correction.

Ista stvar vrijedi i za manje a i vece mrezne brzine.

Sakrivanje IP adrese i MAC adrese je useless, posto se radi o privatnoj mrezi koja nije dostupna izvana osim ako ti switch iz nekog razloga nije na javnoj IP adresi.

Nikky 17.08.2021. 12:42

Jedan detalj u vezi bursty prometa,
nekada davno (počeci mreža) znalo je biti koristi od promjene (uglavnom povećanja) Rx i Tx buffera,
dosta mrežnih ima tu opciju u postavkama / drajveru.

Isto tako moglo bi pomoći uključivanje Jumbo frame ako ga mogu koristiti (svi) klijenti.

Postoje oni network testeri sa kojima bi se trebalo provjeriti / potvrditi jeli promjena na bolje ili na lošije.

Lewis 23.08.2021. 11:28

Evo stigla je i synology E10G17-F2 mrezna PCIe kartica.

Sad mi napokon mreza vise nije bottleneck za NAS diskove :)
https://www.dropbox.com/s/tzh75hscoh...0Gbit.png?dl=0

BTW nego jel ima neka preporukz a JumboFrames (MTU na synologyu), da to ostavim kao sad na 9000 ili da prebacim na neki drugi settings/opciju ?

Nikky 23.08.2021. 11:50

9000 je neki default,
bitnije ne da je na oba kraja isti broj.

Edit: Trebala bi se viditi razlika na bandwithu.

medo 23.08.2021. 19:52

Citiraj:

Autor Lewis (Post 3540695)
Evo stigla je i synology E10G17-F2 mrezna PCIe kartica.

Sad mi napokon mreza vise nije bottleneck za NAS diskove :)
https://www.dropbox.com/s/tzh75hscoh...0Gbit.png?dl=0

BTW nego jel ima neka preporukz a JumboFrames (MTU na synologyu), da to ostavim kao sad na 9000 ili da prebacim na neki drugi settings/opciju ?

Jumbo frames je zov na probleme. Najbolje izbjegavati. Ja sam to koristio samo ako bi imao server direktno spojen u SAN pa postaviš isti MTU na obje strane. Inače razlike praktički nema.

Ako želiš olakšati stvari hardwareu probaj aktivirati flow control. To će usporiti protok cca 2-3% u slučaju zagušenja 10GBe linka ali ćeš eliminirati retransmisije u slučaju zagušenog linka. To rasterećuje i pomaže, ali nekad pravi probleme ovisno o switchu.

Lewis 24.08.2021. 00:40

ok hvala za info, za sad cu ostavit ovkao da switch i NAS imaju podeseno na 9000 na tim portovima (stavio sam LAG na dva porta SFP+ nek se nadje :)) pa cu vidjeti kroz par dana/tjedana jel ima kakvih problema.

Nikky 16.09.2021. 11:30

I kakvi su rezultati ?
Koliki je skok u brzini (mislim funkcionalno) ?
Dali radi stabilno ili nešto štuca ?

Lewis 16.09.2021. 11:39

Za sad nema stucanja, sve stabilno radi.

Neki dan sam bas kopirao 17GB backup file i kad ide sa SSDa onda na NAS snima jako lijepih 480-500 MB u sekundi :).

Kad kopiram sa Exosa x16 16TB onda nemoze brze od nekih 260-270 ali to je limit SATA HDDa i to je i dalje preko 2x brze nego je bilo prije kad je zakucavalo na 115-118 tako da zadovoljan sam :).

Jos sam nedavno i kabele zamjenio sa Ubiquiti cat6 slim patch kabelima (22cm sa konektorom) da bude ljepse/urednije (znam, znam to je sad vec OCD ;) - Bijeli kabeli su 10Gbit, plavi 1Gbit, Crveni Internet i jeb..a dva crna 10Gbit DAC za Synology od 1m jer Ubiquiti nema 1m bijele nego samo 50cm bijele :) )

https://www.dropbox.com/s/guaxj34x8t..._v004.jpg?dl=0
https://www.dropbox.com/s/3ldo15f12v..._v005.jpg?dl=0


Sva vremena su GMT +2. Sada je 14:05.

Powered by vBulletin®
Copyright ©2000 - 2025, Jelsoft Enterprises Ltd.
© 1999-2024 PC Ekspert - Sva prava pridržana ISSN 1334-2940
Ad Management by RedTyger