10-GB/s-SFP+-Netzwerkkarte mit SFP+-Switch verbinden, wie Transceiver auswählen?

[oN1]

Hallo,

ich habe einen Server mit einer 10GB/s SFP+ Netzwerkkarte, den ich mit einem Switch mit 10GB/s SFP+ verbinden will.

Netzwerkkarte:
https://geizhals.de/asus-xg-c100f-90ig0490-mo0r00-a2007502.html

Da drauf ist ein Marvell/​Aquantia AQtion AQC100 Chip

Switch:
https://geizhals.de/mikrotik-cloud-router-switch-crs310-desktop-2-5g-smart-switch-crs310-8g-2s-in-a3065240.html

Die Geräte stehen im gleichen Raum. Ich schätze ich benötige eine Kabellänge von 4-5m.


Ich habe mich natürlich selbst etwas informiert, aber komme nicht weiter. Meine Ideen:

Option 1 wäre ein DAC-Kabel. 5m scheint allerdings schon vergleichsweise viel zu sein. Habt ihr irgendeine konkrete Empfehlung für ein Kabel?

Option 2 könnte ein LWL Multimode-Kabel sein. Dann brauche ich allerdings passende Transceiver. Bei einigen Transceivern steht dabei, dass sie für Intel-Netzwerkkarten bestimmt sind - für Asus oder Marvell habe ich noch nichts gefunden. :freak:
Gibt es da irgendwelche Empfehlungen die "schon passen werden"?

Letztlich bin ich aber für alle Hinweise, insbesondere konkrete Tipps mit Bezugsquelle sehr dankbar.

[Fliwatut]

Ich würde ein DAC Kabel kaufen. Gebraucht bei ebay kosten die nicht viel und wenn man bei einem gewerblichen Händler kauft, dürfte es auch kein Problem geben, falls das Kabel - warum auch immer - nicht funktionieren sollte.

[PatkIllA]

DAC ist am günstigsten in der Anschaffung, hat den geringsten Stromverbrauch und damit Hitzeentwicklung.
ich hatte auch mal die Asus und ich meine, dass mein 0815 Transceiver ohne Branding von 10GTek funktioniert hat. Habe den aber eigentlich nur zwischen Gebäuden im Einsatz.
Ich habe die Karte dann aber wieder zurückgeschickt, da sich damit der Idle Verbrauch von 10 auf 30 Watt vervielfacht hat. Die ganzen Karten unterstützen leider die Stromsparmaßnahmen von CPU/Chipsatz nicht.

Es gibt auch noch Active Optitical Cable (AOC). Da ist quasi ein LWL Kabel mit festverbauten Transceivern.

[oN1]

Danke. Ich tendiere zu einem DAC-Kabel.

@PatkIllA: Weißt Du noch, ob Du den Asustreiber oder den von Marvell verwendet hast? Der von Asus soll nicht so gut sein.
Der Aqc100/107 Chip von Marvell auf der Karte gilt als sehr stromsparend. Danke trotzdem für den Hinweis.

Dann werde ich mir eine TRENDnet TEG-10GECSFP kaufen. Die basiert auf dem Referenzdesign und wurde von mehreren Youtubern in Low-Power-Homeservern verwendet.

[mocad_tom]

https://www.amazon.de/MikroTik-Direct-Attach-Active-Optics/dp/B07VPH7HF9

Mikrotik macht die Dinge so, dass sie keinen Vendor-Lockin haben.

Normalerweise müsste das funktionieren.

Aber ganz ehrlich - schick die AQtion AQC100-Karte wieder zurück.

Eine Intel x710 ist speziell im Powermanagement so um längen besser.

https://geizhals.de/intel-x710-da2-x710da2-a1163657.html

Die AQtion Karte wacht aus einem Low Power State auf und dann schießt sie sich selber ab.

[Badesalz]

Hier wird nebenbei das Thema 10Gbit NICs behandelt
https://www.youtube.com/watch?v=XUN4gCsdNDI

Das Zeug so zusammenrücken, daß die 5m über DAC reichen. DAC ist IMMER die beste Lösung bei <5m.

Mna kann auch tatsächlich, irgendwie, miese DAC-Strippen erwischen. Eine kleine Recherche diesbezüglich wäre imho angebracht.

[PatkIllA]

@PatkIllA: Weißt Du noch, ob Du den Asustreiber oder den von Marvell verwendet hast? Der von Asus soll nicht so gut sein.
Der Aqc100/107 Chip von Marvell auf der Karte gilt als sehr stromsparend. Danke trotzdem für den Hinweis. Ziemlich sicher beides. Das sind eh die gleichen Treiber.
Die Karte selbst ist auch nur ein Problem. Das Problem ist, dass CPU und Chipsatz nicht mehr so tief schlafen gehen.

Dann werde ich mir eine TRENDnet TEG-10GECSFP kaufen. Die basiert auf dem Referenzdesign und wurde von mehreren Youtubern in Low-Power-Homeservern verwendet.Mit welchen Proz war das denn kombiniert? Und was kam raus? Mit nem N100 ist wahrscheinlich noch was anderes als mit nem ausgewachsenen Core i7.

[oN1]

Das war tatsächlich mit einem N100.

Bei der Trendnet-Karte bin ich auch was die Qualtität angeht hin und hergerissen. Eigentlich alles nicht schlecht (Made in Taiwan) aber bei meiner karte war der Kühlkörper sehr schief und drückte auf das PCB. Er ließ sich zwar zurückdrücken, aber die Karte verhindert, dass mein Server bootet.

Ich überlege jetzt tatsächlich eine Intel-Karte zu bestellen.

Eine Frage: Die Intel E810-XXVDA2 hat SFP28-Ports. Kann ich die mit einem normalen SFP+ DAC-Kabel mit meinem SFP+-Switch verbinden (natürlich mit 10Gbit)?

[PatkIllA]

Eine Frage: Die Intel E810-XXVDA2 hat SFP28-Ports. Kann ich die mit einem normalen SFP+ DAC-Kabel mit meinem SFP+-Switch verbinden (natürlich mit 10Gbit)?Jo geht. Wenn auch ein wenig Verschwendung.
Wobei die E810 auch kein ASPM unterstützt. Die ältere X710 schon.
Zumindest wird mir das hier so angezeigt.

[oN1]

Guter Hinweis. Ich war auf die Idee mit der E810 gekommen, weil ich die aus einer seriösen Quelle unproblematisch (wenn auch vergleichsweise teuer) bekommen könnte.
Bei der X710 ist die Bandbreite der Preise ja enorm...

[PatkIllA]

Ist das immer noch so, dass eine neue E810 soviel wie eine neue X710 kostet? Und die gebrauchten X710 sind oft auch noch gut dreistellig oder halt im Ausland
Habe nach einigem Warten eine X710 für 60€ bekommen. War allerdings nur Dell OEM und nur das LowProfile Slotblech dabei.

[oN1]

Es gibt schon einen gewissen Abstand, aber ich dachte die E810 könnte evtl. die stressfreiere Lösung sein: Die E810 kostet ab ~215€ - bei "meinem" Hardwaretypen, der zwar nicht günstig ist aber mir schon oft extrem geholfen hat würde ich 195€ netto zahlen.
Die X710 ist bei Geizhals ab 179€ gelistet: https://geizhals.de/intel-x710-da2-x710da2-a1163657.html

Wenn man genau guckt kommen aber Zweifel ob das wirklich die "Retail"-Version ist. Bei den meisten Läden steht was von HPE.

[Estella]

Mal als Hinweis, was ich mir 2021 gekauft habe (alles auf optisch):

Mellanox ConnectX-3 PCIe X4 NIC 10 Gigabit 10GBe SFP+ CX311A Server-Adapter 4x EUR 192,56 gesamt (ebay)

Mikrotik CRS305-1G-4S+IN Switch 2x 200€ gesamt (ebay + irgendwo)

16 Stück Cisco GBIC-Modul 10GBASE SFP+ FET-10G (ebay) gesamt 120€

Kabel: Fiber Patch Cable, LC UPC to LC UPC, Duplex, 2 Fibers, Multimode (OM4), Riser (OFNR), 2.0mm, Tight-Buffered, Aqua in unterschiedlichen Längen (FS.com) gesamt 110€

Summe ca. 650€ gesamt

Evtl. fallen ja weniger Komponenten bei dir an. Z.B. brauchst du keine 2 Switche etc.
Schaue aber auf jeden Fall mal bei Ebay nach gebrauchtem Kram. Grad die Transceiver + Mellanox Karten gibt es dort als Server 2t-Markt Produkte wesentlich günstiger als neu. Und die Dinger laufen normalerweise ohne Probleme Jahrzehnte.

[oN1]

Danke.

Einen Switch habe ich inzwischen, mir fehlt (vorerst) nur eine Netzwerkkarte.

Die Mellanox unterstützt soweit ich weiß leider kein ASPM. Daher war ich bei Marvel/Intel gelandet.

[Snoopy69]

Ich stehe auch vor der Wahl des richtigen Transceiver und Kabel…
Muss der Transceiver unbedingt passend zum Switch sein oder einfach „others“ wählen?

Und wo würdet ihr 10G-Stuff kaufen? Mir wurde https://www.fs.com/de empfohlen

[Badesalz]

Ich stehe auch vor der Wahl des richtigen Transceiver und Kabel…
Muss der Transceiver unbedingt passend zum Switch sein oder einfach „others“ wählen?Das hängt alleine davon ab, ob das Gerät mit dem Slot dafür sich um die Kennung schert oder nicht.

[Snoopy69]

Wie finde ich das heraus? Oder einfach zig Transceiver durchprobieren?

Der Switch, um den es geht, ist ein XikeStor SKS8310-8X (hab ich jedoch noch nicht)
In der Beschreibung (Bilder) sollen die Transceiver stehen. K.A. Ob der Hinweis reicht

[Badesalz]

Wie gesagt Dwayne. Wenns geht erstmal generic. Das hängt rein davon ab was die Kiste mit dem Slot wo es rein soll alles akzeptiert und was sie nicht akzeptiert.

Es sind reine locks. Da gibt es sonst keine technischen Notwendigkeiten.

[Haarmann]

Was bei mir irgendwann ansteht wird in der Währung sein ... mehr bin ich nicht bereit hinzulegen.

https://www.serverschrank24.ch/sfp-transceiver-modul-plus-multimode-duplex-850nm-300-meter.html

Dann wird eben das Gerät angepasst ...

[Snoopy69]

Wie gesagt Dwayne. Wenns geht erstmal generic. Das hängt rein davon ab was die Kiste mit dem Slot wo es rein soll alles akzeptiert und was sie nicht akzeptiert.

Es sind reine locks. Da gibt es sonst keine technischen Notwendigkeiten.
Ich verstehe davon leider garnichts… ;(
Ich kann dir nur sagen, wo 10G sein soll (am PC „5950X/9950X3D“ und am NAS „DXP6800 Pro“)

[PatkIllA]

Das NAS hat schon mal 10 GBASE-T. Warum willst du da einen SFP+ only Switch?
Und was für Netzwerk hast im PC?

[Snoopy69]

Glasfaser ist schön dünn, hat je nach Kabel nen Biegeradius von 7,5mm und störungsunempfindlich. Hab zuviel Kram aussen rum, das gewöhnliche Leitungen stören könnte. Zu übertrieben?

Für das NAS bräuchte ich nen Adapter von RJ45 zu Glasfaser. Oder ich nutze den PCIe-Slot (4.0 x8) und setze ne SFP-Karte ein

[PatkIllA]

Glasfaser ist schön dünn, hat je nach Kabel nen Biegeradius von 7,5mm und störungsunempfindlich. Hab zuviel Kram aussen rum, das gewöhnliche Leitungen stören könnte. Zu übertrieben?Das schön dünn stimmt aber mit Stecker braucht man dann doch wieder ordentliche Löscher.
Das normale Ethernet kann schon einiges ab. Selbst 10G ist für ungeschirmte Cat6(a) Kabel spezifiziert.
Für das NAS bräuchte ich nen Adapter von RJ45 zu Glasfaser.10G Medienkonverter sind selten, bzw da nimmt man gleich einen Switch.

Ich würde mir an deiner Stelle einen Switch mit gemischten Ports suchen. Oder evtl gar einfach das NAS und den PC direkt verbinden.

[Snoopy69]

Hab ich mir auch schon überlegt (gemischt)…
Aber wie mache ich das mit dem NAS? Da hätte ich auch gerne Glasfaser. Der „Konverter“ wäre wohl teurer, wie eine SFP-Karte

Abgesehen von der Marke…
Wieviel verschiedene 10G-Transceiver gibt es denn? Long Range brauche ich schon mal nicht. Also Multimode (Short Range)

Single- oder Dualfiber? Und welche Wellenlänge? :confused:

[PatkIllA]

Es gibt Unmengen an Transceiver, da da jeder was eigenes basteln kann.
Ich würde SingleMode nehmen, da es mittlerweile praktisch das gleiche kostet und eigentlich alles neue das benutzt. Damit ergibt sich dann in der Regel auch die Wellenlänge.
Und dann Duplexkabel. Das ist deutlich günstiger als die verschiedenen Wellenlängern für Senden/Empfangen wieder zu trennen.

[Snoopy69]

Ah, ok…
Dachte mir, dass Singlemode teurer ist, weil für große Entfernungen gedacht. Aber wenn die genauso viel kosten, wie für kurze Strecken, dann Single

Gibt es hier User, die Glasfaser bei Kabellängen bis 5m nutzen? Oder ist das völlig übertrieben?

[Haarmann]

Ah, ok…
Dachte mir, dass Singlemode teurer ist, weil für große Entfernungen gedacht. Aber wenn die genauso viel kosten, wie für kurze Strecken, dann Single

Gibt es hier User, die Glasfaser bei Kabellängen bis 5m nutzen? Oder ist das völlig übertrieben?

Fiber ist auf die Distanz zu teuer ...

Das macht man mal zum Spass ja ...
Selbst im RZ sah ich für 10 GBit noch keine solchen Verkabelungen. Kupfer und gut. Was dann aber auffällt - die Menge der bereitliegenden Ersatzkabel.

[PatkIllA]

5m geht gerade noch mit DAC.

[Badesalz]

5m geht gerade noch mit DAC.Die Erfahrungen aus der ersten bzw. direkt zweiten Hand ist: Bei passivem DAC sind 3m und 5m eher die gängigen Längen.
Auch wenn die Spezi bis 7m geht sind dann die Längen >5m das Glücksspiel. Oft, weil das Gerätezoo + Amazonware eben ist was es ist.
2 Cisco-Switche mit einem Cisco-DAC auf 7m zu verbinden funktioniert aber tatsächlich. All sowas möchte man aber nicht zahlen (und braucht es eigentlich auch nicht).

Wenn man die gesamte Wahl aber hat und die Länge max. 5m ist. IMMER DAC nehmen. DAC ist das goilste was gibt.

@Harmann
Falscher Dampfer? Wir haben selbst in unserem mini-RZ seit 2 Jahren keine 10Gbit mehr in Kupfer mit mehr als 50cm Länge. Und selbst die kannst du an einer Hand abzählen. NUR Fiber geht aus Distanz :rolleyes:
10Gbit stirbt aber abseits der Clients selbst bei uns langsam aus. Selbst 25Gbit, sind ein Thema von 2019.

10Gbit gehört endlich in das Consumertech. Das ja. Mittlerweile fast schon dringend. Lösungen für die Infrastruktur gibt es mittlerweile in preiswert und zuverlässig. Lösungen für die Endpunkte (Clients) sind bisher weiterhin alle Shice, weil das überwiegend die abgerockte Resterampe der Rechenzentren ist. Die sind für die heimische Nutzung kaum tauglich.

Die Disku führt man auf Luxx alle 3 Monate aufs Neue mit einem bisher fortlaufend ähnlichem Ergebnis :rolleyes: Noch jedenfalls.

[Haarmann]

Badesalz

Bei uns in der Schweiz kann man inzwischen rechnen ;)

Als das, was einst PTT war und heute Swisscom genannt wird, in den 90ern Glasfasern durch die Gebäude zog ... war alles was ausm Kupfer wieder rauskam - 10 MBit ;).
Nicht - weil 100 MBit / 1 GBit nicht liefe ... nein, weil die dummen Drucker sonst nicht liefen. Und weil es nicht verwaltbar was ... 10er reicht.

Es lohnt nicht, da mehr zu verlochen. Fürs Rack brauchts keine Glasfaser - fürs ganze Rack - 10 Gbit? Reicht auch nicht.

Ich persönlich wünschte mir schon lange ... mal Verlegekabel für User, die das können. Ich hab das Kupfer hier so satt ...
Die lärmenden Drehteller hab ich in den Dachboden verfrachtet ... aber alles, was verbaut wurde, sind die Plasterohre ... konfektionierte Kabel kriegst ned durch - Duplex eh nie.

[Badesalz]

@Haarmann
Ja ich kenn diese baulichen Dramas :rolleyes:

Tatsächlich haben wir aber auch Netzwerkracks auf einer Etage die mit dem auf der anderen Etage auch nur über SFP+ verbunden sind. Da hat man bei Office/SAP/Videomeetings auch keine Not sich for nothing anzustrengen. Rein rausgeworfenes Geld.
Auch bei 2.5Gbit oder Wifi6 an den Clients nicht. Dafür wurde ja der Gleichzeitigkeitsfaktor erfunden :wink:

[Snoopy69]

Welche 10G-Karten habt ihr bei euch zuhause verbaut?
Momentan nutze ich AQC113 als Karte und bald (testweise) mit RTL8127. Letztere gibts recht günstig bei "Baba" für unter 30€
https://www.alibaba.com/product-detail/1-Port-PCIe-10G-Ethernet-Network_1601486634706.html

Hier als SFP...
https://www.alibaba.com/product-detail/PCIe3-0-4X-10G-Fiber-Lan_1601617640584.html
Warum die Karten mit SFP PCIe3 x4 haben - k.A.

[PatkIllA]

Welche 10G-Karten habt ihr bei euch zuhause verbaut?Ich habe eine mit Intel X710 und eine mit E810. Und noch eine Connect-X im Schrank.
Momentan nutze ich AQC113 als Karte und bald (testweise) mit RTL8127. Letztere gibts recht günstig bei "Baba" für unter 30€
https://www.alibaba.com/product-detail/1-Port-PCIe-10G-Ethernet-Network_1601486634706.htmlDas sind ja alles 10GBase-T.

Hier als SFP...
https://www.alibaba.com/product-detail/PCIe3-0-4X-10G-Fiber-Lan_1601617640584.html
Warum die Karten mit SFP PCIe3 x4 haben - k.A.Zumal der Chip eigentlich nur 2 Lanes kann und das eigentliche Killerfeature ist, dass die mit einer Lane PCIe Gen4 auskommen.
Schön dass das Zeugs jetzt kommt.

[Snoopy69]

Ich habe eine mit Intel X710 und eine mit E810. Und noch eine Connect-X im Schrank.
Das sind ja alles 10GBase-T.

Zumal der Chip eigentlich nur 2 Lanes kann und das eigentliche Killerfeature ist, dass die mit einer Lane PCIe Gen4 auskommen.
Schön dass das Zeugs jetzt kommt.
Ja, und...?
Die Dinger sollen recht verbrauchsarm sein (im Gegensatz zu zb X540-T1/T2)

RTL8127 muss sich erstmal gegen AQC113 beweisen (etwas mehr als 9,9G real)

[PatkIllA]

Ja, und...?
Die Dinger sollen recht verbrauchsarm sein (im Gegensatz zu zb X540-T1/T2)Weil du in den anderen Posts selbst 5m mit Glasfaser machen willst.

Und SFP+ bleibt trotzdem sparsamer.
Mal abgesehen von der oft fehlenden ASPM Unterstützung was mehr als den Eigenverbrauch der Karte ausmachen kann.

[Snoopy69]

Achso, ja…
RTL8127 testweise. Die Kosten für GF-Kabel, Transceiver müsste man gegenrechnen
Momentan weiß ich noch nicht wie ich vom NAS (DXP6800 Pro) mit GF zum 10G-Switch kann. Ich bräuchte einen Wandler/Konverter, der von RJ45 zu SFP wandelt und ob das Sinn macht (wegen evtl. Kosten)

Einzige Möglichkeit wäre der momentan leere PCIe4 x4-Slot. Dort könnte ich einen SFP-NIC stecken. Diese Karte müsste ich dann auch gegenrechnen (und ein Slot fehlt mir für andere Sachen wie GPU etc)

Oder gibt es Kabel von RJ45 zu SFP?

[Haarmann]

Badesalz

SAP braucht Bandbreite? Wusste ich gar nicht ... ich dachte immer die Sanduhr dreht auch so ;).

Letzten Endes bindet man Gerät mit ner Bandbreite an - und genutzt wird was schon wieder? Wort mit x.

Was micht nicht daran hindern wird hier Glasfaser einzuziehen ...

Meine Internetleitung ist ja topmodern - Kupfer? - neeee - das ist mir doch zu modern, weil oberirdisch guter alter Stahl. Geschwindigkeit der Storch bringts.

Rechts und Links nebenher - auf beiden Strassen - reine Glasfaser ...

Und leider ist im Showroom, wo ich die Geräte für die Fotos und so habe - nur 100 MBit - dort will ich eben Fiber.

[Badesalz]

RTL8127 muss sich erstmal gegen AQC113 beweisen (etwas mehr als 9,9G real)Das ist in einem nicht-Server keine wichtige Kenngröße :|
Mal abgesehen von der oft fehlenden ASPM Unterstützung was mehr als den Eigenverbrauch der Karte ausmachen kann.Der wirklich kaum relevant ist, wenn so ein Ding gleich der ganzen Kiste die C-states lockt und man beim Eigenverbrauch des NICs von 7W einen Mehrverbrauch an der Steckdose um 32W hat. Und auch die Lüfter fahren nicht mehr runter, wenn man im Forum tippert...
Oder man den Hobel anlässt, duschen geht, der schaltet dann zwar runter, aber wenn man kommt und mit der Maus wackelt oder auf die Tasta haut ist er zwar wieder oben, aber der Link ist tot. Und geht erst wieder, wenn man es kurz absteckt und wieder ansteckt. usw. usw.

@Haarmann
Ob und wie lange SAPs Sanduhr dreht bestimmt weder der Client noch die Verbindung zwischen dem Client und dem Server :wink:

[Snoopy69]

...sonder...?

[Badesalz]

Leute die sich mit neuer HW auch schon früher auf 108 MB/s was gekeult haben, wenn davor nur 97 MB/s ging... Muss man das ernst nehmen?
Sonder wie oben in #38.

PS:
Bei dir scheinen die Sachen wohl zu laufen. Sonst würdest du schon was zu erzählen. toi toi toi. Behütte das Mainboard und seine BIOS-Version :up: