QSFP28 - Gibt es so etwas wie ein Crossover-Kabel?

8

Kann nichts dazu finden;)

Aufbau eines Hyperconvergend-Clusters als Entwicklungssystem. Dies ist für uns Stand der Technik.

Ich habe zunächst 2 Maschinen bekommen, mit einem Schalter, der in ungefähr 4 Wochen kommen soll. Beide Server verfügen über 2x100 GB Ethernet-Karten von Mellanox (ConnectX 4).

Wenn ich ein Kabel direkt zwischen sie stecke, bekomme ich einen Link nach unten. Ich sehe, dass der Link versucht (d) zu kommen, aber fehlgeschlagen ist, Verbindung wird sofort unterbrochen.

Wird die direkte Serververbindung zwischen zwei Ethernet-Karten von QSFP28 nicht unterstützt? Was sollte ich sonst noch beachten? Im schlimmsten Fall "boxe" ich die 100g-Verbindung, bis der Schalter eintrifft.

TomTom
quelle

Antworten:

10

Es gibt kein Crossover-Patchkabel im alten Stil oder was auch immer. Richtig funktionierendes passives Kupfer (Sie verwenden keine Optik, oder?) Die QSFP-Verbindung sollte funktionieren, unabhängig davon, ob Sie zwischen Switch und Switch wechseln. Verwenden Sie eines davon oder handelt es sich um etwas von Drittanbietern?

http://www.mellanox.com/products/interconnect/ethernet-direct-attach-copper-cables.php

Referenz-Mellanox-Thread (bisher unbeantwortet).

https://community.mellanox.com/thread/4125

BaronSamedi1958
quelle
Nein, ich habe welche von fs.com bekommen - dies ist das erste Mal, dass wir SFP28 verwenden. Bisher 2 Server, 2 Kabel - beide verbinden sich nicht. Treiber sind aktuell. Die Firmware wurde erst gestern gepatcht. Das fragliche Kabel ist fs.com/products/47096.html
TomTom
1
Das sollte in Ordnung sein. Vielleicht wird es als Support-Problem bei Ihrem Server-Anbieter angesprochen. Sie haben ziemlich genau das getan, was ich tun würde.
Tom O'Connor
Fertig, auch ich habe keinen Kontakt mit Mellanox.
TomTom
1
Bestätigt. Ich habe die 2 Kabel entfernt, Mellanox-Adapter (QSFP28-> SFP28) eingesteckt und 10G-Kabel und Voila angeschlossen, funktioniert wie ein Zauber (wenn auch mit reduzierter Leistung). Kabelproblem;)
TomTom
@ TomTom FS.com hat herstellerspezifische Transceiver, um solche Probleme zu vermeiden - überprüfen Sie fs.com/c/mellanox-qsfp28-to-qsfp28-3370
Pause
4

QSFP28-Ports sind alle gleich (genau wie SFP, SFP +, ...), es gibt keine MDI-vs-MDI-X-Pinbelegung wie bei Twisted Pair. Daher werden gerade Kabel überhaupt nicht verwendet. DACs haben eine integrierte Frequenzweiche, über die Sie sich keine Sorgen machen müssen.

Möglicherweise ist Ihr DAC nicht mit den Netzwerkkarten kompatibel, einige sind sehr wählerisch in Bezug auf das Branding. Es ist auch möglich, dass die Netzwerkkarten nicht gleich konfiguriert sind. Sie sollten in den Treibermeldungen überprüfen, warum der Link nicht angezeigt wird.

Zac67
quelle
Könnte es sein, dass die beiden NICs auf eine Initiative voneinander warten? IIRC frühe TP-Ethernet-Karten verhielten sich manchmal so ohne Schalter, sogar mit einem korrekten Crossover-Kabel ... vielleicht ist dieser alte Geist zurückgekehrt ...
Rackandboneman
Nett. Saugt. Irgendeine Idee, wie man das auslöst? Außerdem sehe ich den Link einmal auftauchen und dann verschwinden. Es scheint also zu versuchen, es auf die Beine zu stellen.
TomTom
@ TomTom Meldet die Netzwerkkarte den Link, der angezeigt werden soll? Oder ist es nur das Verbindungslicht, das unmittelbar danach ein- und ausgeht? Das könnte nur die SFP-Einfügung signalisieren - achten Sie auf die andere Seite, um eine tatsächliche Verbindungsantwort zu erhalten.
Zac67
@rackandboneman Die Situation ist etwas anders - die automatische Verhandlung der 1. Generation war fehlerhaft und funktionierte manchmal nicht. Ein DAC kennt die Verbindungsparameter sicher.
Zac67
Nein, ich sehe den Link, der alle X Minuten in Windows initialisiert wird. Darauf folgt ein lustiger Fehler im Ereignisprotokoll. Ich werde versuchen, einen Kurzschluss zu machen - ich habe Dual-Port-Karten, ich sollte in der Lage sein, einen DAC mit einer Karte zu verwenden, und es sollte auftauchen. Ermöglicht es mir, eine defekte Karte zu lokalisieren.
TomTom