Mellanox (NVIDIA Mellanox) MFS1S00-H015V AOC Active Optical Cable in der Praxis

Mellanox (NVIDIA Mellanox) MFS1S00-H015V AOC Active Optical Cable in der Praxis | Kurzstrecken-Hochgeschwindigkeits-Inter-Rack-Verbindung und vereinfachte Verkabelung

Hintergrund und Herausforderungen: Der "letzte Meter" zwischen den Racks bei der 200G-Cluster-Erweiterung

Bei der Erweiterung eines Hochleistungsrechen- und KI-Trainingsclusters wurden die GPU-Compute-Knoten über mehrere benachbarte Racks verteilt, während die Leaf-Switches in den Netzwerk-Racks am Ende jeder Reihe konzentriert waren. Die Inter-Rack-Verbindungen dazwischen waren typischerweise 5 bis 15 Meter lang – ein klassisches Szenario für Kurzstrecken-Hochgeschwindigkeitsverbindungen, bei dem Ingenieure zunächst auf passive Kupferkabel setzten, um die Kosten zu kontrollieren.

In der Praxis zeigten passive Kupferkabel über diese Distanz jedoch mehrere Probleme: dicke, schwere Kabelkörper, die sich nur schwer durch Kabeltrassen verlegen ließen; ein begrenzter Biegeradius, der das Risiko von Kabelschäden in der Nähe von Schranktüren barg; und eine verschlechterte Signalqualität bei hoher Dichte, zusammen mit reduziertem Luftstrom und steigenden Schranktemperaturen.

Mit zunehmender Anzahl von 200G-Ports stiegen der Verkabelungs- und Wartungsaufwand sprunghaft an, die Planung von Ersatzteilen wurde komplex, und intermittierende Verbindungsprobleme erhöhten den Druck auf das Betriebsteam bei der Fehlerbehebung.

Lösung und Bereitstellung: Standardisierung auf das MFS1S00-H015V

Um diese Probleme zu lösen, standardisierte das Projektteam die Inter-Rack-200G-Verbindungen auf das Mellanox (NVIDIA Mellanox) MFS1S00-H015V AOC Active Optical Cable. Als festlängen 15-Meter-AOC wandelt es elektrische Signale im Steckgehäuse in optische um und liefert 200 Gbit/s pro Verbindung mit geringerem Einfügungsverlust und Immunität gegen EMI im Vergleich zu Kupferalternativen über die gleiche Distanz.

Das MFS1S00-H015V InfiniBand HDR 200 Gbit/s Active Optical Cable verwendet einen 200G QSFP56-Formfaktor und wird direkt in NVIDIA Mellanox HDR-Switches und ConnectX-Adapter eingesteckt, ohne zusätzliche Transceiver an beiden Enden. Dieser "ein Kabel, eine SKU"-Ansatz vereinfacht das Stücklistenmanagement und die Feldinstallation erheblich.

Aus Sicht der Verkabelung lässt sich der dünne, flexible optische Kabelkörper leichter durch enge Kabeltrassen und um Schrankecken verlegen, und seine verbesserte Biegetoleranz reduziert das Risiko versehentlicher Beschädigungen während der Bereitstellung. Das Team standardisierte auch Länge und Verlegungswege nach Rack-Position, was die Entscheidungsfindung vor Ort und die Fehlerraten weiter reduzierte.

Vor der Bereitstellung überprüften die Ingenieure die Spezifikationen des MFS1S00-H015V und bestätigten kompatible Switch- und Adaptermodelle, um einen Plug-and-Play-Betrieb im bestehenden HDR-Fabric sicherzustellen. Die folgende Tabelle fasst die wichtigsten Unterschiede zwischen den beiden Verkabelungsoptionen über diese Distanz zusammen:

Ergebnisse und Vorteile: Messbare Verbesserungen bei Verkabelung und Betrieb

Nach der Bereitstellung meldete das Team deutliche Verbesserungen bei der Verkabelungseffizienz und Wartung. Das MFS1S00-H015V 200G QSFP56 AOC-Kabel reduzierte das Gewicht und den Platzbedarf in Kabeltrassen, verbesserte den Luftstrom und senkte die Schranktemperaturen. Da keine separaten optischen Module an beiden Enden benötigt wurden, sank die Anzahl der Feldanschlusspunkte erheblich, was die Installations- und Fehlerbehebungszeit verkürzte.

Aus Betriebssicht vereinfachte die Standardisierung auf ein einziges AOC-Modell den Ersatzteilbestand, und der Austausch bei Verbindungsfehlern wurde zu einem einfachen Plug-and-Play-Austausch. Auch die Verbindungsstabilität bei 200G verbesserte sich, was die intermittierenden Probleme reduzierte, die zuvor durch lange Kupferleitungen verursacht wurden. Für Teams, die den Preis des MFS1S00-H015V im Verhältnis zu den Gesamtbetriebskosten bewerten, sind die Einsparungen bei Installationsaufwand und Wartungsaufwand gleichermaßen wichtige Überlegungen.

Zusammenfassung und Ausblick

Für 200G InfiniBand HDR-Cluster sind Inter-Rack-Kurzstreckenverbindungen ein wichtiger Bestandteil der Fabric-Zuverlässigkeit und Verkabelungseffizienz. Das Mellanox (NVIDIA Mellanox) MFS1S00-H015V AOC Active Optical Cable bietet eine ausgewogene Lösung in Bezug auf Signalqualität, Verkabelungsflexibilität und betriebliche Einfachheit und ist damit eine praktische MFS1S00-H015V 200G QSFP56 AOC-Kabellösung für Neubauten und Fabric-Upgrades gleichermaßen.

Da 200G und höhere Geschwindigkeiten in Fabrics weiter skalieren, wird erwartet, dass AOC-basierte Kurzstreckenverbindungen in Inter-Rack- und Row-to-Row-Szenarien eine breitere Akzeptanz finden werden. Teams, die Bereitstellungen planen, können das MFS1S00-H015V-Datenblatt konsultieren und die Kompatibilität mit bestehenden Switches und Adaptern bestätigen, bevor sie bestellen.