Mellanox (NVIDIA Mellanox) 920-9B210-00FN-0D0 InfiniBand Switch Technische Lösung

Dieses technische Whitepaper bietet Architekten, Pre-Sales-Ingenieuren und Betriebsteams ein umfassendes Referenzdesign, das sich auf dieMellanox (NVIDIA Mellanox) 920-9B210-00FN-0D0Die Lösung befasst sich mit den dringendsten Herausforderungen in modernen KI- und HPC-Umgebungen: netzwerkbedingte Latenz, Staus,und Skalierbarkeitsbeschränkungen von herkömmlichen Ethernet-Fabriken.

1. Projekthintergrund und Bedarfsanalyse

Organisationen, die großflächige GPU-Cluster für das Training großer Sprachmodelle, Moleküldynamik-Simulationen oder Wettervorhersagen einsetzen, stehen vor einem gemeinsamen Engpass: dem Verknüpfungsgewebe.Das herkömmliche Verlust-Ethernet kann die deterministischeDie wichtigsten Anforderungen, die aus den Einsätzen in der realen Welt ermittelt wurden, umfassen:

• End-to-end-Latenz unter 1 μs für latenzempfindliche MPI-Arbeitslasten
• Verlustfreie Linie mit 400 Gb/s pro Port ohne Blockade der Leitungsleitung
• Innetzwerkrechner zur Entlastung kollektiver Operationen von Host-CPUs
• Nahtlose Skalierbarkeit von 8 bis 2.000+ GPU-Knoten ohne Fabric-Re-Architektur

Diese Ansprüche führten dazu, dass unser Design-Team die920-9B210-00FN-0D0als Grundbaustein für die nächste Generation von Low-Latency-Fabriken.

2. Gesamtkonstruktion der Netzwerk-/Systemarchitektur

Die vorgeschlagene Architektur verwendet eine zweistufige Leaf-Spin-Topologie, die für eine nicht blockierende, vollständige Bisection-Bandbreite optimiert ist.Die Datenverarbeitung wird durch dieDiese Konstruktion eliminiert Überabonnement und sorgt für eine vorhersehbare Latenzzeit unabhängig von Kommunikationsmustern.

Für einen Referenz 512-GPU-Cluster setzen wir 16 Leaf-Switches und 8 Spine-Switches ein.NVIDIA Mellanox 920-9B210-00FN-0D0Die Leaf-Spin-Verbindungen arbeiten mit 400 Gb/s NDR, was zu einer Gesamtbandbreite von mehr als 200 Tb/s führt.Adaptive Routing- (AR) und Stauskontrollalgorithmen sind in allen Häfen aktiviert, um den Verkehr dynamisch auszugleichen und Hotspots während Incaste-Ereignissen zu vermeiden.

3. Funktion der 920-9B210-00FN-0D0 und der wichtigsten Unterscheidungsmerkmale

Die920-9B210-00FN-0D0 MQM9790-NS2F 400 Gbit/s NDRDer Schalter dient sowohl als Blatt als auch als Rückgrat und bietet eine gleichbleibende Leistung über den gesamten Stoff.

Die Evaluierung der Beschaffungsvorgänge durch die Ingenieure wird die920-9B210-00FN-0D0 InfiniBand-Schalter OPN(Bestellteilnummer) die Angebotserstellung und Lieferung vereinfacht.Datenblatt 920-9B210-00FN-0D0undSpezifikationen 920-9B210-00FN-0D0eine detaillierte Kompatibilitätsmatrix mit ConnectX-7, BlueField-3 DPUs und Speichergeräten von Drittanbietern bereitstellen.

4. Empfehlungen für den Einsatz und die Skalierung

Wir empfehlen einen schrittweisen Einsatz, um Produktionsstörungen zu minimieren:

• Phase 1 (Pilot):8 bis 16 GPU-Knoten + 2920-9B210-00FN-0D0Überprüfen Sie die RDMA-Leistung und sammeln Sie Basismetriken.
• Phase 2 (Teilproduktion):Skalieren Sie auf 128 GPUs mit 4 Blättern + 2 Spines. Aktivieren Sie adaptives Routing und SHARPv3.
• Phase 3 (Vollproduktion):Bereitstellung von 16 Blättern + 8 Spines für 512+ GPUs. Einführung von Multi-Path-Routing und Fabric Partitioning mit NVIDIA UFM.

Für die Verkabelung werden aktive optische Kabel (AOC) oder aktive Kupferkabel für Strecken unter 5 Metern verwendet; für längere Spinen oder Cross-Rack-Verbindungen werden 400Gb/s NDR-Transceiver mit Single-Mode-Faser eingesetzt.Alle Häfen auf der920-9B210-00FN-0D0 kompatibelÖkosystemunterstützung für die automatische Verhandlung zwischen den Betriebsmodi 400 Gb/s und 200 Gb/s.

5. Betrieb, Überwachung und Fehlerbehebung

Wir integrieren die920-9B210-00FN-0D0 InfiniBand-Switch-OPN-LösungMit NVIDIA Unified Fabric Manager (UFM) sind folgende Funktionen verfügbar:

• Echtzeit-Telemetrie:Portzähler, Latenzhistogramme, Bufferbesetzung und Überlastungsbenachrichtigungen, die über Prometheus/Graphite exportiert werden.
• Automatisierter Failover:Subsekundärer Verbindungsumleitung bei Kabel- oder Empfangsfehlern.
• Leistungsdiagnostik:Eingebettete SHARP-Leistungszähler und Stoffanalysator-Tools zur Identifizierung langsam abfließender Knoten.

Für gemeinsame Fragen sieheDatenblatt 920-9B210-00FN-0D0Bei der Planung von Kapazitätserweiterungen konsultieren Sie die920-9B210-00FN-0D0 PreisModelle für Kompromisse zwischen nur Blatt- und Vollwirbelsäulen-Erweiterung.

6. Zusammenfassung und Wertbewertung

DieNVIDIA Mellanox 920-9B210-00FN-0D0-basierte Lösung bietet eine deterministische Sub-Mikrosekunden-Latenz, verlustfreie 400Gb/s-Durchsatzleistung und In-Network-Computing-Beschleunigung für RDMA/HPC/AI-Cluster.Im Vergleich zu alternativen 400 Gb Ethernet-Designs, dieses InfiniBand-Fabrik erreicht 2,5x niedrigere All-Reduced-Latency und eliminiert bis zu 90% des kollektiven Datenverkehrs über SHARPv3.920-9B210-00FN-0D0 zum VerkaufDie Gesamtbetriebskosten werden durch höhere GPU-Auslastung und verkürzte Arbeitszeit in der Regel innerhalb von 6­12 Monaten wiedererlangt.Wir empfehlen einen sofortigen Pilot-Einsatz für jede neue oder wachsende KI-Infrastruktur..