NVIDIA Mellanox MCX623106AN-CDAT Serveradapter in Aktion
June 10, 2026
Ein mittelgroßer Cloud-Anbieter stand kürzlich vor einer bekannten Herausforderung: Seine alten 25-GbE-NICs konnten mit dem explosionsartigen Wachstum von NVMe-oF-Speicher und verteilten KI-Trainings-Workloads nicht mithalten. Aufgrund des herkömmlichen TCP/IP-Stack-Overheads lag die CPU-Auslastung auf Speicherknoten häufig über 70 %, während die Latenz während der Spitzenzeiten die Anwendungsleistung beeinträchtigte. Dieser reale Fall zeigt, wie dasNVIDIA Mellanox MCX623106AN-CDAThaben ihre Infrastruktur durch RDMA und RoCE transformiert.
Der Speichercluster des Anbieters bestand aus 50 Ceph-Knoten, von denen jeder sowohl Client-E/A als auch internen Replikationsverkehr abwickelte. Bei mehr als 3.000 NVMe-Laufwerken im Backend wurden drei Probleme akut: hohe CPU-Interrupts durch die Netzwerkverarbeitung, inkonsistente Latenz bei gemischten Arbeitslasten und Ost-West-Bandbreitensättigung. Den Legacy-Adaptern fehlten Hardware-Offloads für RoCE, sodass jedes Paket den Kernel-Stack durchlaufen musste. Nach der BewertungMCX623106AN-CDAT-Spezifikationenund dieMCX623106AN-CDAT Datenblatt, wählte das Team die ausMCX623106AN-CDAT ConnectX-Adapter PCIe-Netzwerkkartefür einen Piloteinsatz.
Die neue Architektur ersetzte ältere Adapter durchNVIDIA Mellanox MCX623106AN-CDATin acht Speicherknoten und vier Rechenknoten. DerMCX623106AN-CDAT Ethernet-Adapterkarteverfügt über Dual-Port 100 Gbit/s, PCIe 4.0/5.0 und native RoCE-Unterstützung. Zu den wichtigsten Bereitstellungsschritten gehörten:
- Aktivieren von DCQCN (Data Center Quantized Congestion Notification) für die RoCE-Überlastungskontrolle
- Partitionierung von PFC-Domänen (Priority Flow Control), um Speicher- und KI-Trainingsverkehr zu isolieren
- Upgrade der Fabric auf eine verlustfreie Ethernet-Spine-Leaf-Topologie (25 ms Pufferschwelle)
- Bereitstellung von NVMe-oF mit RDMA für Blockspeicherzugriff
Die ASAP²-Offload-Engine des Adapters verarbeitete über 90 Millionen Pakete pro Sekunde auf den Speicherknoten und umging dabei die Host-CPU für die Datenverschiebung vollständig. DerMCX623106AN-CDAT Ethernet-Adapterkartenlösungermöglichte außerdem die Inline-Verschlüsselung ohne Leistungseinbußen – eine Anforderung für die Finanzdienstleistungsmieter des Anbieters.
Nach drei Monaten Produktionseinsatz dokumentierte der Anbieter deutliche Verbesserungen:
| Metrisch | Legacy 25GbE (TCP) | MCX623106AN-CDAT(RoCE) | Verbesserung |
|---|---|---|---|
| Durchschn. Latenz (4 KB zufälliges Lesen) | 42 µs | 8 µs | -81 % |
| CPU-Auslastung (Speicherknoten) | 71 % | 19 % | -73 % |
| Maximaler Durchsatz pro Knoten | 21 Gbit/s | 98 Gbit/s | +367 % |
| Tail-Latenz (99,9. Perzentil) | 218 µs | 34 µs | -84 % |
DerMCX623106AN-CDAT Ethernet-Adapterkartehat sich auch voll und ganz bewährtMCX623106AN-CDAT-kompatibelmit den vorhandenen Cumulus Linux-Switches und dem Ceph BlueStore-Backend des Anbieters. Während der schrittweisen Einführung traten keine Treiber- oder Firmwarekonflikte auf.
Diese Bereitstellung bestätigt, dass dieNVIDIA Mellanox MCX623106AN-CDATist nicht nur ein Bandbreiten-Upgrade – es verändert die Servereffizienz durch RDMA/RoCE grundlegend. Durch die Auslagerung der Netzwerkverarbeitung und die Aktivierung von verlustfreiem Ethernet reduzierte der Adapter die Speicherlatenz um das Fünffache und gab gleichzeitig CPU-Kerne für Anwendungsarbeitslasten frei. Für bewertende IT-ManagerMCX623106AN-CDAT-Preisund ROI erzielte der Anbieter eine Hardware-Amortisierung innerhalb von sieben Monaten durch eine geringere Serveranzahl und niedrigere Lizenzgebühren.
Da immer mehr Unternehmen NVMe-oF, GPU Direct RDMA und Microservices einführen, wird dieMCX623106AN-CDAT ConnectX-Adapter PCIe-Netzwerkkartebietet einen bewährten Weg zu Rechenzentren mit geringer Latenz und hohem Durchsatz. Die SuchendenMCX623106AN-CDAT zu verkaufenSie können sich an autorisierte NVIDIA Mellanox-Händler wenden. VollMCX623106AN-CDAT-Spezifikationenund Bereitstellungshandbücher finden Sie im offiziellenMCX623106AN-CDAT Datenblatt.