NVIDIA Mellanox MCX653106A-HDAT एक्शन मेंः कम विलंबता RDMA/RoCE परिवहन और सर्वर थ्रूपुट सफलताओं को प्राप्त करना

June 16, 2026

आधुनिक डेटा सेंटर वातावरण में ड़स्ट्रिब्यूटेड स्टोरेज, हाई-फ्रीक्वेंसी ट्रेडिंग और एआई ट्रेनिंग क्लस्टर को कवर करते हुए दो लगातार चुनौतियां बनी हुई हैंःसीपीयू पर बोझ डाले बिना नेटवर्क-प्रेरित विलंबता को कम करना और सर्वर थ्रूपुट को अधिकतम करनाइस एप्लिकेशन में गहराई से पता चलता है कि कैसे एक प्रमुख क्लाउड इन्फ्रास्ट्रक्चर प्रदाता ने इन मुद्दों को ठीक से हल किया है।NVIDIA Mellanox MCX653106A-HDATउनके कम्प्यूटिंग और स्टोरेज नोड्स के बीच सर्वर एडाप्टर।

पृष्ठभूमि और चुनौती

प्रदाता का मौजूदा 25GbE बुनियादी ढांचा, सॉफ्टवेयर आधारित टीसीपी/आईपी स्टैक के साथ मानक ईथरनेट एडेप्टर पर आधारित था, स्पष्ट सीमाएं दिखा रहा था।NVMe over Fabrics का उपयोग करने वाले स्टोरेज वर्कलोड में अप्रत्याशित विलंबता स्पाइक्स (अक्सर 50μs से अधिक) का अनुभव हुआ, जबकि डेटाबेस क्लस्टर केवल नेटवर्क प्रोसेसिंग द्वारा खपत किए गए कोर के 35% तक उच्च सीपीयू उपयोग से पीड़ित थे।इंजीनियरिंग टीम को एक ऐसे समाधान की आवश्यकता थी जो आरडीएमए लेनदेन के लिए सब-10μs विलंबता प्रदान कर सके और पूर्ण वास्तुशिल्प ओवरहाल की आवश्यकता के बिना 200GbE थ्रूपुट का समर्थन कर सके.

कई विकल्पों का आकलन करने के बाद, उन्होंनेMCX653106A-HDAT ईथरनेट एडाप्टर कार्ड, जिसने हार्डवेयर-ऑफलोड RoCE (RDMA over Converged Ethernet) और उनके मौजूदा Cumulus Linux-आधारित लीफ-स्पाइन टोपोलॉजी के साथ निर्बाध एकीकरण का वादा किया।

समाधान और तैनाती दृष्टिकोण

यह तैनातीMCX653106A-HDAT कनेक्टएक्स एडाप्टर PCIe नेटवर्क कार्ड, एक गैर-ब्लॉकिंग फैब्रिक बनाने के लिए अपने दोहरी-पोर्ट 100GbE कॉन्फ़िगरेशन का लाभ उठाते हुए। प्रत्येक कंप्यूटिंग नोड को एक एडाप्टर प्राप्त हुआ, जबकि स्टोरेज नोड्स को रिडंडेंसी के लिए दो से लैस किया गया।मुख्य कार्यान्वयन चरण शामिल:

पीएफसी (प्राथमिकता प्रवाह नियंत्रण) और ईसीएन (स्पष्ट भीड़भाड़ सूचना) के साथ RoCEv2 को सक्षम करना ताकि नुकसान रहित परिवहन सुनिश्चित हो सके
उच्च प्राथमिकता वाले डेटाबेस और भंडारण कार्यभारों के लिए आभासी कार्यों को समर्पित करने के लिए SR-IOV को कॉन्फ़िगर करना
नवीनतम तैनातीMCX653106A-HDAT संगतउबंटू 22.04 एलटीएस नोड्स में ड्राइवर स्टैक (एनवीडिया डॉका 2.5)
पैकेट प्रसंस्करण पथों के लिए हार्डवेयर आधारित डीपीडीके त्वरण को लागू करना

के आधार परMCX653106A-HDAT डेटाशीटऔर तैनाती से पहले सत्यापन, टीम ने अपने क्षमता नियोजन का मार्गदर्शन करने वाले छोटे पैकेट लेनदेन के लिए sub-1μs हार्डवेयर विलंबता और 215 मिलियन पैकेट प्रति सेकंड (MPPS) तक का अनुमान लगाया।

परिणाम और मापने योग्य लाभ

50 उत्पादन नोड्स पर एक चार सप्ताह के पायलट के बाद, बुनियादी ढांचा टीम ने तुलना करते समय निम्नलिखित सुधारों का दस्तावेजीकरण कियाNVIDIA Mellanox MCX653106A-HDATअपने पुराने एडाप्टर के खिलाफः

मीट्रिक	विरासत 25GbE एडाप्टर	MCX653106A-HDAT (RoCE)	सुधार
एनवीएमई-ओएफ रीड लेटेंसी (पी99)	52 μs	6.8 μs	87% की कमी
सीपीयू ओवरहेड (नेटवर्क स्टैक)	34%	7%	27 प्रतिशत अंक मुक्त
समग्र थ्रूपुट (प्रति सर्वर)	92 जीबीपीएस (बाध्य)	198 जीबीपीएस	115% की वृद्धि
लघु पैकेट दर (64B)	48 Mpps	187 Mpps	~290% लाभ

कच्चे आंकड़ों के अलावा, इंजीनियरिंग टीम ने नोट किया किMCX653106A-HDAT ईथरनेट एडाप्टर कार्ड समाधानइससे पहले आवश्यक ट्यूनिंग वर्कआउट जैसे कि इंटरप्ट कोएलेजिंग हैक और ओवरसाइज्ड रिसीव बफर को समाप्त कर दिया गया है।VXLAN और Geneve के लिए एडाप्टर के हार्डवेयर offloads भी उनके कंटेनर नेटवर्किंग ढेर को सरल बनाया, कुबरनेट वातावरण में 40% तक पॉड-टू-पॉड विलंबता को कम करता है।

लागत का आकलन करने वाले आईटी प्रबंधकों के लिएMCX653106A-HDAT कीमततुलनात्मक 200GbE समाधानों के साथ तुलना में सीपीयू कोर बचत और स्विच पोर्ट उपयोग में कमी को ध्यान में रखते हुए स्वामित्व की कुल लागत 15-20% कम हुई।बिक्री के लिए MCX653106A-HDATअगले खरीद चक्र के लिए एचपीसी और वास्तविक समय विश्लेषण सहित आसन्न टीमों से पूछताछ पहले ही प्रस्तुत की जा चुकी है।

सारांश और दृष्टिकोण

तैनाती से यह पुष्टि होती है किNVIDIA Mellanox MCX653106A-HDATयह केवल एक विनिर्देश उन्नयन नहीं है, बल्कि विलंबता-संवेदनशील और थ्रूपुट-बाउंड वातावरण के लिए एक कार्यात्मक छलांग है।,और GPUDirect-ready आर्किटेक्चर ✓ संगठन अनुप्रयोग तर्क के लिए CPU चक्रों को पुनः प्राप्त करते हुए निर्धारक माइक्रोसेकंड-स्केल विलंबता प्राप्त कर सकते हैं।

जैसा कि बुनियादी ढांचा टीम 500+ नोड्स के लिए अपने रोलआउट का विस्तार करती है,वे मल्टी-टेंडर सुरक्षा के लिए एडेप्टर के अंतर्निहित इनलाइन एन्क्रिप्शन (IPsec/TLS) और वित्तीय सेवाओं के कार्यभार के लिए PTP (IEEE 1588v2) का भी पता लगा रहे हैं।वैलिडेटेड कॉन्फ़िगरेशन की तलाश करने वाले इंजीनियरों के लिए,MCX653106A-HDAT विनिर्देशऔर संदर्भ डिजाइन NVIDIA के DOCA डेवलपर पोर्टल के माध्यम से उपलब्ध हैं। इस वास्तविक दुनिया के मामले एक बात स्पष्ट करता हैःMCX653106A-HDAT कनेक्टएक्स एडाप्टर PCIe नेटवर्क कार्डअगली पीढ़ी के डेटा केंद्रों के लिए कम विलंबता, उच्च थ्रूपुट ईथरनेट के वादे को पूरा करता है।

अधिक गहन तकनीकी समीक्षा के लिए, अधिकारी से परामर्श करेंMCX653106A-HDAT डेटाशीटया अपने क्षेत्रीय NVIDIA समाधान वास्तुकार से संपर्क करें.