मेलानाॅक्स (एनवीडिया मेलानॅक्स) MCX653105A-HDAT सर्वर एडाप्टर तकनीकी समाधान

आधुनिक डेटा सेंटर कंप्यूट-केंद्रित से डेटा-केंद्रित आर्किटेक्चर की ओर एक मौलिक बदलाव से गुजर रहे हैं। वितरित स्टोरेज, AI प्रशिक्षण क्लस्टर और उच्च-आवृत्ति ट्रेडिंग वातावरण नेटवर्क विलंबता और सर्वर थ्रूपुट पर कड़े मांगें लगाते हैं। पारंपरिक TCP/IP स्टैक उच्च बैंडविड्थ के तहत महत्वपूर्ण CPU इंटरप्ट और संदर्भ स्विच उत्पन्न करते हैं, जो केवल नेटवर्क ओवरहेड के लिए 30% से अधिक कंप्यूटिंग शक्ति का उपभोग करते हैं। इस बीच, NVMe-oF जैसे उभरते स्टोरेज प्रोटोकॉल को उनके प्रदर्शन क्षमता को अनलॉक करने के लिए माइक्रोसेकंड-स्केल एंड-टू-एंड विलंबता की आवश्यकता होती है। इन चुनौतियों का समाधान करने के लिए, उद्यमों को एक सर्वर NIC की आवश्यकता है जो नेटवर्क प्रोसेसिंग को ऑफलोड करे और डायरेक्ट मेमोरी एक्सेस को सक्षम करे - ठीक वही जो मेलानॉक्स (एनवीडिया मेलानॉक्स) MCX653105A-HDAT प्रदान करता है।

विशिष्ट परिनियोजन परिदृश्यों में पहचानी गई प्रमुख आवश्यकताओं में शामिल हैं: सब-2µs एप्लिकेशन-स्तरीय विलंबता, प्रति पोर्ट लाइन-रेट 100GbE थ्रूपुट, RoCE (RDMA over Converged Ethernet) के लिए हार्डवेयर ऑफलोड, मौजूदा PCIe 4.0 सर्वर के साथ निर्बाध एकीकरण, और सक्रिय भीड़ प्रबंधन के लिए व्यापक टेलीमेट्री। MCX653105A-HDAT अपने ConnectX-6 आर्किटेक्चर के साथ इनमें से प्रत्येक को संबोधित करता है।

प्रस्तावित समाधान RoCE समर्थन के साथ एक दो-स्तरीय स्पाइन-लीफ फैब्रिक को अपनाता है, जो ईथरनेट अर्थशास्त्र को बनाए रखते हुए TCP/IP बाधाओं को समाप्त करता है। लीफ परत पर, टॉप-ऑफ-रैक स्विच (एनवीडिया SN4000 श्रृंखला या समकक्ष PFC-सक्षम स्विच) कंप्यूट और स्टोरेज नोड्स को इंटरकनेक्ट करते हैं। प्रत्येक कंप्यूट नोड MCX653105A-HDAT ईथरनेट एडॉप्टर कार्ड को एकीकृत करता है, जो डुअल-पोर्ट 100GbE कनेक्टिविटी प्रदान करता है। स्टोरेज नोड्स RDMA पर सीधे NVMe-oF लक्ष्य की सेवा के लिए समान एडॉप्टर तैनात करते हैं।

आर्किटेक्चरल रूप से, एनवीडिया मेलानॉक्स MCX653105A-HDAT प्रमुख डेटा प्लेन एक्सेलेरेटर के रूप में स्थित है, जो वर्चुअल मशीन, कंटेनर और बेयर-मेटल वर्कलोड से सभी नेटवर्क I/O को संभालता है। कंट्रोल प्लेन होस्ट CPU पर रहता है लेकिन डेटा मूवमेंट कार्यों से मुक्त हो जाता है - यह अलगाव RDMA-सक्षम डिज़ाइन का सार है। बड़े पैमाने पर परिनियोजन (100+ नोड्स) के लिए, DCQCN (डेटा सेंटर क्वांटाइज्ड कंजेशन नोटिफिकेशन) का उपयोग करके एक समर्पित RoCE कंजेशन कंट्रोल डोमेन कॉन्फ़िगर किया जाता है, जिसमें कंप्यूट और स्टोरेज ट्रैफिक के लिए अलग-अलग बफर पूल होते हैं।

MCX653105A-HDAT ConnectX एडॉप्टर PCIe नेटवर्क कार्ड इस आर्किटेक्चर में चार महत्वपूर्ण कार्य करता है:

• हार्डवेयर-ऑफलोडेड RoCE: विशेष स्विच या फैब्रिक की आवश्यकता के बिना RDMA लागू करता है। डेटा सीधे एप्लिकेशन बफ़र्स और रिमोट मेमोरी के बीच चलता है, कर्नेल को पूरी तरह से बायपास करता है।
• PCIe 4.0 x16 इंटरफ़ेस: 200Gb/s तक द्विदिश बैंडविड्थ प्रदान करता है, होस्ट बस बाधाओं को समाप्त करता है और डुअल 100GbE पोर्ट का पूरी तरह से उपयोग करता है।
• त्वरित स्विचिंग और पैकेट प्रोसेसिंग (ASAP²): VXLAN/NVGRE ऑफलोड, VirtIO त्वरण, और प्रोग्रामेबल टेलीमेट्री के लिए लचीला पाइपलाइन अनुकूलन का समर्थन करता है।
• स्टोरेज त्वरण: NVMe-oF (TCP और RoCE), T10-DIF हस्ताक्षर निर्माण/सत्यापन, और इरेज़र कोडिंग त्वरण के लिए हार्डवेयर ऑफलोड।

MCX653105A-HDAT डेटाशीट के अनुसार, एडॉप्टर 100GbE तक सुरक्षित बूट, हार्डवेयर रूट ऑफ ट्रस्ट, और इनलाइन IPsec/TLS एन्क्रिप्शन का भी समर्थन करता है। MCX653105A-HDAT विनिर्देशों की समीक्षा करते समय, इंजीनियर डुअल-स्लॉट चौड़ाई, निष्क्रिय कूलिंग, और व्यापक ऑपरेटिंग तापमान रेंज (0°C से 55°C) को नोट करेंगे, जो इसे सघन सर्वर वातावरण के लिए उपयुक्त बनाता है।

विशिष्ट टोपोलॉजी (1024-नोड क्लस्टर उदाहरण):
- लीफ परत: 16x लीफ स्विच, प्रत्येक में 48x 100GbE डाउनलिंक पोर्ट + 8x 400GbE अपलिंक हैं
- स्पाइन परत: 4x स्पाइन स्विच, नॉन-ब्लॉकिंग 400GbE फैब्रिक
- कंप्यूट नोड्स: प्रति नोड डुअल MCX653105A-HDAT (वैकल्पिक सक्रिय-सक्रिय या सक्रिय-स्टैंडबाय)
- स्टोरेज नोड्स: प्रति नोड 1x MCX653105A-HDAT, RDMA पर NVMe नेमस्पेस की सेवा कर रहा है

परिनियोजन चरण: आधिकारिक संगतता मैट्रिक्स का उपयोग करके MCX653105A-HDAT संगत सर्वर सत्यापित करें। MLNX_OFED या DOCA फ्रेमवर्क (न्यूनतम संस्करण 5.8) स्थापित करें। स्विच पोर्ट पर RoCE सक्षम करें (PFC, ECN, DCQCN पैरामीटर वर्कलोड के अनुसार ट्यून किए गए)। डुअल-पोर्ट अतिरेक के लिए बॉन्डिंग या मल्टीपाथ कॉन्फ़िगर करें। अंत में, परफ़ेस्ट सुइट (ib_write_bw, ib_read_lat) का उपयोग करके मान्य करें।

स्केलिंग विचार: 2000+ नोड्स के लिए, फैब्रिक स्तर पर अनुकूली रूटिंग और कंजेशन कंट्रोल लागू करें। MCX653105A-HDAT ईथरनेट एडॉप्टर कार्ड समाधान रैखिक रूप से स्केल करता है क्योंकि प्रत्येक एडॉप्टर स्वतंत्र रूप से संचालित होता है, जिसमें कोई केंद्रीय बाधा नहीं होती है। क्षमता की योजना बनाते समय, TCO के मुकाबले MCX653105A-HDAT मूल्य का संदर्भ लें - सर्वर समेकन और कम CPU कोर गणना आवश्यकताओं के कारण विशिष्ट भुगतान अवधि 6-12 महीने है। MCX653105A-HDAT बिक्री के लिए चाहने वाले संगठनों को वॉल्यूम मूल्य निर्धारण और फर्मवेयर अनुकूलन विकल्पों के लिए क्षेत्रीय वितरकों से संपर्क करना चाहिए।

निगरानी और टेलीमेट्री: एनवीडिया मेलानॉक्स MCX653105A-HDAT PCM (परफॉरमेंस काउंटर मॉनिटर) और DOCA टेलीमेट्री के माध्यम से रीयल-टाइम काउंटर निर्यात करता है। ट्रैक करने के लिए प्रमुख मेट्रिक्स: RoCE कंजेशन मार्किंग अनुपात, बफर ड्रॉप गणना, PCIe लिंक त्रुटियां, और पोर्ट पॉज़ फ्रेम। एनवीडिया मैनेजमेंट लाइब्रेरी (NVML) के माध्यम से प्रोमेथियस+ग्राफाना के साथ एकीकरण समर्थित है।

अनुकूलन दिशानिर्देश: वर्कलोड के आधार पर DCQCN पैरामीटर (cnp_802p_prio=3, rpg_time_reset=300, आदि) सेट करें - स्टोरेज के लिए अधिक आक्रामक, कंप्यूट के लिए रूढ़िवादी। हार्डवेयर ऑफलोड का चुनिंदा रूप से सक्षम करें: मिश्रित वर्कलोड के लिए TSO/LRO, विलंबता-संवेदनशील प्रवाह के लिए RoCE, और NFV के लिए ASAP²। PCIe अधिकतम पेलोड आकार को ट्यून करने के लिए शामिल mlxconfig टूल का उपयोग करें (अधिकांश सर्वर के लिए 256B इष्टतम)।

सामान्य समस्या निवारण: पोर्ट फ़्लैपिंग आमतौर पर SFP/केबल बेमेल का संकेत देती है - संगतता सूची के मुकाबले MCX653105A-HDAT संगत ऑप्टिक्स सत्यापित करें। कम RDMA थ्रूपुट अक्सर स्विच पर अपर्याप्त ECN कॉन्फ़िगरेशन की ओर इशारा करता है। फैब्रिक सत्यापन के लिए ibdiagnet और आंतरिक एडॉप्टर रजिस्टरों का निरीक्षण करने के लिए dump_emad का उपयोग करें। लगातार समस्याओं के लिए, MCX653105A-HDAT डेटाशीट रजिस्टर-स्तरीय निदान और त्रुटि कोड तालिकाएँ प्रदान करता है।

MCX653105A-HDAT कम-विलंबता, उच्च-थ्रूपुट डेटा सेंटर नेटवर्क के लिए एक परिपक्व, उत्पादन-तैयार बिल्डिंग ब्लॉक का प्रतिनिधित्व करता है। नेटवर्क प्रोसेसिंग को CPU से हार्डवेयर-आधारित इंजन में स्थानांतरित करके, यह मानक ईथरनेट इन्फ्रास्ट्रक्चर पर RDMA/RoCE परिनियोजन को सक्षम बनाता है। प्रमुख मूल्य परिणामों में शामिल हैं: नेटवर्किंग कार्यों के लिए 50-70% CPU में कमी, नियतात्मक सब-2µs विलंबता, निर्बाध NVMe-oF एकीकरण, और हजारों नोड्स तक रैखिक स्केलेबिलिटी। आर्किटेक्ट्स के लिए, MCX653105A-HDAT ईथरनेट एडॉप्टर कार्ड समाधान मौजूदा प्रबंधन टूल के साथ संगतता बनाए रखते हुए 200GbE फैब्रिक के लिए एक भविष्य-सबूत मार्ग प्रदान करता है। चाहे प्रूफ-ऑफ-कॉन्सेप्ट के लिए MCX653105A-HDAT विनिर्देशों का मूल्यांकन कर रहे हों या रैक-स्केल रोलआउट की योजना बना रहे हों, यह एडॉप्टर प्रदर्शन और कुल स्वामित्व लागत दोनों में मात्रात्मक सुधार प्रदान करता है।