NVIDIA Mellanox MCX653106A-HDAT محول الخادم الحل التقني

NVIDIA Mellanox MCX653106A-HDAT Server Adapter Solution Technical: RDMA/RoCE Low-Latency Transport and Server Throughput Enhancement Architecture (معدل نقل منخفض التأخير ومعمارية تعزيز إمكانية الدخول للخادم)

1تحليل خلفية المشروع ومتطلباته

مراكز البيانات الحديثة التي تدعم الذكاء الاصطناعي، الحوسبة عالية الأداء، والتحليلات في الوقت الحقيقي تواجه تجمعًا من المتطلبات المتطلبة:الأداء الحتميمعماريات الشبكة التقليدية المبنية على TCP/IP و Ethernet القياسية تفشل باستمرار في تلبية هذه المتطلباتاستهلاك موارد وحدة المعالجة المركزية المفرطة لمعالجة البروتوكول، و تفتقر إلى القدرة على البرمجة اللازمة لتحسين حمولة العمل الخاصة.مما يؤدي إلى تدهور أداء شديد واستخدام غير فعال للموارد.

تتضمن متطلبات المؤسسات الرئيسية التي تقود اعتماد مُحوّلات الخادم المتقدمة:

• تأخير منخفض جداً على نطاق واسعوظائف التدريب الموزعة تتطلب تأخير الاتصالات الجماعية أقل من 500 ميكرو ثانية عبر المئات من العقد للحفاظ على استغلال GPU فوق 90٪.
• تحميل وحدة المعالجة المركزية أكثر من الشبكة الأساسيةيجب أن تستهلك معالجة الشبكة أقل من 8٪ من موارد وحدة المعالجة المركزية لكل عقدة للحفاظ على القدرة على أحمال العمل التطبيقية.
• أمن المكالماتيجب أن يتم تشفير البيانات أثناء النقل بسرعة السلك دون المساس بالسرعة أو إضافة تأخير كبير.
• مسار بيانات قابل للبرمجةيجب أن تدعم المكيفات توجيه حركة المرور المخصصة ومعالجة الحزم لاستيعاب أنماط حمولة العمل المتطورة وابتكارات البروتوكول.
• قابلية التوسع السلسةالبنية التحتية يجب أن تتوسع من عشرات إلى مئات العقد مع نمو خطي في الأداء ودون انفجارات التعقيد التشغيلي.

الـNVIDIA Mellanox MCX653106A-HDATتم تصميمها خصيصاً لتلبية هذه المتطلبات، حيث تعمل ككتلة بناء أساسية لشبكات مراكز البيانات من الجيل التالي.

2تصميم بنية الشبكة/النظام بشكل عام

يستخدم المعمار المقترح توبولوجيا العمود الفقري للأوراق عالية الأداء الأمثل لنقل RoCEv2. في قلب هذا التصميم هوحل بطاقة MCX653106A-HDAT Ethernetويتم نشرها في كل عقدة خادم لتوفير اتصالات واسعة النطاق الترددي مع قدرات التحميل المتقدمة.

طبقات الهندسة المعمارية

• عقد الحسابات/التخزين:يتم تجهيز كل خادم معبطاقة الشبكة PCIe MCX653106A-HDAT ConnectXيتم تكوين كل من الموانئ في وضع نشط ، وتوفير 200 جيجابايت / ثانية من الإنتاجية الإجمالية مع موازنة الحمولة القائمة على الأجهزة وتعديل الفشل.جهاز التكيف من جهاز "بي سي إل إي 4".0 x16 الواجهة توفر عرض النطاق الترددي 32 جيجاتا في الثانية، القضاء على اختناقات جانب المضيف.
• طبقة الأوراق:توفر مفاتيح NVIDIA Spectrum-4 إعادة إرسال إيثيرنث منخفضة التأخير وبدون خسارة مع التحكم المتقدم في الازدحام على مستوى RoCE (PFC ، ECN ، و DCQCN).هذه المفتاحات تدعم 400GbE uplinks وتوفر تقييم عن بعد شامل لرؤية النسيج.
• طبقة العمود الفقري:تتواصل مفاتيح العمود الفقري ذات السعة العالية بين جميع العقد الورقية عبر روابط صعودية 400GbE، مما يضمن عدم الحجب، أي اتصال إلى أي اتصال عبر النسيج بأكمله مع تأخير محدد.
• الإدارة والترتيبتوفر NVIDIA DOCA و MLNX-OS إدارة موحدة، جمع تقييمات عن بعد، تنظيم تكوين، وتوفير صفر لمسة عبر كومة كاملة.

تتضمن الهندسة المعمارية شبكة افتراضية قائمة على الأجهزة من خلال SR-IOV و eSwitch offload، تدعم ما يصل إلى 1،500،000 وظائف افتراضية لكل محول لعزلة متعددة التينان بكفاءة دون المساس بالأداء.

3. دور وميزات رئيسية من NVIDIA Mellanox MCX653106A-HDAT في الحل

الـNVIDIA Mellanox MCX653106A-HDATتعمل كواجهة حاسمة بين موارد الحوسبة / التخزين والشبكة. تتيح مجموعة الميزات المتقدمة الأداء والأهداف الكفاءة للهيكل العام:

وفقًاورقة بيانات MCX653106A-HDAT، المكيف يستهلك فقط 25 واط تحت الحمل الكامل، وتقديم أداء رائدة في الصناعة لكل واط.مواصفات MCX653106A-HDATدعم التفاصيل المتقدمة للقياس عن بعد، بما في ذلك عدادات الأداء لكل تدفق، الرسوم البيانية للفترة الزمنية،جميعها ضرورية لعمليات الشبكة الاستباقية وتخطيط القدرة.

4توصيات النشر والتوسيع (مع الطوبولوجيا النموذجية)

بالنسبة للمنظمات التي تخطط لإنتاجNVIDIA Mellanox MCX653106A-HDAT، يوصى بالنهج التدريجي التالي:

المرحلة 1 التحقق التجريبي (48 عقدة):البدء مع مجموعة صغيرة للتحقق من صحة تكوين RoCE، والتنسيق الدقيق لمعلمات DCB، ومؤشر أداء التطبيق.بطاقة الشبكة PCIe MCX653106A-HDAT ConnectXأداء التحقق من صحة إعدادات PFC، ECN، و DCQCN باستخدام بيانات القياس عن بعد المعرضة من قبل المحول.

المرحلة الثانية: توسيع القفص (2050 عقدة):قم بتطوير مجموعة من مفاتيح NVIDIA Spectrum-4 مع تكوين إيثيرنت بدون خسارةتمكين إدارة الازدحام القائمة على الأجهزة وتهيئة سياسات خدمة الجودة الخاصة بحمل العمل.متوافق مع MCX653106A-HDATطبيعة الحل يضمن التكامل السلس مع منصات الخادم الحالية وتوزيعات لينكس.

المرحلة الثالثة: التطبيق على مستوى النسيج (أكثر من 100 عقدة):تنفيذ سياسات التوجيه التكيفي والتحكم في الازدحام الاستفادة من NVIDIA Unified Fabric Manager للتنسيقتزويد الآلي، ومراقبة في جميع أنحاء النسيج

وصف الطوبولوجية النموذجي:يتكون تكوين الرف القياسي من 20 خادم حاسوب / تخزين ، كل منها مجهز بواحدMCX653106A-HDATيصل الميناء 1 إلى جهاز التبديل الورقي A، ويقوم الميناء 2 بالاتصال بجهاز التبديل الورقي B، مما يوفر مسارات نشطة متكررة مع الانهيار التلقائي.تشكيل نسيج CLOS مع 1نسبة الإفراط في الاشتراك: 1. هذا التصميم يضمن أن أي فشل في رابط واحد أو مفتاح لا يؤثر على توافر التطبيقات، مع آليات استعادة أقل من ثانية.

بالنسبة للمنظمات التي تقوم بتقييم تكلفة الملكية الإجماليةMCX653106A-HDAT السعريجب النظر إلى جانب توفيرات وحدة المعالجة المركزية (عادة ما يتم استرداد 4-6 نواة لكل خادم) ، ومكاسب 3 ′′ 5 × في معدل إنجاز التطبيقات ، والقدرة على توحيد العديد من روابط 25GbE.خصومات الحجم غالبا ما تكون متاحة لMCX653106A-HDAT للبيعحزم مع NVIDIA تغييرات الطيف واشتراكات برنامج DOCA.

5العمليات، المراقبة، حل المشاكل، وتحسين

التشغيل الفعال للأنسجة RoCE عالية الأداء يتطلب ممارسات مراقبة ومعالجة مشاكل متخصصة.MCX653106A-HDATتوفر أدوات شاملة لدعم هذه الأنشطة:

• "تجميع وتصوير القياسات"استخدم عدادات الأجهزة الخاصة بالمحول لمراقبة معدل التدفق لكل تدفق، عمق الطابور، قطرات الحزمة، وتوزيعات الكمون بدقة أقل من الثانية.تصدير المقاييس إلى منصات المراقبة القياسية (بروميثيوس)، غرافانا، ELK كومة) للوقت الحقيقي لوحات التحكم والتنبيه.
• كشف وإدارة الازدحاممراقبة إطارات توقف PFC، حزم ECN المميزة، وتشغيل العازل لتحديد وتحديد الفجارات الصغيرة والنقاط الساخنة للنقل.ورقة بيانات MCX653106A-HDATيقدم إرشادات مفصلة حول تفسير هذه العدادات وتحديد عتبات التنبيه ذات مغزى.
• إدارة دورة الحياة:التحديثات المنتظمة لمجموعة برامج NVIDIA OFED والبرمجيات الثابتة هي ضرورية لتحسين الأداء والأمن والميزات.إدارة دورة الحياة بدون اتصال عبر عمليات نشر كبيرة.
• إرشادات ضبط الأداء:تتضمن معايير ضبط المفاتيح عتبات عازل PFC (عادةً 2-4 MB لكل منفذ) ، حدود وضع علامات ECN (80-90% من عمق الطابور) ، إعدادات اعتدال انقطاع المكيف (التأخير المتوازن مقابل الإنتاجية) ،وتركيبات الروابطالإعدادات المناسبة تعتمد على ملف الحمل المحدد وحجم العنقود.
• الإطار المنهجي لحل المشاكلمعظم مشاكل الأداء يمكن أن تعود إلى سوء تكوين DCB، عدم تطابق MTU، عدم توافق إصدارات برامج التشغيل، أو مشاكل الكابلات.(ميلينك)، و mlxband) يوفر رؤية شاملة في حالة التشغيل، صحة الرابط، إحصاءات الخطأ، واستخدام النطاق الترددي.

6ملخص وتقييم القيمة

الـNVIDIA Mellanox MCX653106A-HDATيمثل استثمار استراتيجي في البنية التحتية يوفر قيمة تجارية تحويلية عبر أبعاد متعددة:

كجزء من نهاية إلى نهايةحل بطاقة MCX653106A-HDAT Ethernet، فإنه يتيح للمؤسسات بناء شبكات عالية الأداء غير الخاسرة التي تحقق بالكامل من إمكانات عبء العمل الحديث من الذكاء الاصطناعي، HPC، والسحابة الأصلية.بيئات مقدمي خدمات السحابة، أو مرافق بحثية مخصصة،NVIDIA Mellanox MCX653106A-HDATيوفر باستمرار الأداء والكفاءة والذكاء الذي يطلبه مهندسو الشبكات للبنية التحتية للجيل القادم.