NVIDIA Mellanox MCX631432AN-ADAB محول الخادم الكتاب الأبيض التقني

NVIDIA Mellanox MCX631432AN-ADAB محول الخادم الكتاب الأبيض التقني

1خلفية المشروع وتحليل المتطلبات

يتم تعريف معماريات مراكز البيانات الحديثة بشكل متزايد من خلال التقارب بين الحوسبة عالية الأداء وحملات العمل الذكية الاصطناعية وأنظمة التخزين الموزعة.هذه التطبيقات تتشارك مجموعة مشتركة من متطلبات الشبكة: تأخير منخفض للغاية، ومعدلات رسائل عالية، والحد الأدنى من تكاليف وحدة المعالجة المركزية لتحريك البيانات.إدخال تأخير كبير وتكاليف معالجة وحدة المعالجة المركزية التي تصبح غير مقبولة على نطاق واسع.

بالنسبة للمنظمات التي تنشر NVMe على الأقمشة (NVMe-oF) ، أو مجموعات تدريب التعلم الآلي الموزعة، أو منصات التداول المالية الحساسة للفترة اللاحقة،لقد تطورت بطاقة واجهة الشبكة (NIC) من جهاز إدخال / إخراج بسيط إلى مسرع أداء استراتيجيتتضمن المتطلبات الرئيسية التي تم تحديدها في عمليات النشر الحديث:

• تأخير مستوى التطبيقات أقل من 5 ميكرو ثانية من خلال النقل بدون تحميل الأجهزة
• معدل تسجيل أكثر من 40 جيجابايت في الثانية لكل خادم للقضاء على اختناقات التخزين
• الأداء الحاسم مع الحد الأدنى من تباين فترات تأخير الذيل تحت الحمل
• الاندماج السلس مع بنية تحتية إثنتر موجودة دون التبديل الملكي
• القدرات الشاملة للقياس عن بعد والتشخيص للعمليات الاستباقية

الـNVIDIA Mellanox MCX631432AN-ADABتتناول هذه المتطلبات مباشرة من خلال بنيتها ConnectX-6 Lx ،توفير RoCEv2 المتسارع بالأجهزة (RDMA عبر Ethernet المتقاربة) مع التحكم المتقدم في الازدحام وقدرات مسار البيانات القابلة للبرمجة.

2تصميم بنية الشبكة والنظام بشكل عام

تتبنى بنية الحل المقترحة توبولوجية شبكة العمود الفقري مع اتصال 25GbE في طبقة الوصول إلى الخادم. يتم تجهيز كل عقدة حاسوبية أو تخزينيةMCX631432AN-ADAB ConnectX-6 Lx منفذ مزدوج 25GbE SFP28المكيف ، يوفر مسارات إضافية مزدوجة لمفتاحات أعلى الرف (ToR). تتكون الهندسة المعمارية من:

• حافة الخادم:الـبطاقة مكياج إثنتر MCX631432AN-ADABيتصل عبر PCIe Gen 4.0 x8 إلى وحدة المعالجة المركزية المضيفة ، مما يوفر عرض النطاق الترددي المضيف ثنائي الاتجاه يصل إلى 64 جيجابايت / ثانية ، وهو كافٍ تمامًا لإشباع كل من منافذ 25GbE في وقت واحد.
• نسيج الشبكة:توفر منافذ SFP28 مزدوجة 25GbE موازنة الحمل النشطة النشطة أو التحول الفعلي النشط. يدعم المحول ما يصل إلى 50 جيجابايت في الثانية مع تخفيض حمولة LAG (تجميع الروابط) للأجهزة.
• دمج التخزين:في عمليات نشر NVMe-oF ، يعمل المحول كنقطة نهاية RDMA ، مما يتيح نقل البيانات المباشر من الذاكرة إلى الذاكرة مع تأخير أقل من ميكرو ثانية.
• خطة الإدارة:إدارة خارج النطاق عن طريق واجهة إدارة آمنة من المحول ، مع دعم كامل لمراقبة Redfish و SNMP.

يؤكد التصميم على إثنتر بدون خسارة من خلال RoCEv2 مع التحكم في تدفق الأولوية (PFC) وإخطار الازدحام الصريح (ECN)حل بطاقة MCX631432AN-ADAB Ethernetتعمل داخل نسيج متعدد البروتوكولات المتقارب دون بنية تحتية InfiniBand مخصصة.

3الدور والميزات الرئيسية لـ NVIDIA Mellanox MCX631432AN-ADAB

الـNVIDIA Mellanox MCX631432AN-ADABبمثابة الحجر الأساسي لهذا الحل، وتوفير ثلاث طبقات متميزة من القيمة:

A. محرك تسريع الأجهزة
المكيف يدمج خط أنابيب عالية البرمجة معالجة الحزم التي تنفذ عمليات بروتوكول النقل بما في ذلك تقسيم RoCE، إعادة التجميع،ومراقبة الازدحام من وحدة المعالجة المركزية المضيفةوفقًاورقة بيانات MCX631432AN-ADAB، تدعم الأجهزة ما يصل إلى 200 مليون رسالة في الثانية (Mpps) ، مما يضمن أن أصغر أحجام الحزم تحقق أداء سلكي.

B. تنفيذ RDMA و RoCEv2
الـMCX631432AN-ADAB ConnectX-6 Lx منفذ مزدوج 25GbE SFP28تنفذ RoCEv2 مع النقل غير المحمول بالكامل. وهذا يتيح:

• نقل البيانات بدون نسخة مباشرة بين خزنة التطبيقات والذاكرة البعيدة
• فترة تأخير في اتجاه واحد أقل من 2 ميكرو ثانية للاتصالات بين الأقران
• التوافق الكامل مع مفتاحات Ethernet القياسية ، والتي تتطلب دعم PFC و ECN فقط

ج. تقنية القياس عن بعد المتقدمة والقدرة على البرمجة
يتضمن المحول مجموعة من عدادات القياس عن بعد توفر تأخيرًا لكل تدفق ، وعمق الطابور ، ومقاييس الازدحام الحرجة لإدارة الأداء الاستباقية.مواصفات MCX631432AN-ADABتحديد مجموعة كاملة من الميزات القابلة للبرمجة، بما في ذلك معالجة التطابق المرنة ودعم تقييم الشبكة داخل النطاق (INT).

بالنسبة للمنظمات التي تفكر في النشر، المكيف هو تمامامتوافق مع MCX631432AN-ADABمع جميع توزيعات لينكس الرئيسية (RHEL ، Ubuntu ، SLES) ، VMware ESXi ، و Windows Server ، مما يضمن الاندماج السلس في البيئات غير المتجانسة.

4توصيات النشر والقدرة على التوسع

طبيعة التوزيع النموذجية

يتبع النشر الموصى به توبولوجيا "العمود الفقري" مع التكوين التالي:

• مفاتيح الأوراق:مفاتيح 25GbE ToR مع دعم RoCEv2 ، مثبتة مع PFC على طوابير الأولوية المخصصة و ECN لإشارة الازدحام
• عقد الخادم:كل عقدة مجهزةMCX631432AN-ADAB، متصلة إلى ورقة أساسية وثانوية للتعويض
• طبقة العمود الفقري:مفاتيح العمود الفقري 100GbE أو 400GbE توفر اتصالًا غير مسدود بين الرف
• هدف التخزين:العقد المستهدفة NVMe-oF باستخدام نفس نوع المحول لقدرات RDMA المتسقة

اعتبارات قابلية التوسع

يمتد الحل بشكل خطي من رف واحد إلى عدة آلاف من العقد. وتشمل مبادئ التوسع الرئيسية:

• إدارة العازل:استخدام بنية العازل المشتركة للمحول (يمكن تكوينها حتى 4 ميغابايت لكل منفذ) لاستيعاب الانفجارات العابرة دون انخفاض الحزمة
• مجالات الازدحام:تقسيم النسيج إلى مناطق إدارة الازدحام متعددة للحد من انتشار PFC، وذلك باستخدام معدل المحول لكل منفذ الحد من
• أوركسترة على نطاق السحابة:يتم دعم المحول بالكامل من قبل Kubernetes (من خلال مشغل الشبكة NVIDIA) و OpenStack ، مما يتيح التوفير الآلي وإدارة دورة الحياة

عند تقييمMCX631432AN-ADAB السعرمقابل إجمالي تكلفة الملكية، organizations should factor in the elimination of separate InfiniBand infrastructure and the significant reduction in CPU core allocation for networking tasks — typically recovering 2-4 CPU cores per server.

5العمليات، المراقبة، حل المشاكل وتحسين

إطار المراقبة

الحل يتضمن نهج الملاحظة من ثلاثة مستويات:

• "القياس عن بعد على مستوى المحول"الـبطاقة مكياج إثنتر MCX631432AN-ADABيعرض أكثر من 200 عداد أجهزة عن طريق أدوات ethtool و sysfs وأدوات محددة للمورد. تشمل المقاييس الرئيسية: معدل الإنجاز لكل منفذ ، قطرات الحزم ، إطارات توقف PFC ، الحزم المميزة ECN ،وحوادث الازدحام RoCEv2
• الرؤية على مستوى النسيج:التكامل مع منصة إدارة موحدة من NVIDIA يوفر تصور الطوبولوجيا وتحليل مسار التدفق
• مراقبة أداء التطبيق:يوفر المحول إحصاءات كل طابور وكل طابور إكمال RDMA ، مما يتيح ارتباط أداء الشبكة مع تأخر المعاملات على مستوى التطبيق

السيناريوهات الشائعة لحل المشاكل

استنادا إلى الخبرة التشغيلية، يتم تحديد الأنماط التالية باستخداممواصفات MCX631432AN-ADABوبيانات القياس عن بعد:

• الكشف عن العواصف PFC:مراقبة عدادات إطار PFC لوقف الإطار حسب الأولوية - توقف مستمر > 5٪ من معدل الخط يشير إلى الازدحام أو عدم التكوين
• قطرات الحزمة RoCEv2:تحقق من العدادات انخفاض المحول (على سبيل المثال، rx_discard_* العدادات) لعزل ما إذا كانت الانخفاضات تحدث في المحول، المفتاح، أو بسبب ECN-خنق
• ضبط الأداء:Adjust interrupt coalescing parameters (interrupt moderation rate) to trade off CPU utilization against latency — typically setting moderate coalescing for storage workloads and minimal coalescing for trading applications

مبادئ توجيهية للتحسين

لتحقيق أقصى قدر من النفاذ والحد الأدنى من فترة التأخير ، يوصى بتحسينات التالية بناءً علىورقة بيانات MCX631432AN-ADAB:

• تمكين CRC الأجهزة ورأس / البيانات تقسيم تحميلات لتقليل استهلاك عرض النطاق الترددي ذاكرة المضيف
• تكوين عتبات PFC لكل أولوية بشكل ديناميكي بناءً على ملفات تحميل الحمل ، باستخدام أدوات تكوين العازل الخاصة بالشركة
• تمكين ميزات QoS المتقدمة للمحول ، بما في ذلك الحد من المعدل لكل فئة حركة المرور والترتيبات العادلة ذات الأولوية الصارمة أو المزنة
• للتنفيذ على نطاق واسع ، استخدم دعم المحول لـ 802.1Qaz Data Center Bridging Exchange (DCBX) لإجراء مفاوضات PFC و ECN بأتمتة مع المفاتيح

6ملخص وتقييم القيمة

الحل التقني يركز علىNVIDIA Mellanox MCX631432AN-ADABيوفر مسارًا واضحًا لتحقيق فترة تأخير RDMA أقل من 10 ميكرو ثانية مع زيادة سعة الخادم في نفس الوقت بنسبة تصل إلى 5-6 مرات مقارنةً بنشرات TCP / IP التقليدية 10GbE.مقترحات القيمة الرئيسية تشمل:

• تبسيط البنية التحتية:يزيل الحاجة إلى شبكات تخزين وحوسبة منفصلة من خلال تمكين إثنتر بدون خسارة لجميع أنواع حركة المرور
• القدرة على التنبؤ بالأداء:يضمن RoCEv2 غير المحمول بالأجهزة تأخيرًا محددًا حتى تحت 90% + من استخدام معدل الخط
• الكفاءة التشغيلية:قياس المراقبة عن بعد الشامل وإدارة الازدحام الذاتي يقلل من متوسط وقت الحل (MTTR) لمشاكل الشبكات
• حماية الاستثمار:تتيح واجهة PCIe Gen 4.0 والقدرة على البرمجة للمحول التوافق مع أجيال CPU والمفتاحات المستقبلية

للمنظمات التي تقوم بتقييم نشطMCX631432AN-ADAB للبيعالخيارات، هذا الحل يقدم بنية مرجعية ثبتت التي تم التحقق من صحتها في بيئات الإنتاج عبر الخدمات المالية، ومقدمي السحابة، ونشر تخزين المؤسسات.مزيج من الأداء، قابلية التوسع، والنضج التشغيلي يجعلبطاقة مكياج إثنتر MCX631432AN-ADABاستثمار استراتيجي لتحول مركز البيانات الحديث