?

الحل التقني لمحول InfiniBand من NVIDIA Mellanox 920-9B110-00FH-0D0 | تحسين الاتصال بزمن انتقال منخفض لمجموعات RDMA و HPC و AI

خلفية المشروع وتحليل المتطلبات

تواجه مراكز البيانات الحديثة التي تدعم تدريب الذكاء الاصطناعي ومحاكاة الحوسبة عالية الأداء والتخزين الموزع ضغطًا مزدوجًا على النطاق الترددي وزمن الانتقال على مستوى الشبكة. تستمر كثافة عقد GPU في الارتفاع، بينما يصبح زمن الانتقال الذيل والارتعاش في الاتصال بين العقد العامل المحدد للكفاءة الإجمالية للمجموعة. بالنسبة للعديد من المؤسسات، فإن السؤال العملي ليس ما إذا كان سيتم اعتماد 400 جيجابت/ثانية NDR، بل كيف يمكن بناء نسيج HDR مثبت وفعال من حيث التكلفة لا يزال يوفر أداءً حتميًا.

تشمل المتطلبات النموذجية لمثل هذا المشروع نقل RDMA بزمن انتقال منخفض، وسلوك نسيج لا يفقد البيانات، والتوافق مع الإصدارات السابقة مع البنية التحتية EDR و FDR الحالية، ومسار توسع واضح. تم وضع محول InfiniBand 200 جيجابت/ثانية HDR من NVIDIA Mellanox 920-9B110-00FH-0D0 لتلبية هذه المتطلبات كمحول InfiniBand HDR 200 جيجابت/ثانية ضمن عائلة NVIDIA Quantum.

تصميم بنية الشبكة والنظام الشاملة

البنية الموصى بها هي نسيج InfiniBand ذو طبقتين من spine-leaf مبني على روابط 200 جيجابت/ثانية HDR. تقوم محولات Leaf بتوصيل عقد الحوسبة وأهداف التخزين وخوادم الإدارة، بينما توفر محولات Spine الاتصال بين أوراق الشجر وتنوع المسارات. يبقي هذا التصميم عدد القفزات منخفضًا ويضمن نطاقًا تردديًا غير مانع لحركة المرور من الشرق إلى الغرب، والتي تهيمن على أعباء عمل HPC و AI.

على مستوى نقطة النهاية، تعمل محولات قنوات المضيف في وضع RDMA، مما يتيح نقل الذاكرة إلى الذاكرة دون تدخل وحدة المعالجة المركزية. يتعامل النسيج مع التحكم في الازدحام والتوجيه التكيفي وتسريع العمليات الجماعية. تشترك حركة مرور الإدارة والقياس عن بعد في نفس البنية التحتية المادية ولكن يتم عزلها من خلال سياسات جودة الخدمة حتى لا يتداخل المراقبة مع أعباء العمل الإنتاجية.

تشمل مبادئ التصميم الرئيسية:

• طوبولوجيا مسطحة لتقليل زمن الانتقال وتبسيط استكشاف الأخطاء وإصلاحها
• روابط غير مانعة أو ذات نسبة اشتراك منخفضة بين الطبقات
• HDR متسق من طرف إلى طرف، مع توافق مع الإصدارات السابقة EDR/FDR عند الحاجة
• مسارات زائدة للتوافر العالي وتوازن التحميل
• إدارة InfiniBand القياسية للاتساق التشغيلي

دور وميزات رئيسية لمحول NVIDIA Mellanox 920-9B110-00FH-0D0

يعمل محول NVIDIA Mellanox 920-9B110-00FH-0D0 كوحدة بناء أساسية لهذا النسيج. كمنصة MQM8790-HS2F 200 جيجابت/ثانية HDR، فإنه يوفر 40 منفذًا QSFP56 و 16 تيرابايت/ثانية من سعة التبديل غير المانعة في عامل شكل 1U. تدعم هذه الكثافة أدوار أوراق الشجر ذات الكثافة العالية وتبسط الكابلات في الرفوف الكثيفة.

بالنسبة للفرق التي تستعرض مواصفات 920-9B110-00FH-0D0، يدعم المحول RDMA و MPI و NVIDIA SHARP لتفريغ العمليات الجماعية. يستهدف التحكم المتقدم في الازدحام والتوجيه التكيفي مشاكل زمن الانتقال الذيل والازدحام الشائعة في تدريب الذكاء الاصطناعي وأعباء عمل MPI. يدمج OPN محول InfiniBand 920-9B110-00FH-0D0 أيضًا مع أدوات إدارة InfiniBand القياسية، مما يقلل من منحنى التعلم التشغيلي.

عند التخطيط لحل OPN لمحول InfiniBand 920-9B110-00FH-0D0، يجب على المهندسين المعماريين تأكيد المكونات المتوافقة مع 920-9B110-00FH-0D0، بما في ذلك كابلات QSFP56 ومحولات قنوات المضيف وإصدارات البرامج الثابتة. يساعد مراجعة ورقة بيانات 920-9B110-00FH-0D0 في مرحلة مبكرة من التصميم على التحقق من متطلبات الطاقة والتبريد ومساحة الرف قبل الشراء.

توصيات النشر والتوسع

يبدأ النشر النموذجي بـ pod تجريبي يتكون من 32 إلى 64 عقدة حوسبة متصلة بزوج من محولات Leaf 920-9B110-00FH-0D0. تتم إضافة اتصال Spine مع نمو المجموعة، مما يحافظ على نطاق ترددي غير مانع بين أوراق الشجر. يسمح هذا النهج التدريجي بالتحقق من زمن الانتقال والنطاق الترددي قبل الطرح على نطاق واسع.

للتوسع، حافظ على تناسق النسيج: أضف سعة Leaf و Spine بزيادات متطابقة بحيث تظل نسب الاشتراك متوقعة. يجب توحيد إدارة الكابلات ووضع علامات المنافذ من البداية، لأن عمليات نشر QSFP56 عالية الكثافة تصبح صعبة الصيانة إذا كان التخطيط المادي غير متسق.

يلخص الجدول أدناه اعتبار تصميم نموذجي من طبقتين:

العمليات والمراقبة واستكشاف الأخطاء وإصلاحها والتحسين

يعتمد النجاح التشغيلي على الرؤية. توفر أنسجة InfiniBand عدادات لأخطاء الروابط وأحداث الازدحام واستخدام المخزن المؤقت. يجب جمع هذه البيانات باستمرار وربطها ببيانات مجدول المهام، بحيث يمكن تتبع تدهور الأداء إلى أجزاء معينة من النسيج بدلاً من تخمينها.

تشمل سيناريوهات استكشاف الأخطاء وإصلاحها الشائعة توقف الاعتمادات، وجود جودة خدمة غير صحيحة، وعدم تطابق البرامج الثابتة بين المحولات والمحولات. يمكن لقائمة تحقق منظمة - التحقق من سرعة الارتباط، وفحص عدادات الأخطاء، وتأكيد سياسة التوجيه، وفحص بيانات الازدحام - تقليل متوسط وقت الحل. يجب أن تركز جهود التحسين على زمن الانتقال الذيل بدلاً من متوسط النطاق الترددي، لأن أعباء عمل HPC و AI حساسة للسلوك الأسوأ.

للتخطيط للمشتريات ودورة الحياة، غالبًا ما تقارن الفرق بين سعر 920-9B110-00FH-0D0 وخيارات 920-9B110-00FH-0D0 للبيع عبر القنوات المعتمدة. يعتمد التسعير على التكوين ومستوى الدعم والمنطقة، لذلك يوصى بالتواصل المبكر مع الموزعين وممثلي NVIDIA للمؤسسات.

الملخص وتقييم القيمة

يوفر محول NVIDIA Mellanox 920-9B110-00FH-0D0 أساسًا مثبتًا لـ 200 جيجابت/ثانية HDR للاتصال بمجموعات RDMA و HPC و AI. من خلال تقليل طبقات النسيج، ودعم تسريع العمليات الجماعية، وتمكين نقل البيانات بزمن انتقال منخفض لا يفقد البيانات، فإنه يعالج الاختناقات التي تحد من كفاءة المجموعة في العالم الحقيقي. بالنسبة لمهندسي الشبكات ومهندسي المبيعات المسبقة، فإنه يمثل وحدة بناء عملية وقابلة للتوسع لأنسجة InfiniBand HDR مع مسار واضح للمضي قدمًا.