- Yopitek Ltd/
- نظرة عامة على المنتجات/
- بطاقات شبكة Mellanox / NVIDIA ConnectX وحلول الشبكات/
- أجهزة تبديل NVIDIA Mellanox InfiniBand وإيثرنت/
أجهزة تبديل NVIDIA Mellanox InfiniBand وإيثرنت
محتوى المقال
أجهزة تبديل NVIDIA Mellanox InfiniBand وإيثرنت — سرعات EDR و HDR و NDR#
تمثل أجهزة تبديل NVIDIA Mellanox InfiniBand العمود الفقري لمجموعات تدريب الذكاء الاصطناعي الحديثة وبيئات الحوسبة عالية الأداء (HPC). وبفضل تميزها بكثافة منافذ عالية، وزمن استجابة تبديل منخفض، وإدارة متقدمة للازدحام، تتيح هذه الأجهزة إمكانية التوسع السلس للأنظمة متعددة العقد.
دليل أجهزة التبديل#
ستجد أدناه قائمة بأجهزة التبديل المدارة وغير المدارة بارتفاع 1U القابلة للتركيب في الرف المتوفرة في مخزوننا.
| رقم الجزء | جيل شريحة المعالجة | مُدار | تهيئة المنافذ | سرعة المنفذ | عامل الشكل | تدفق الهواء | وحدة إمداد الطاقة |
|---|---|---|---|---|---|---|---|
| MSB7800-ES2F | Switch-IB 2 (EDR) | نعم (معالج x86) | 36 منفذاً QSFP28 | 100 جيجابت/ثانية | عامل شكل 1U قياسي | من المنفذ إلى الطاقة (P2C) | وحدة تغذية طاقة تيار متردد مزدوجة |
| MSB7890-ES2R | Switch-IB 2 (EDR) | لا | 36 منفذاً QSFP28 | 100 جيجابت/ثانية | عامل شكل 1U قياسي | من الطاقة إلى المنفذ (C2P) | وحدة تغذية طاقة تيار متردد مزدوجة |
| MQM8700-HS2F | Quantum (HDR) | نعم (معالج x86) | 40 منفذاً QSFP56 | 200 جيجابت/ثانية | عامل شكل 1U قياسي | من المنفذ إلى الطاقة (P2C) | وحدة تغذية طاقة تيار متردد مزدوجة |
| MQM8790-HS2F | Quantum (HDR) | لا | 40 منفذاً QSFP56 | 200 جيجابت/ثانية | عامل شكل 1U قياسي | من المنفذ إلى الطاقة (P2C) | وحدة تغذية طاقة تيار متردد مزدوجة |
| MQM9700-NS2F | Quantum 2 (NDR) | نعم | 32 منفذاً OSFP (تُوفر 64 منفذ NDR) | 400 جيجابت/ثانية (OSFP) | عامل شكل 1U قياسي | من المنفذ إلى الطاقة (P2C) | وحدة تغذية طاقة تيار متردد مزدوجة |
| MQM9790-NS2F | Quantum 2 (NDR) | لا | 32 منفذاً OSFP (تُوفر 64 منفذ NDR) | 400 جيجابت/ثانية (OSFP) | عامل شكل 1U قياسي | من المنفذ إلى الطاقة (P2C) | - وحدة تغذية طاقة تيار متردد مزدوجة |
مقارنة أجيال InfiniBand#
| الجيل | شريحة المعالجة | السرعة القصوى للمنفذ | سعة جهاز التبديل | معدل الإشارة / التضمين | زمن الاستجابة |
|---|---|---|---|---|---|
| EDR | Switch-IB 2 | 100 جيجابت/ثانية | 7.2 تيرابايت/ثانية | 25 جيجابت/ثانية بتضمين NRZ | 90 نانوثانية |
| HDR | Quantum | 200 جيجابت/ثانية | 16.0 تيرابايت/ثانية | 50 جيجابت/ثانية بتضمين PAM4 | 130 نانوثانية |
| NDR | Quantum 2 | 400 جيجابت/ثانية (جاهز لـ 800G) | 51.2 تيرابايت/ثانية | 100 جيجابت/ثانية بتضمين PAM4 | 205 نانوثانية |
دليل طبولوجيا شبكات InfiniBand#
يتطلب بناء مجموعات قابلة للتوسع لتدريب الذكاء الاصطناعي أو محاكاة الفيزياء طبولوجيا متخصصة:
1. طبولوجيا شجرة Fat-Tree (CLOS غير المحظورة)#
البنية المعيارية لشبكات InfiniBand؛ حيث تنظم أجهزة التبديل في طبقات هرمية (أجهزة تبديل Leaf وأجهزة تبديل Spine) لتوفير مسارات متوازية متعددة.
- غير محظورة (تخصيص بنسبة 1:1): يمكن لكل عقدة الاتصال بالسرعة الكاملة للشبكة في نفس الوقت. ويتطلب ذلك عرض نطاق ترددي متساوٍ للارتباطات الصاعدة (Uplink) المتجهة لأجهزة Spine والارتباطات الهابطة (Downlink) المتجهة للعقد.
- زيادة الحجز (مثل 2:1): يقلل من تكلفة أجهزة التبديل عن طريق خفض عدد ارتباطات Spine، وهي تهيئة مناسبة لأعباء العمل التي تعتمد على الاتصال المحلي بين خوادم الحوسبة.
2. شبكات الذكاء الاصطناعي المحسنة للمسارات السريعة (Rail-Optimized)#
في عقد الخوادم متعددة وحدات معالجة الرسومات (مثل خادم NVIDIA HGX H100 الذي يحتوي على 8 وحدات معالجة رسومات)، تمتلك كل وحدة معالجة بطاقة شبكة ConnectX مخصصة لها. ويقوم تحسين المسارات السريعة (Rail-optimization) بتوصيل جميع محولات “GPU 1” عبر كافة الخوادم بجهاز تبديل مخصص “Rail Switch 1”، وجميع محولات “GPU 2” بجهاز تبديل “Rail Switch 2”، وهكذا. يعكس هذا التصميم نمط الاتصال الحلقي لمكتبات التعلم العميق (NCCL) مباشرة على أجهزة التبديل المادية، مما يقلل من زمن الاستجابة إلى أدنى حد ممكن.
أجهزة التبديل المدارة وغير المدارة ومسؤول الشبكة الفرعية (Subnet Manager)#
على عكس شبكات إيثرنت التي تعمل مباشرة بمجرد التوصيل بفضل بروتوكول ARP، فإن شبكة InfiniBand لا يمكنها تمرير أي بيانات دون وجود مسؤول شبكة فرعية نشط (Subnet Manager - SM). يقوم هذا المسؤول باكتشاف الطبولوجيا، وتعيين المعرفات المحلية (LIDs)، وحساب مسارات التوجيه.
- أجهزة التبديل المدارة: تحتوي على معالج داخلي يعمل بنظام التشغيل MLNX-OS/Onyx ويستضيف مسؤول شبكة فرعية مدمجاً. وهي مثالية للمجموعات الصغيرة المستقلة (حتى 36 عقدة تقريباً).
- أجهزة التبديل غير المدارة: تتميز بزمن استجابة منخفض للغاية، ولكنها لا تحتوي على معالج مدمج. وتتطلب وجود مسؤول شبكة فرعية خارجي يعمل إما على خادم مضيف (عبر OpenSM) أو على جهاز تبديل مُدار منفصل داخل البنية الشبكية نفسها.