راه حل فنی سوئیچ ملانوکس (NVIDIA Mellanox) MQM9790-NS2F InfiniBand

July 13, 2026

راه حل فنی سوئیچ ملانوکس (NVIDIA Mellanox) MQM9790-NS2F InfiniBand

راه حل فنی Switch InfiniBand Mellanox (NVIDIA Mellanox) MQM9790-NS2F – بهینه‌سازی اتصال با تأخیر کم برای خوشه‌های RDMA/HPC/AI

این مقاله سفید فنی یک معماری راه حل جامع را ارائه می دهد که بر روی آن متمرکز استملانوکس (NVIDIA Mellanox) MQM9790-NS2Fسوئیچ InfiniBand. این سند با هدف معماران شبکه، مهندسان پیش فروش و سرنخ های عملیات، جزئیات چگونگیMQM9790-NS2Fتأخیر بسیار کم قطعی، RDMA بدون تلفات، و پهنای باند مقیاس پذیر را برای نسل بعدی زیرساخت های HPC و AI ارائه می کند. ما اصول طراحی، توپولوژی های استقرار، بهترین شیوه های عملیاتی و اعتبارسنجی عملکرد را پوشش می دهیم.

1. پیشینه پروژه و تجزیه و تحلیل نیازمندیها

تمرینات هوش مصنوعی مدرن و بارهای کاری شبیه‌سازی علمی نیازمند بافت‌های شبکه‌ای هستند که می‌توانند الگوهای ارتباطی بسیار کاهش، جمع‌آوری و نقطه به نقطه را با لرزش زیر میکروثانیه حفظ کنند. راه‌حل‌های سنتی مبتنی بر اترنت، حتی با RoCEv2، پیچیدگی‌هایی را در مدیریت ازدحام، تنظیم PFC و کنترل تأخیر دنباله ایجاد می‌کنند که اغلب منجر به استفاده ناکارآمد از GPU و زمان‌های تکمیل کار غیرقابل پیش‌بینی می‌شود.

الزامات کلیدی شناسایی شده در پروژه های معمولی HPC/AI عبارتند از:

  • تأخیر سرتاسر کمتر از 1 میکروثانیه (تغییر پورت به پورت) تحت بار کامل
  • پارچه بدون اتلاف با ریزش بسته صفر به دلیل ازدحام
  • مقیاس پذیری از 64 تا بیش از 2000 گره GPU بدون تغییرات معماری
  • عملیات ساده شده با تله متری غنی و بازیابی خودکار خطا

راNVIDIA Mellanox MQM9790-NS2Fمستقیماً با ادغام فناوری NDR 400 گیگابیت بر ثانیه، مسیریابی تطبیقی ​​و محاسبات درون شبکه در یک پلت فرم OSFP 1U و 64 پورت، این خواسته ها را برطرف می کند.

2. طراحی کلی شبکه / سیستم معماری

معماری توصیه شده از یک توپولوژی دو لایه برگ-خاره (یا درخت چاق) برای ارائه پهنای باند تقسیم کامل و انعطاف پذیری بالا استفاده می کند. هر بلوک برگ شامل چندین قفسه است که در هر قفسه دو قفسه وجود داردسوئیچ های MQM9790-NS2F InfiniBandبرای افزونگی لایه ستون فقرات ترافیک را از تمام سوئیچ‌های برگ جمع‌آوری می‌کند و ارتباط غیرمسدود بین هر دو نقطه پایانی را تضمین می‌کند.

راMQM9790-NS2F 400Gb/s NDR 64 پورت OSFPسوئیچ هم به عنوان برگ و هم به عنوان ستون مهره عمل می کند و سخت افزار یکنواخت را در سراسر پارچه ارائه می دهد - صرفه جویی و نگهداری را ساده می کند. برای یک کلاستر 1024 GPU، یک طراحی معمولی از 16 سوئیچ برگ (هر کدام 64 GPU را به هم متصل می‌کند) و 8 سوئیچ ستونی استفاده می‌کند که همگی از طریق کابل‌های نوری 400G یا DAC به هم متصل هستند. این پارچه از توپولوژی های درخت چربی و Dragonfly+ پشتیبانی می کند، با مسیریابی تطبیقی ​​که به صورت پویا ترافیک را در مسیرهای متعدد متعادل می کند.

3. نقش و ویژگی های کلیدیملانوکس (NVIDIA Mellanox) MQM9790-NS2Fدر راه حل

راNVIDIA Mellanox MQM9790-NS2Fسنگ بنای این راه حل است که ارائه می دهد:

  • 64 پورت OSFPهر کدام با سرعت 400 گیگابیت بر ثانیه (NDR) کار می کنند - ظرفیت کل سوئیچینگ 25.6 ترابایت بر ثانیه، با تأخیر برش زیر 600 ns.
  • مسیریابی تطبیقی- به صورت پویا مسیر کم تراکم را برای هر بسته انتخاب می کند، از لینک های هات اسپات اجتناب می کند و حتی تحت الگوهای ترافیک نامتقارن، تأخیر ثابتی را حفظ می کند.
  • SHARPv3 (پروتکل تجمیع و کاهش سلسله مراتبی مقیاس پذیر)- ارتباطات جمعی (همه کاهش، پخش) را از CPUهای میزبان تخلیه می کند، گفتگوی شبکه را کاهش می دهد و آموزش هوش مصنوعی را تا 20 تا 30 درصد سرعت می بخشد.
  • محاسبات درون شبکه ای– از کاهش داده، تقسیم‌بندی و حتی عملیات MPI در مقیاس کوچک مستقیماً روی سوئیچ پشتیبانی می‌کند و منابع ارزشمند GPU را برای محاسبات آزاد می‌کند.
  • تله متری و مدیریت ازدحام– نظارت پیشرفته داخلی شامل شمارشگرهای هر جریان، هیستوگرام اشغال بافر، و معیارهای تأخیر در سطح مسیر، همگی از طریق UFM یا REST APIهای قابل صادرات.

این قابلیت ها را قادر می سازدراه حل سوئیچ MQM9790-NS2F InfiniBandبرای ارائه عملکرد قطعی در مقیاس، همانطور که توسط معیارهای داخلی و استقرار مشتری تایید شده است. رامشخصات MQM9790-NS2Fهمچنین شامل پشتیبانی از DAC های مسی غیرفعال و ماژول های نوری فعال است که انعطاف پذیری را برای فواصل تا 100 متر (با اپتیک 400G SR4) و فراتر از آن فراهم می کند.

4. استقرار و توصیه های مقیاس بندی (توپولوژی معمولی)

برای استقرار گرین فیلد، ما رویکرد مرحله ای زیر را توصیه می کنیم:

  • فاز 1 - پایلوت:2 سوئیچ برگ (هر کدامMQM9790-NS2F) و 2 سوئیچ ستون فقرات، اتصال 128 پردازنده گرافیکی. اعتبارسنجی عملکرد در برابربرگه داده MQM9790-NS2Fپارامترها
  • مرحله 2 - کاهش مقیاس:سوئیچ های برگ را با افزایش 2 در هر قفسه و سوئیچ های ستون فقرات را در صورت نیاز برای حفظ اشتراک بیش از حد ≤ 1:1 اضافه کنید. چگالی 64 پورت به یک سوئیچ اجازه می دهد تا یک رک کامل از 64 گره GPU را میزبانی کند (اگر هر گره دارای یک 400G uplink باشد).
  • فاز 3 - چند صفحه:برای خوشه‌های بیش از 2000 گره، چندین پارچه مستقل (به عنوان مثال، صفحات 2× یا 4×) با متعادل‌سازی بار مبتنی بر مسیر پیاده‌سازی کنید، و از پشتیبانی سوئیچ برای خطوط مجازی و کلیدهای پارتیشن استفاده کنید.

کابل‌کشی معمولی از DACهای OSFP-to-OSFP برای اتصالات درون رک (≤3 متر) و ماژول‌های نوری OSFP-to-400G SR4 برای فواصل برگی تا 100 متر استفاده می‌کند. راسازگار با MQM9790-NS2Fفرستنده‌های گیرنده با اکوسیستم فروشنده نوری NVIDIA تأیید شده‌اند و قابلیت همکاری یکپارچه را تضمین می‌کنند.

5. عملیات، نظارت، عیب یابی و بهینه سازی

عملیات مؤثر برای حفظ تأخیر کم در تولید حیاتی است. راه حل باNVIDIA UFM (Unified Fabric Manager)، که فراهم می کند:

  • داشبورد بلادرنگ– پهنای باند هر پورت، شمارشگر خطا، و نقشه های حرارتی ازدحام.
  • بهینه سازی مجدد مسیر خودکار- هنگامی که یک پیوند تخریب می شود یا از کار می افتد، UFM مسیرها را دوباره محاسبه می کند و جداول مسیریابی تطبیقی ​​را بدون دخالت اپراتور پیکربندی مجدد می کند.
  • تله متری تاریخی- داده های تأخیر و جریان را برای تجزیه و تحلیل پس از مرگ و برنامه ریزی ظرفیت ذخیره می کند.

گردش کار عیب یابی توصیه شده:

  1. مانیتور کردن فریم‌های مکث و حذف هر پورت - انتظار می‌رود حذف صفر باشد. هر گونه دور ریختن نشان دهنده پیکربندی اشتباه یا اپتیک معیوب است.
  2. عملیات SHARPv3 را از طریق آمارهای جمعی UFM تأیید کنید - اطمینان حاصل کنید که عملیات کاهش بارگذاری شده است.
  3. از ابزارهای تشخیصی داخلی استفاده کنید (مثلاًibdiagnet،ibstatus) برای بررسی یکپارچگی پیوند و یکپارچگی سیگنال.

برای بهینه سازی، آستانه الگوریتم مسیریابی تطبیقی ​​(مثلاً بازه حسگر بار) را بر اساس الگوهای بار کاری تنظیم کنید -سوئیچ MQM9790-NS2F InfiniBandامکان تنظیم دقیق از طریق رابط های مدیریتی را فراهم می کند. به روز رسانی سیستم عامل منظم (از طریق پورتال پشتیبانی NVIDIA در دسترس است) شامل بهبود عملکرد و وصله های امنیتی است.

6. خلاصه و ارزیابی ارزش

راملانوکس (NVIDIA Mellanox) MQM9790-NS2Fپایه ای با عملکرد بالا و مقاوم در برابر آینده برای خوشه های RDMA/HPC/AI ارائه می دهد. با ترکیب سرعت NDR 400 گیگابیت بر ثانیه، چگالی 64 پورت و محاسبات هوشمند درون شبکه، گلوگاه های سنتی را از بین می برد و مقیاس پذیری خطی را تا کلاس exascale ارائه می کند. این راه حل هزینه کل مالکیت را از طریق توان کمتر در هر پورت (≈ 1.5 وات)، کابل کشی ساده و کاهش سربار CPU از بارهای SHARP کاهش می دهد.

برای سازمان هایی که ارزیابی می کنندقیمت MQM9790-NS2F، سرمایه گذاری با سود قابل اندازه گیری در استفاده از GPU (اغلب بیش از 90٪ در تولید) و تا 40٪ کاهش در زمان تکمیل کار در مقایسه با پارچه های RoCEv2 توجیه می شود. رابرگه داده MQM9790-NS2Fومشخصات MQM9790-NS2Fجزئیات جامع را ارائه دهید و واحدها به راحتی در دسترس هستند (MQM9790-NS2F برای فروشاز طریق کانال های مجاز). علاوه بر این، سازگاری سوئیچ با آداپتورهای NVIDIA موجود، مسیر مهاجرتی روان را برای کاربرانی که قبلاً در اکوسیستم ملانوکس سرمایه‌گذاری کرده‌اند، تضمین می‌کند.

به طور خلاصه، این راه حل فنی بر اساسسوئیچ MQM9790-NS2F InfiniBandپارچه ای مستحکم و کارآمد از نظر عملیاتی ارائه می دهد که با سخت ترین نیازهای اتصال متقابل با تأخیر کم مواجه می شود - سنگ بنای نسل بعدی ابررایانه های هوش مصنوعی.