راه حل فنی سوئیچ InfiniBand Mellanox (NVIDIA Mellanox) 920-9B210-00FN-0D0

June 1, 2026

راه حل فنی سوئیچ InfiniBand Mellanox (NVIDIA Mellanox) 920-9B210-00FN-0D0

این مقاله فنی فنی، معماران، مهندسان پیش فروش و تیم های عملیاتی را با طراحی مرجع جامع با محوریتملانوکس (NVIDIA Mellanox) 920-9B210-00FN-0D0سوئیچ InfiniBand. این راه حل به مهم ترین چالش ها در محیط های مدرن هوش مصنوعی و HPC می پردازد: تاخیر ناشی از شبکه، تراکم و محدودیت های مقیاس پذیری پارچه های اترنت سنتی.

1. پیشینه پروژه و تجزیه و تحلیل نیازمندیها

سازمان‌هایی که کلاسترهای GPU در مقیاس بزرگ را برای آموزش مدل‌های زبانی بزرگ، شبیه‌سازی‌های دینامیک مولکولی یا پیش‌بینی آب‌وهوا به کار می‌گیرند، با یک تنگنای مشترک روبرو هستند: بافت اتصال. اترنت متعارف با اتلاف نمی تواند تأخیر قطعی و زیر میکروثانیه ای را که برای عملیات جمعی کارآمد همه کاهش و همه به همه لازم است تضمین کند. الزامات کلیدی شناسایی شده از استقرار در دنیای واقعی عبارتند از:

  • تأخیر سرتاسر کمتر از 1µs برای بارهای کاری MPI حساس به تأخیر
  • بدون تلفات، با سرعت خط 400 گیگابیت بر ثانیه در هر پورت، بدون انسداد سر خط
  • محاسبات درون شبکه برای تخلیه عملیات جمعی از CPUهای میزبان
  • مقیاس پذیری یکپارچه از 8 تا 2000+ گره GPU بدون معماری مجدد پارچه

این خواسته ها باعث شد تیم طراحی ما انتخاب شود920-9B210-00FN-0D0به عنوان بلوک ساختمانی برای نسل بعدی پارچه با تاخیر کم.

2. طراحی کلی شبکه/سیستم معماری

معماری پیشنهادی یک توپولوژی دو لایه برگ-خط‌واره را بهینه‌سازی شده برای پهنای باند غیرمسدود کننده و با تقسیم کامل اتخاذ می‌کند. همه گره‌های محاسباتی (سرورهای GPU، وسایل ذخیره‌سازی، میزبان‌های مدیریتی) به سوئیچ‌های برگ متصل می‌شوند، در حالی که سوئیچ‌های ستون فقرات اتصال هر به هر هر برگه‌ای را فراهم می‌کنند. این طراحی اشتراک بیش از حد را حذف می کند و تأخیر قابل پیش بینی را بدون توجه به الگوهای ارتباطی تضمین می کند.

برای یک کلاستر 512-GPU مرجع، 16 سوئیچ برگ و 8 سوئیچ ستون فقرات را مستقر می کنیم که هر کدام یکNVIDIA Mellanox 920-9B210-00FN-0D0. پیوندهای برگ و ستون فقرات با سرعت 400 گیگابیت بر ثانیه NDR کار می‌کنند و در نتیجه پهنای باند فابریک کل بیش از 200 ترابایت بر ثانیه است. مسیریابی تطبیقی ​​(AR) و الگوریتم‌های کنترل ازدحام در همه پورت‌ها فعال هستند تا به صورت پویا ترافیک را متعادل کنند و از نقاط داغ در طول رویدادهای incast جلوگیری کنند.

3. نقش 920-9B210-00FN-0D0 و متمایز کننده های کلیدی

را920-9B210-00FN-0D0 MQM9790-NS2F 400Gb/s NDRسوئیچ هم به عنوان برگ و هم به عنوان ستون فقرات عمل می کند و عملکرد ثابتی را در کل پارچه ارائه می دهد. مزایای مهم معماری آن عبارتند از:

ویژگی سود برای RDMA/HPC/AI
32 درگاه NDR 400 گیگابیت بر ثانیه (غیر مسدود کننده) پهنای باند تقسیم کامل، بدون اشتراک بیش از حد
تأخیر برش زیر 100 ثانیه مجموعه های MPI پیام کوچک کارآمد را فعال می کند
SHARPv3 تجمع در شبکه ترافیک را تا 10 برابر کاهش می دهد
مسیریابی تطبیقی ​​+ کنترل تراکم نقاط داغ را تحت سناریوهای incast حذف می کند

مهندسانی که تدارکات را ارزیابی می کنند، این را پیدا خواهند کرد920-9B210-00FN-0D0 سوئیچ InfiniBand OPN(سفارش شماره قطعه) نقل قول و تحویل را ساده می کند. برای اعتبار سنجی قابلیت همکاری،برگه داده 920-9B210-00FN-0D0ومشخصات 920-9B210-00FN-0D0ماتریس‌های سازگاری دقیق را با ConnectX-7، BlueField-3 DPU و وسایل ذخیره‌سازی شخص ثالث ارائه دهید.

4. استقرار و مقیاس بندی توصیه ها

ما یک رویکرد استقرار مرحله‌ای را برای به حداقل رساندن اختلال در تولید توصیه می‌کنیم:

  • فاز 1 (پایلوت):8 تا 16 گره GPU + 2920-9B210-00FN-0D0سوئیچ ها (توپولوژی تک ریلی). عملکرد RDMA را تأیید کنید و معیارهای پایه را جمع آوری کنید.
  • فاز 2 (تولید جزئی):با استفاده از 4 برگ + 2 خار به 128 GPU مقیاس دهید. مسیریابی تطبیقی ​​و SHARPv3 را فعال کنید.
  • فاز 3 (تولید کامل):16 برگ + 8 خار برای 512+ GPU استفاده کنید. مسیریابی چند مسیری و پارتیشن بندی فابریک را با استفاده از NVIDIA UFM معرفی کنید.

برای کابل کشی، از کابل های نوری فعال (AOC) یا کابل های مسی فعال برای مسیرهای زیر 5 متر استفاده کنید. برای ستون‌های بلندتر یا پیوندهای متقاطع، فرستنده‌های 400 گیگابیت بر ثانیه NDR را با فیبر تک حالته نصب کنید. تمام پورت ها روی920-9B210-00FN-0D0 سازگار استاکوسیستم از مذاکره خودکار بین حالت های عملیاتی 400 گیگابیت بر ثانیه و 200 گیگابیت بر ثانیه پشتیبانی می کند.

5. عملیات، نظارت و عیب یابی

آمادگی تولید مستلزم مشاهده قوی است. ما ادغام می کنیمراه حل OPN سوئیچ 920-9B210-00FN-0D0 InfiniBandبا NVIDIA Unified Fabric Manager (UFM). قابلیت های عملیاتی کلیدی عبارتند از:

  • تله متری بلادرنگ:شمارنده‌های هر پورت، هیستوگرام‌های تأخیر، اشغال بافر و اعلان‌های تراکم صادر شده از طریق Prometheus/Graphite.
  • خطای خودکار:مسیریابی مجدد لینک فرعی در صورت خرابی کابل یا فرستنده گیرنده.
  • تشخیص عملکرد:شمارنده های عملکرد SHARP داخلی و ابزارهای تجزیه و تحلیل پارچه برای شناسایی گره های با تخلیه کند.

برای مسائل رایج، بهبرگه داده 920-9B210-00FN-0D0برای کدهای خطا و اقدامات اصلاحی پیشنهادی هنگام برنامه ریزی برای افزایش ظرفیت، با920-9B210-00FN-0D0 قیمتمدل هایی برای مبادله بین انبساط فقط برگ و تمام ستون فقرات.

6. خلاصه و ارزشیابی

راNVIDIA Mellanox 920-9B210-00FN-0D0راه حل مبتنی بر تأخیر زیر میکروثانیه قطعی، توان عملیاتی 400 گیگابیت بر ثانیه بدون تلفات و شتاب محاسباتی درون شبکه برای خوشه‌های RDMA/HPC/AI ارائه می‌کند. در مقایسه با طرح‌های جایگزین اترنت 400 گیگابایتی، این پارچه InfiniBand 2.5 برابر کمتر از تأخیر کاهش می‌یابد و تا 90 درصد از ترافیک جمعی را از طریق SHARPv3 حذف می‌کند. برای سازمان هایی که ارزیابی می کنند920-9B210-00FN-0D0 برای فروشگزینه‌ها، هزینه کل مالکیت معمولاً طی 6 تا 12 ماه از طریق استفاده بالاتر از GPU و کاهش زمان تکمیل کار بازیابی می‌شود. ما استقرار آزمایشی فوری برای هر زیرساخت هوش مصنوعی جدید یا مقیاس‌پذیر را توصیه می‌کنیم.