QSFP-DD برائے AI کلسٹرز: بغیر اندازہ لگائے 400G اور 800G کے درمیان انتخاب کیسے کریں

Aug 03, 2026

ایک پیغام چھوڑیں۔

QSFP-DD ایک AI کلسٹر کے لیے موزوں ہے جب سوئچ یا اینڈ پوائنٹ پہلے سے ہی ایک مقامی QSFP-DD کیج کا استعمال کرتا ہے، جب اہل QSFP-فیملی ماڈیولز اور فائبر کا ایک بڑا بیس سروس میں رہنا چاہیے، اور جب پلیٹ فارم ہر پورٹ کے ساتھ منتخب کردہ ماڈیولز کو ٹھنڈا کر سکتا ہے۔ یہ غلط نقطہ آغاز ہے جب GPU سرورز اور سوئچ مقامی OSFP کیجز کے ارد گرد بنائے جاتے ہیں، یا جب آپ کو درحقیقت آپٹکس کی ضرورت ہوتی ہے تو میزبان انہیں دے سکتا ہے اس سے زیادہ تھرمل ہیڈ روم کی ضرورت ہوتی ہے۔

فارم فیکٹر پہلا فیصلہ نہیں ہے۔ یہ تقریباً چوتھا ہے۔ ایک نیٹ ورک ڈیزائن جو اپنی پہلی پروڈکشن ٹریننگ رن سے بچتا ہے اس کا آغاز سرور انٹرفیس، ریلوں کی تعداد، ٹارگٹ ٹوپولوجی، قابل قبول اوور سبسکرپشن تناسب، اور ناپے ہوئے کیبل روٹ سے ہوتا ہے۔ اس کے بعد ہی ماڈیول کی شکل میں فرق پڑتا ہے۔

یہ گائیڈ اس ترتیب سے آخر تک چلتا ہے، کام کی صلاحیت کے حساب کتاب، ایک لنک-سلیکشن ٹیبل، اور توثیق کی ترتیب کے ساتھ جو آپ لیب ٹیم کو دے سکتے ہیں۔

AI cluster network with GPU servers, leaf-spine switches, and QSFP-DD links

آپ کو کون سا فارم فیکٹر چننا چاہئے؟

اختتامی نقطہ کی حالت تشخیص کرنے کا پہلا انتخاب
دونوں سرے مقامی طور پر QSFP-DD / QSFP-DD800 QSFP-DD
دونوں سرے مقامی طور پر OSFP ہیں۔ او ایس ایف پی
نصب شدہ 400G QSFP بیس سے منتقلی QSFP-DD، بشرطیکہ میزبان مطلوبہ پورٹ موڈ کو سپورٹ کرے۔
ایک پلیٹ فارم پر ہائی-پاور آپٹکس جس کا اصل کیج OSFP ہے۔ او ایس ایف پی
ایک اختتام OSFP، دوسرا QSFP-DD ایک اہل کراس-فارم-فیکٹر DAC/AEC، یا دونوں سروں پر مماثل PMD، لین کی شرح اور FEC موڈ کے ساتھ ایک آپٹیکل لنک

بنیادی اصول مختصر ہے:اس کیج کا انتخاب کریں جو اختتامی نقطہ کا مقامی ہو، پھر برقی لین کی شرح، آپٹیکل انٹرفیس، ایف ای سی موڈ، پاور کلاس اور فرم ویئر کی درست حصہ نمبر کے لیے تصدیق کریں۔اس اصول کو ایمانداری سے لاگو کرنے کے لیے نیچے دی گئی ہر چیز کی ضرورت ہے۔

پانچ فیصلے، ترتیب میں

سب سے زیادہ خراب AI نیٹ ورک ان فیصلوں کو ترتیب سے - پہلے ایک ماڈیول چننے اور بعد میں رکاوٹ کو دریافت کرنے سے آتا ہے۔ نیچے کا ہر مرحلہ اگلا فیڈ کرتا ہے، اور ہر ایک اس چیز کو تبدیل کرتا ہے جو آپ اس کے بعد کے مرحلے میں خرید سکتے ہیں۔

  1. اختتامی نکات کی تصدیق کریں۔مقامی کیج کی قسم اور ہر لنک کے دونوں سروں پر پروٹوکول موڈ۔
  2. صلاحیت کا حساب لگائیں۔بندرگاہیں فی نوڈ، فی ریل، پھر آپ کے ہدف کے اوور سبسکرپشن تناسب پر لیف ڈاؤن لنک اور اپ لنک کی گنجائش۔
  3. فزیکل لنک منتخب کریں۔ناپے ہوئے راستے کی لمبائی، فائبر پلانٹ، کنیکٹر، بریک آؤٹ کی ضرورت۔
  4. حصہ نمبر کی توثیق کریں۔FEC، لین ریٹ، پاور کلاس، فرم ویئر، CMIS نظرثانی، وینڈر کی اہلیت۔
  5. ناکامی ڈومین کے ذریعہ تعینات کریں۔ایک وقت میں پہلے لیب، پھر ایک ریک، ریل یا توسیع پذیر یونٹ۔

مرحلہ 1: فارم فیکٹر، پروٹوکول اور آپٹیکل انٹرفیس کو الگ کریں۔

یہ تینوں چیزیں مستقل طور پر ایک فیصلے میں سمٹ جاتی ہیں، اور وہ گرنا ہی وہ جگہ ہے جہاں زیادہ تر مطابقت کی حیرت پیدا ہوتی ہے۔ وہ الگ الگ گورننگ دستاویزات کے ساتھ الگ الگ پرتیں ہیں۔

فارم فیکٹرمکینیکل جہتوں، میزبان کنیکٹر، برقی لین، انتظامی رویے اور تھرمل ڈیزائن کی وضاحت کرتا ہے۔ دیQSFP-DD MSA ہارڈ ویئر کی تفصیلاتمکینیکل، الیکٹریکل اور تھرمل ضروریات کا احاطہ کرتا ہے، اور اس کے بعد کی نظرثانی QSFP فیملی کے ساتھ پسماندہ مطابقت کو برقرار رکھتے ہوئے اسی آٹھ-لین ہوسٹ پورٹ کو 800G اور 1.6T ویریئنٹس تک بڑھاتی ہے۔ اگر آپ آگے جانے سے پہلے مکینیکل اور انتظامی پس منظر چاہتے ہیں، تو ہماراQSFP-DD تکنیکی جائزہتفصیل سے فارم فیکٹر کا احاطہ کرتا ہے۔

پروٹوکول- ایتھرنیٹ، RoCEv2 یا InfiniBand - کا فیصلہ NIC، سوئچ ASIC، فرم ویئر اور پورٹ کنفیگریشن کے ذریعے کیا جاتا ہے، نہ کہ کیج کی شکل سے۔ ایک QSFP-DD ماڈیول کو کبھی بھی فارم فیکٹر کی خاصیت کے طور پر "ایتھرنیٹ اور InfiniBand دونوں کی حمایت" کے طور پر بیان نہیں کیا جانا چاہئے۔ یہ صلاحیت میزبان کی ہے اور اس کی تصدیق مخصوص بندرگاہ پر کرنی ہوگی۔

آپٹیکل انٹرفیس- DR8, FR4, SR8, LR - لین کی تنظیم، رسائی اور درخواست کی وضاحت کرتا ہے۔ یہ کنیکٹر، فائبر کی گنتی، بریک آؤٹ میپنگ یا برقی لین کی شرح کو بیان نہیں کرتا ہے۔ ایک ہی آپٹیکل لیبل والے دو ماڈیولز ان میں سے ہر ایک میں مختلف ہو سکتے ہیں۔ سگنلنگ کی تعریف خود IEEE کے ذریعے کی گئی ہے، MSA کے ذریعے نہیں:IEEE Std 802.3df-2024800 Gb/s آپریشن اور اضافی 400 Gb/s PHYs کے لیے MAC پیرامیٹرز اور فزیکل لیئرز کو شامل کیا۔

انتظامی رویہ ایک چوتھی، پرسکون پرت ہے۔ QSFP-DD اور OSFP دونوں ماڈیولز کا انتظام CMIS کے ذریعے کیا جاتا ہے، اور فرم ویئر اپ ڈیٹ کے رویے، ایپلیکیشن کے انتخاب اور میزبان-ماڈیول ٹائمنگ کے لیے نظرثانی کے معاملات ہیں۔ شائع شدہ ترمیمات میں درج ہیں۔OIF کے نفاذ کے معاہدے.

مرحلہ 2: سرور پورٹس سے نیٹ ورک کا سائز بنائیں، GPU شمار نہیں۔

GPU شمار آپ کو بتاتا ہے کہ کلسٹر کتنا بڑا ہے۔ یہ آپ کو نہیں بتاتا کہ نیٹ ورک کو کیا لے جانا ہے، کیونکہ نیٹ ورک صرف سرور انٹرفیس کو دیکھتا ہے۔

دو مثالیں اس بات کو واضح کرتی ہیں۔ ایک NVIDIA DGX H100/H200 سسٹم آٹھ ConnectX-7 کمپیوٹ-فیبرک انٹرفیس کو ہر ایک میں 400 Gb/s تک ظاہر کرتا ہے - لیکن یہ آٹھ جسمانی پنجرے نہیں ہیں۔ سپر پی او ڈی ریفرنس آرکیٹیکچر کمپیوٹ فیبرک کو دکھاتا ہے۔چار دو-پورٹ ٹرانسیور جو تمام آٹھ GPUs تک پہنچتے ہیں۔. ایک DGX B300، اس کے برعکس، پیش کرتا ہے۔GPU ٹرے پر آٹھ نیٹ ورک پورٹس800 Gb/s تک آٹھ ConnectX-8 انٹرفیس پیش کر رہا ہے۔ ایک ہی GPU شمار، مکمل طور پر مختلف پورٹ انوینٹری، کیبل کاؤنٹ اور آپٹکس بل۔

لہذا اس سے پہلے کہ آپ ایک سوئچ ڈیٹا شیٹ کو دیکھیں، ہر نوڈ کی قسم کے لیے دستاویز: کمپیوٹ-فیبرک پورٹس، پورٹ ریٹ، NIC-سے-GPU یا ریل میپنگ، مقامی کیج کی قسم، معاون پروٹوکول موڈز، نیز علیحدہ اسٹوریج اور مینجمنٹ انٹرفیس۔ وہ انوینٹری، GPU نمبر نہیں، اس کے بعد آنے والے ہر حساب کا ان پٹ ہے۔

کام کی صلاحیت کا حساب کتاب

32 نوڈس کا ایک قابل توسیع یونٹ لیں، ہر ایک ریل کے-آپٹائزڈ ڈیزائن میں آٹھ 400G کمپیوٹ-فیبرک پورٹس، ایک پورٹ فی ریل۔ ایک وقت میں ایک ریل کام کریں:

  • ڈاون لنک کی گنجائش فی ریل لیف= 32 نوڈس × 1 پورٹ × 400G =12.8 Tb/s
  • 1:1 پر (غیر-بلاکنگ), مطلوبہ اپ لنک کی گنجائش=12.8 Tb/s → 12,800 ÷ 800 =16 × 800G اپ لنکس
  • 2:1 پر, مطلوبہ اپ لنک کی گنجائش=6.4 Tb/s →8 × 800G اپ لنکس

پھر سوئچ ریڈکس کے خلاف نتیجہ چیک کریں: 32 ڈاؤن لنکس کے علاوہ 16 اپ لنکس کو اس پتی پر 48 قابل استعمال بندرگاہوں کی ضرورت ہے، جو آپ کے سوئچ کے انتخاب کو فوری طور پر روکتی ہے۔ فالتو پن اور دیکھ بھال کے لیے لنکس شامل کریں، اور فی ریل - آٹھ ریل، آٹھ پتیوں کے گروپس کو دہرائیں، ایک مجموعی تعداد نہیں۔ یہ وہ جگہ ہے جہاں 800G اپنی جگہ کماتا ہے یا نہیں: یہاں یہ اپلنک پورٹ کی گنتی کو آدھا کر دیتا ہے، جو کہ ایک ریڈکس دلیل ہے، نہ کہ بینڈوتھ کی دلیل۔

ریل-منظم، متوازن چربی-درخت کے کپڑے بڑے تربیتی کلسٹرز کے لیے پیٹرن NVIDIA دستاویزات ہیں -DGX H100 SuperPOD حوالہ فن تعمیرآٹھ فی-سسٹم کمپیوٹ کنکشن کے ساتھ ایک مکمل چکنائی والا درخت-استعمال کرتا ہے۔ چاہے وہ پیٹرن آپ کے کام کے بوجھ کے مطابق ہو، یہ ایک ڈیزائن کا فیصلہ ہے، لیکن اوپر حساب کرنے کا طریقہ ٹوپولوجی سے قطع نظر رکھتا ہے۔

مرحلہ 3: تمام چار فیبرکس کی منصوبہ بندی کریں، پھر ماڈیولز پر واپس آئیں

ایک AI کلسٹر ایک نیٹ ورک نہیں ہے۔ ڈی جی ایکس سپر پی او ڈی ریفرنس آرکیٹیکچرز الگکمپیوٹ، اسٹوریج، ان-بینڈ مینجمنٹ اور-بینڈ مینجمنٹ میں-کپڑے، اور ہر ایک اپنی پورٹ اور آپٹکس کی ضرورت پیدا کرتا ہے۔

دیکمپیوٹ فیبرکگریڈینٹ ایکسچینج، پیرامیٹر سنکرونائزیشن، اجتماعی اور ریموٹ میموری آپریشنز کو لے جاتا ہے۔ اس میں سخت ترین تاخیر، بھیڑ اور راستے-سمیٹری کے تقاضے ہیں، اور یہ وہ جگہ ہے جہاں 800G-بمقابلہ-400G دلیل اصل میں طے ہوتی ہے۔

دیاسٹوریج فیبرکتربیتی ڈیٹا، چوکیاں اور ماڈل نوادرات رکھتا ہے۔ اس کی صلاحیت ڈیٹاسیٹ فارمیٹ، کیش ہٹ ریٹ، ڈیٹا-لوڈر متوازی، چیک پوائنٹ فریکوئنسی اور میٹا ڈیٹا کی شدت پر منحصر ہے - یہی وجہ ہے کہ "سٹوریج کے لیے 400G کافی ہے" محفوظ ڈیفالٹ نہیں ہے۔ ریفرنس آرکیٹیکچرز سسٹم کی سطح پر اسٹوریج کی کارکردگی کی وضاحت کرتے ہیں اور اسے کمپیوٹ فیبرک سے بالکل دور رکھتے ہیں تاکہ کام کے دو بوجھ ایک دوسرے کو نقصان نہ پہنچا سکیں۔

دی-بینڈ مینجمنٹ نیٹ ورک میںپروویژننگ، شیڈولر ٹریفک، رجسٹریاں، ریپوزٹریز اور نگرانی کرتا ہے۔ دی-کے-بینڈ نیٹ ورک سے باہرBMCs تک پہنچتا ہے، انتظامی بندرگاہوں اور ریک پاور کو سوئچ کرتا ہے، اور پیداواری تانے بانے کے ٹوٹنے کے وقت تک رسائی کے قابل رہنا چاہیے۔ اسے اس کے اپنے اپ لنک کے ساتھ بحالی اور حفاظتی راستے کے طور پر سمجھیں، نہ کہ بچ جانے والی کم-اسپیڈ ٹریفک کے طور پر۔

ماڈیول کے انتخاب کے لیے، عملی نتیجہ یہ ہے: ہر فیبرک اپنی پورٹ کی گنتی، اپنی فاصلاتی پروفائل اور اپنے پنجرے کی قسم میں حصہ ڈالتا ہے، اور وہ اکثر مختلف ہوتے ہیں۔ ایک کلسٹر کمپیوٹ پر OSFP ہو سکتا ہے اور QSFP-ذخیرے اور انتظام پر DD بغیر کسی غلط کے۔

مرحلہ 4: کسی رکاوٹ سے 400G یا 800G کا انتخاب کریں، رجحان نہیں

ایک 800G پورٹ برائے نام صلاحیت کو دگنا کرتا ہے۔ یہ آپ کی ایپلی کیشن سے پیدا ہونے والی ٹریفک کو کم نہیں کرتا ہے۔ اس کی قدر تقریباً ہمیشہ ساختی ہوتی ہے - کم لنکس، بہتر ریڈکس کی کارکردگی، یا مقامی 800G اینڈ پوائنٹ۔

400G اب بھی بہتر انتخاب ہے۔جب کمپیوٹ اینڈ پوائنٹس مقامی طور پر 400G ہوتے ہیں، موجودہ فیبرک پہلے سے ہی اپنے بلاک کرنے کے ہدف کو پورا کر لیتا ہے، کلسٹر دستیاب ریڈکس کے اندر بڑھ رہا ہے، ایک کوالیفائیڈ 400G ماڈیول اور کیبلنگ بیس پہلے سے موجود ہے، یا پاور اور کولنگ کی رکاوٹیں 800G کو ناخوشگوار بناتی ہیں۔ 800G استعمال کرنااپ لنکساوپر والے 400G سرورز اب بھی بالکل مناسب ہیں - لیکن اسے اوپر والے پورٹ ریاضی سے ثابت کریں، لیبل سے نہیں۔

800G ڈیزائن کو بہتر بناتا ہے۔جب سرورز مقامی 800G انٹرفیس کو بے نقاب کرتے ہیں، جب بہت سے 400G بہاؤ کو کم ریڑھ کی ہڈی کے لنکس میں جمع کرنا ضروری ہے، جب سوئچ پورٹ کاؤنٹ بائنڈنگ رکاوٹ ہے، یا جب 800G سے کم-اسپیڈ چائلڈ انٹرفیس میں بریک آؤٹ منتقلی کو آسان بناتا ہے۔ واضح طور پر بیان کیا گیا: 800G جسمانی روابط کی تعداد کو کم کر سکتا ہے یا بندرگاہوں کو سوئچ کر سکتا ہےان ڈیزائنوں میں جہاں جمع اور ریڈکس محدود رکاوٹیں ہیں۔. یہ فطرت کے قانون کے طور پر ایسا نہیں کرتا ہے۔

Comparison of 400G and 800G AI cluster network architectures

مخلوط-رفتار منتقلی کو واضح دستاویزات کی ضرورت ہے۔

بریک آؤٹ وہ جگہ ہے جہاں مخلوط-اسپیڈ ڈیزائن خاموشی سے ناکام ہو جاتے ہیں۔ جدید NICs اس کو فکسڈ - NVIDIA's ConnectX-8 کے بجائے کنفیگر ایبل بناتے ہیں۔پورٹ-تقسیم دستاویزاتایک واحد 800G OSFP کیج کو دو 400GbE بندرگاہوں یا آٹھ 100GbE بندرگاہوں میں دوبارہ ترتیب دیا جا رہا ہے، ہر ایک کو فرم ویئر-سطح کی ترتیب میں تبدیلی اور پاور سائیکل کی ضرورت ہوتی ہے۔ یہ لچک صرف اس وقت موجود ہے جہاں وینڈر نے اسے جانچا اور شائع کیا ہو۔

لہذا نقل مکانی کے منصوبے کو یہ بتانا چاہیے، فی بندرگاہ: کون سی بندرگاہیں کس رفتار سے چلتی ہیں، آیا میزبان مطلوبہ بریک آؤٹ موڈ کو سپورٹ کرتا ہے، دونوں سروں پر برقی لین کی شرح، چاہے بریک آؤٹ منطقی، آپٹیکل یا کیبل پر مبنی ہو، FEC موڈ ہر بچے کے انٹرفیس کی ضرورت ہے، آیا موجودہ فائبر کی گنتی اور کنیکٹر کی قسم کی شناخت کی جائے گی کہ ہر بچے کو کس طرح دوبارہ استعمال کیا جائے گا اور بچے کی نگرانی کیسے کی جائے گی۔ کم-اسپیڈ ماڈیول داخل کرنے سے ہر میزبان موڈ دستیاب نہیں ہوتا ہے۔

QSFP-DD بمقابلہ OSFP

فیصلہ کن عنصر QSFP-DD او ایس ایف پی
QSFP-خاندانی مطابقت مقامی، جہاں میزبان موڈ کو سپورٹ کرتا ہے۔ ایک مقصد کے ذریعے کچھ ماڈیولز کے لیے ممکن ہے-بلٹ اڈاپٹر
ماڈیول کا سائز چھوٹا بڑا
تھرمل ڈیزائن سواری-ہیٹ سنک ڈیزائن؛ مکمل آبادی کی تصدیق کریں۔ مربوط یا سواری ہیٹ سنک؛ MSA اعلی طاقت کے طبقوں کی وضاحت کرتا ہے۔
عام AI-سسٹم کا استعمال ایتھرنیٹ سوئچز، مخلوط-اسپیڈ پلیٹ فارم کئی اعلی-کارکردگی والے GPU اور InfiniBand پلیٹ فارم
فیصلہ کن اصول ترجیح دیں کہ جب اختتامی نقطے مقامی ہوں QSFP-DD اور QSFP کے دوبارہ استعمال کے معاملات ترجیح دیں جب اینڈ پوائنٹ مقامی OSFP ہوں یا آپٹکس کو اس کے پاور لفافے کی ضرورت ہو۔

دو دعووں کو محدود کرنے کی ضرورت ہے۔ سب سے پہلے، "OSFP میں کوئی پسماندہ مطابقت نہیں ہے" بہت وسیع - ہے۔OSFP MSAایک سرشار اڈاپٹر کے ذریعے QSFP مطابقت کو دستاویز کرتا ہے، اور اس کے ماڈیول کی تفصیلات اعلی پاور کلاسز اور مربوط-ہیٹ سنک کے اختیارات کی وضاحت کرتی ہیں جو OSFP کو اس کی تھرمل ساکھ دیتے ہیں۔ دوسرا، یہ شہرت ایک تصریح کی حد ہے، ضمانت نہیں۔ آیا دی گئی چیسیس ہر پنجرے میں 30W-کلاس ماڈیول چلا سکتی ہے یا نہیں اس کا انحصار پنجرے کے ڈیزائن، ہوا کے بہاؤ کی سمت، داخلی درجہ حرارت، پنکھے کی پالیسی، ملحقہ-پورٹ ڈیریٹنگ اور سسٹم وینڈر کی اپنی حدود پر ہے۔

یہی وجہ ہے کہ مکمل-آبادی کی تھرمل توثیق غیر-مذاکرات کے قابل نہیں ہے: ایک ماڈیول جو ایک بندرگاہ سے گزرتا ہے وہ اپنے کیس-درجہ حرارت کی حد سے تجاوز کر سکتا ہے جب تمام 32 یا 64 پورٹس روشن ہوں، اور دوبارہ جب پنکھا یا بجلی کی فراہمی ناکام ہو جائے۔ اپنے حقیقی داخلی درجہ حرارت پر، آبادی والے نظام کی جانچ کریں۔

اگر سرور OSFP ہے اور سوئچ QSFP-DD ہے تو اضطراری کیفیت کو معیاری بنانے کے لیے مزاحمت کریں۔ اڈاپٹر مکینیکل کلیئرنس، ایئر فلو، پاور، سگنل-سالمیت، انوینٹری اور سپورٹ کے تحفظات کو شامل کرتے ہیں۔ ایک کوالیفائیڈ کراس-فارم-فیکٹر کیبل، یا ہر ایک سرے پر PMD اور FEC سے مماثل آپٹیکل لنک، شکلوں کو مماثل بنانے کے لیے ہارڈ ویئر کو تبدیل کرنے سے اکثر صاف ہوتا ہے۔

QSFP-DD and OSFP transceivers compared by size and thermal design

مرحلہ 5: ماپا فاصلہ اور موجودہ فائبر کے لحاظ سے لنک کو منتخب کریں۔

صلاحیت اور اختتامی مقامات نے اب بندرگاہ کی رفتار اور پنجرے کو طے کر لیا ہے۔ فاصلہ اور نصب فائبر پلانٹ باقی سب کچھ ٹھیک کرتا ہے۔ ایک اصول کے بجائے انجینئرنگ کے رہنما خطوط کے طور پر، مختصر ترین تکنیکی طور پر درست لنک عام طور پر کام کرنے کے لیے سب سے آسان ہوتا ہے - لیکن لچک، کیبل کا قطر، سروس ایبلٹی اور بریک آؤٹ کی ضروریات سبھی اس کے خلاف ہیں۔

راستہ عام آپشن کنفرم کرنا ہے۔
انٹرا-ریک، بہت مختصر غیر فعال ڈی اے سی عین مطابق لمبائی اور کیبل کی قسم دونوں سروں پر تعاون یافتہ ہے۔ موڑ رداس؛ وزن
مختصر لیکن غیر فعال تانبے سے آگے اے ای سی / اے سی سی پاور ڈرا، اضافی تاخیر، ایئر فلو بلاکیج، وینڈر کی اہلیت، پورٹ موڈ سپورٹ
مختصر آپٹیکل، مقررہ لمبائی قابل قبول ہے۔ اے او سی سروس ایبلٹی - ایک ناکامی پوری اسمبلی کی جگہ لے لیتی ہے۔
ملٹی موڈ، - قطار سے ملحقہ- قطار میں SR-کلاس متوازی آپٹکس فائبر گریڈ اور پہنچ کی حد؛ ہمارے دیکھیںOM1–OM5 فاصلے کی حدود کی رہنمائی
سنگل-موڈ، ذیلی-کلومیٹر، بریک آؤٹ مطلوب ہے۔ DR-کلاس متوازی آپٹکس MPO سائز، polarity، APC/UPC پولش، بریک آؤٹ میپنگ
سنگل-موڈ، کلومیٹر پیمانہ FR-کلاس ڈوپلیکس یا متوازی، پروڈکٹ کے لحاظ سے کنیکٹر کی قسم پارٹ نمبر کے لحاظ سے مختلف ہوتی ہے۔ فائبر گریڈ - موازنہ کریں۔OS1 اور OS2 سنگل-موڈ فائبر

کنیکٹر کا نفاذ یہاں ٹریپ ہے، کیونکہ یہ آپٹیکل لیبل کے ذریعے مضمر نہیں ہے۔ وینڈرز 800G DR8 پروڈکٹس یا تو ڈوئل MPO-12 یا سنگل MPO-16 کنیکٹیویٹی کے ساتھ، اور 2 کلومیٹر FR-کلاس پروڈکٹس کو متوازی MPO یا ڈوئل ڈوپلیکس LC کے ساتھ بھیجتے ہیں۔ دونوں قسمیں جائز ہیں؛ انہیں بالکل مختلف کیبلنگ کی ضرورت ہے۔ ٹرنک آرڈر کرنے سے پہلے، کنیکٹر کے سوال کو جان بوجھ کر حل کریں - ہماراایم ٹی پی بمقابلہ ایم پی او سلیکشن گائیڈمکینیکل اور قطبی فرق کا احاطہ کرتا ہے، اورایم پی او بریک آؤٹ کیبل گائیڈفین-کی نقشہ سازی کا احاطہ کرتا ہے جس پر بریک آؤٹ پورٹس انحصار کرتے ہیں۔

اسی گفتگو میں دو اور آئٹمز ہیں۔ چینل کے نقصان کو ماڈیول کی تصریحات کے مطابق کنیکٹرز اور اسپلائسز کے ساتھ شمار کیا جانا چاہیے، فرض نہیں کیا گیا - دیکھیںفائبر نیٹ ورکس میں اندراج کا نقصان کیسے جمع ہوتا ہے۔. اور قطاروں کے درمیان سٹرکچرڈ کیبلنگ کو برقرار رکھنا آسان ہوتا ہے جب اسے پہلے سے-ختم کیا جاتا ہے۔MPO/MTP ٹرنک کیبلزفیلڈ-اسمبلڈ رنز کے بجائے دستاویزی پولرٹی طریقہ کے ساتھ۔ جہاں ڈوپلیکس ایف آر لنکس استعمال کیے جاتے ہیں، کنیکٹر اینڈفیس کوالٹی ڈرائیوز نقصان کو براہ راست لوٹاتا ہے۔ دیایل سی کنیکٹر گائیڈاس کا احاطہ کرتا ہے کہ کیا معائنہ کرنا ہے۔

ہر لنک کے لیے، ریکارڈ: ہوسٹ کیج، ہوسٹ لین ریٹ، کنفیگرڈ پورٹ اسپیڈ، PMD یا کیبل کی قسم، کنیکٹر، فائبر کی قسم اور شمار، زیادہ سے زیادہ چینل نقصان، FEC موڈ، بریک آؤٹ میپنگ، ماڈیول ایپلیکیشن کوڈ، CMIS اور فرم ویئر کی ضرورت، زیادہ سے زیادہ طاقت، اور اہلیت کی حیثیت۔ وہ فی- لنک ریکارڈ کسی بھی عام اصول سے زیادہ قابل قدر ہے جس کے بارے میں آپٹک کہاں جاتی ہے۔

AI network interconnect options from DAC cables to duplex optics

RoCEv2 یا InfiniBand: آزادانہ طور پر اس کا فیصلہ کریں۔

پروٹوکول کا انتخاب فیکٹر بنانے کے لیے آرتھوگونل ہے، اور آپریشنل بنیادوں پر کیا جانا چاہیے۔

RoCEv2سوئچنگ پلیٹ فارم پر توثیق شدہ RoCE خصوصیات اور QoS، کنجشن کنٹرول، ٹیلی میٹری اور میزبان کنفیگریشن کے مالک ہونے کے قابل ٹیم کے ساتھ، پہلے سے ہی پیمانے پر ایتھرنیٹ چلانے والی تنظیموں کے لیے موزوں ہے۔ انتباہ یہ ہے کہ "PFC اور ECN کو فعال کریں" تعیناتی کا منصوبہ نہیں ہے۔ NVIDIA کی کمولس لینکس دستاویزات بیان کرتی ہیں۔RoCE ایک پیچیدہ ترتیب کے طور پربفر پولز، ٹریفک کی درجہ بندی، ترجیحی نقشہ سازی، PFC اور ECN کی حدیں اور شیڈولنگ، PFC اور ECN کو ایک ساتھ استعمال کرتے ہوئے ایک نقصان دہ موڈ کے ساتھ اور صرف ECN کا استعمال کرتے ہوئے ایک نقصان دہ موڈ کے ساتھ - اور نوٹ کرتا ہے کہ ایک سوئچ ASIC جنریشن کے لیے تیار کردہ کنفیگریشن دوسرے پر منتقل نہیں ہوتی ہے۔

انفینی بینڈایک توثیق شدہ وینڈر آرکیٹیکچر کے بعد تعیناتیوں کے لیے موزوں ہے، جہاں فیبرک کا مربوط انتظام قابل قدر ہے اور ٹیم کے پاس پہلے سے ہی ٹولنگ اور مہارت موجود ہے۔

آزمائشی ایپلیکیشن کے رویے، آپریشنل مہارت، سپورٹ باؤنڈریز اور کل سسٹم ڈیزائن پر انتخاب کی بنیاد رکھیں۔ مارکیٹنگ کی کارکردگی کا فیصد ٹوپولوجی، سافٹ ویئر ورژن، میسج سائز، کنجشن سٹیٹ اور NIC کنفیگریشن پر منحصر ہوتا ہے، اور شاذ و نادر ہی کسی دوسرے کلسٹر میں منتقل ہوتا ہے۔

توثیق: حجم میں خریدنے سے پہلے کیا جانچنا ہے۔

ایک نمائندہ لیب ٹیسٹ چار شعبوں کا احاطہ کرتا ہے، اور آرڈر - لنک کے استحکام کو پہلے اہمیت دیتا ہے، کیونکہ غیر مستحکم لنک سے کارکردگی کے اعداد بے معنی ہوتے ہیں۔

اٹھائیں-:کولڈ بوٹ، وارم ریبوٹ، ماڈیول داخل کرنا اور ہٹانا، پورٹ کو غیر فعال/فعال کرنا، بریک آؤٹ تخلیق اور ہٹانا، اور دونوں سرے مختلف ترتیبوں میں دوبارہ شروع ہوئے۔سگنل کی سالمیت:پری-FEC BER، درست اور ناقابل اصلاح FEC شمار، لین-سطح کی خرابیاں، PRBS یا BERT جہاں معاونت، آپٹیکل ٹرانسمٹ اور پاور حاصل، ماڈیول کیس ٹمپریچر، اور لنک-تھرمل لوڈ کے تحت فلیپ شمار۔کارکردگی:پائیدار تھرو پٹ، اجتماعی اور پیغام کا سائز جو آپ کی ملازمتیں درحقیقت استعمال کرتی ہیں، بیک وقت ملٹی-ریل ٹریفک، انکاسٹ، اسٹوریج-پلس-کمپیوٹی تنازعہ، اور ایک لمبا سوک۔ناکامی:سنگل لنک، لیف سوئچ، اسپائن لنک، پاور-سائیکل ریکوری، کیبل اور ماڈیول کی تبدیلی، مینیجمنٹ-پاتھ کا نقصان۔

حدیں ریکارڈ کریں، نہ صرف پاس/فیل۔ صحت مند لنک پر ناقابل اصلاح FEC غلطیاں صفر ہونی چاہئیں۔ پری-FEC کی خرابی کی شرحیں ماڈیول کے متعین مارجن کے اندر اچھی طرح بیٹھنی چاہئیں اور وہیں رہیں کیونکہ بھیگنے کے دوران کیس کا درجہ حرارت بڑھ جاتا ہے۔ ایک لنک جو 48 گھنٹے کے سوک میں اوپر کی طرف رجحان کرتا ہے ایک ایسا لنک ہے جو پیداوار میں ناکام ہو جائے گا۔

پھر ناکامی کے ڈومین کے ذریعے رول آؤٹ کریں - ایک وقت میں ایک ریک، ایک ریل، ایک پتی کا جوڑا یا ایک توسیع پذیر یونٹ - اور لنک کی حالت کی تبدیلیوں، FEC درست اور ناقابل اصلاح شماروں، ماڈیول درجہ حرارت، آپٹیکل پاور، PFC توقف کی سرگرمی، ECN مارکنگ، قطار پر قبضہ اور کام کا وقت-۔ ایک لنک جو ابھی تک موجود ہے اب بھی تنزلی کا باعث ہو سکتا ہے۔ بڑھتی ہوئی درستی-غلطی اور درجہ حرارت کے رجحانات آپ کو ملنے والی ابتدائی وارننگ ہیں۔

تین ڈیزائن کے منظرنامے۔

موجودہ 400G ایتھرنیٹ فیبرک کو پھیلانا۔قابل QSFP-DD 400G سوئچز اور سٹرکچرڈ کیبلنگ پہلے سے ہی موجود ہے۔ نئے نوڈس 400G کو بے نقاب کرتے ہیں۔ سرور کو-400G پر روابط کا سامنا رکھیں، بلاکنگ تناسب کو جانچنے کے لیے اوپر اپلنک کیلکولیشن چلائیں، اور 800G کو صرف اس جگہ متعارف کروائیں جہاں یہ اسپائن پورٹ کی کارکردگی خریدتا ہے۔ کوالیفائیڈ آپٹکس اور فائبر کو دوبارہ استعمال کریں جہاں نقصان کا بجٹ اجازت دیتا ہے، اور خریداری سے پہلے ہر مخلوط-اسپیڈ بریک آؤٹ کنفیگریشن کی توثیق کریں۔ سوئچ ریڈکس اس فیصلے کو چلاتا ہے، GPU شمار نہیں۔

ایک 800G-مقامی کلسٹر بنانا۔سرور مقامی 800G کو بے نقاب کرتے ہیں۔ سرور وینڈر کی توثیق شدہ ٹوپولوجی کی پیروی کریں، مماثل مقامی کیج کے ساتھ سوئچز کا انتخاب کریں، اپنے داخلی درجہ حرارت پر مکمل-آبادی کی تھرمل صلاحیت کی تصدیق کریں، ناپے ہوئے راستے کی لمبائی سے آپس میں جڑنے کا انتخاب کریں، اور ارتکاب کرنے سے پہلے ہر بریک آؤٹ اور FEC کے امتزاج کی توثیق کریں۔ یہاں 800G خود اختتامی نقطہ کے ذریعہ جائز ہے۔

دو شکل کے عوامل کے ساتھ رہنا۔سرورز OSFP ہیں؛ ایتھرنیٹ سوئچنگ اسٹیٹ کا حصہ QSFP-DD ہے۔ کوالیفائیڈ کراس-فارم-فیکٹر DAC یا AOC اسمبلیوں کا موازنہ کریں، ہر سرے پر مختلف کیجز کے ساتھ آپٹیکل انٹرآپریبلٹی، منظور شدہ اڈاپٹر، پاور اور تھرمل مضمرات، اضافی انوینٹری اور سپورٹ اونرشپ کا موازنہ کریں۔ ماڈیول کی شکل کو معیاری بنانے کے لیے خالصتاً ایک سائیڈ کو تبدیل کرنا دستاویزی مخلوط ماحول کو چلانے سے زیادہ مہنگا ہوتا ہے۔

سات غلطیاں جو دوبارہ کام کا سبب بنتی ہیں۔

  • GPU شمار سے شروع ہو رہا ہے۔یہ NIC کاؤنٹ، ریل میپنگ، پورٹ ریٹ یا اوور سبسکرپشن کی وضاحت نہیں کرتا ہے۔ سرور انٹرفیس سے حساب لگائیں۔
  • فرض کریں 800G ہر کام کے لیے تیز تر ہے۔یہ صرف اس جگہ مدد کرتا ہے جہاں اختتامی نقطہ، ٹوپولوجی اور ٹریفک پیٹرن اسے استعمال کر سکتے ہیں۔ ان اجتماعات کو بینچ مارک کریں جنہیں آپ اصل میں چلاتے ہیں۔
  • QSFP-DD کو پروٹوکول کے طور پر علاج کرنا۔یہ ایک پنجرہ ہے۔ کیج، پروٹوکول، الیکٹریکل موڈ، آپٹکس اور ایف ای سی کی الگ الگ تصدیق کریں۔
  • اسٹوریج اور مینجمنٹ فیبرکس کو نظر انداز کرنا۔ایک تیز کمپیوٹ فیبرک سست چیک پوائنٹ کی ترسیل یا ناقابل رسائی BMC کی تلافی نہیں کر سکتا۔
  • آپٹیکل لیبل کو کیبلنگ اسپیک کے بطور پڑھنا۔DR8 اور FR4 کنیکٹر، فائبر کاؤنٹ یا بریک آؤٹ ڈیزائن کی وضاحت نہیں کرتے ہیں۔ عین مطابق حصہ نمبر اور کیبلنگ ڈایاگرام استعمال کریں۔
  • ایک پورٹ کی جانچ ہو رہی ہے۔مکمل-آبادی کا ہوا کا بہاؤ اور داخلی درجہ حرارت اصل امتحان ہے۔
  • بغیر کسی طریقہ کے کارکردگی کے فیصد کا حوالہ دینا۔ٹوپولوجی اور ٹیسٹ کا طریقہ شائع کریں، یا نمبر چھوڑ دیں۔

ایک TCO ماڈل بنانا جس کا آپ دفاع کر سکتے ہیں۔

سرمائے کی لاگت NICs یا DPUs، پتی اور ریڑھ کی ہڈی کے سوئچز، ٹرانسیور، DACs، AECs اور AOCs، فائبر ٹرنک اور پیچنگ، ریک اور کیبل مینجمنٹ، ٹیسٹ کا سامان اور اسپیئرز کا احاطہ کرتی ہے۔ آپریشنل اخراجات ماڈیول اور سوئچ پاور، کولنگ، مانیٹرنگ، فرم ویئر کی اہلیت، تربیت، متبادل لیبر اور وینڈر سپورٹ کا احاطہ کرتے ہیں۔ خطرے کے اخراجات - جنہیں عام طور پر چھوڑ دیا جاتا ہے - مطابقت کی ناکامیاں، تعیناتی میں تاخیر، تھرمل ڈیریٹنگ، لنک کی عدم استحکام، دوبارہ-کیبلنگ، تربیتی ملازمتوں میں رکاوٹ اور بحالی کا وقت۔

پسماندہ مطابقت حقیقی طور پر لاگت کو کم کرتی ہے، لیکن بچت کا حساب مخصوص آلات سے کرنا پڑتا ہے جسے مطلوبہ رفتار اور موڈ پر دوبارہ استعمال کیا جا سکتا ہے۔ صرف فارم-فیکٹر کی مطابقت اس بات کی ضمانت نہیں دیتی کہ موجودہ ASIC، PCB، کیج، کولنگ سسٹم، فرم ویئر یا پاور بجٹ اگلی نسل کو چلا سکتا ہے۔ مستقبل کی رفتار کی منتقلی کو پلیٹ فارم کے سوال کے طور پر سمجھیں، نہ کہ کنیکٹر کے سوال کے طور پر۔

اکثر پوچھے گئے سوالات

کیا QSFP-DD AI ٹریننگ کلسٹرز کے لیے موزوں ہے؟

ہاں، جب یہ منتخب کردہ سوئچ یا اینڈ پوائنٹ کا مقامی ہے، مکمل پورٹ آبادی پر تھرمل ضروریات کو پورا کرتا ہے، اور مطلوبہ پورٹ موڈ اور آپٹیکل انٹرفیس کو سپورٹ کرتا ہے۔ صرف برائے نام ڈیٹا کی شرح اسے منتخب کرنے کی کوئی وجہ نہیں ہے۔

کتنے GPUs کو 800G نیٹ ورکنگ کی ضرورت ہے؟

کوئی GPU حد نہیں ہے۔ نیٹ ورک پورٹس فی سرور، پورٹ اسپیڈ، ریل میپنگ، ٹوپولوجی، اوور سبسکرپشن ٹارگٹ اور ایپلیکیشن ٹریفک - اوپر مرحلہ 2 میں طریقہ سے حساب لگائیں۔

کیا QSFP-DD OSFP سے بہتر ہے؟

نہ ہی عالمی طور پر بہتر ہے۔ QSFP-DD مقامی QSFP-خاندانی مطابقت اور ایک چھوٹا نقشہ پیش کرتا ہے۔ OSFP کی تصریح اعلیٰ پاور کلاسز اور مربوط-ہیٹ سنک آپشنز کی وضاحت کرتی ہے، اور یہ کئی اعلی-کارکردگی والے AI پلیٹ فارمز کا مقامی ہے۔ اختتامی نقطہ فیصلہ کرتا ہے۔

کیا OSFP پورٹ QSFP ماڈیول استعمال کر سکتا ہے؟

کچھ OSFP نفاذ منظور شدہ اڈاپٹر کے ذریعے QSFP ماڈیولز کی حمایت کرتے ہیں، لیکن مطابقت، پاور، پورٹ موڈ اور وینڈر سپورٹ سبھی کو مخصوص پلیٹ فارم کے لیے تصدیق کرنے کی ضرورت ہے۔

کیا QSFP-DD کو ایتھرنیٹ اور انفینی بینڈ دونوں کے لیے استعمال کیا جا سکتا ہے؟

فارم فیکٹر پروٹوکول کا تعین نہیں کرتا ہے۔ میزبان پورٹ، NIC، سوئچ، فرم ویئر، کیبل اور ٹرانسیور سبھی کو مطلوبہ آپریٹنگ موڈ کو سپورٹ کرنا چاہیے۔

مجھے کون سا 800G ٹرانسیور استعمال کرنا چاہئے؟

ناپے گئے فاصلے، اختتامی نقطہ کیج، مطلوبہ بریک آؤٹ، فائبر کی قسم، کنیکٹر، لین ریٹ، FEC موڈ، پاور کلاس اور وینڈر کی اہلیت سے شروع کریں۔ آپٹیکل انٹرفیس کا نام اپنے طور پر کافی نہیں ہے۔

کیا QSFP-DD پسماندہ مطابقت ایک آسان 1.6T اپ گریڈ کی ضمانت دیتا ہے؟

نہیں، میزبان پورٹ ماڈیول کو میکانکی طور پر قبول کر سکتا ہے جبکہ ASIC، PCB، کیج، کولنگ یا پاور بجٹ نئے لین ریٹ کی حمایت نہیں کر سکتا۔ پلیٹ فارم کی سطح پر تصدیق کریں۔

اس سے پہلے کہ آپ پرچیز آرڈر پر دستخط کریں۔

ہر قسم کے لنک کے دونوں سروں پر اینڈ پوائنٹ کیج کی تصدیق کریں۔ فی نوڈ فیبرک پورٹس- کمپیوٹ کی تعداد اور رفتار؛ ریل میپنگ اور ٹارگٹ اوور سبسکرپشن تناسب؛ پتی اور ریڑھ کی ہڈی کی بندرگاہوں کی گنتی بشمول فالتو پن؛ چاروں کپڑوں کی ضروریات؛ آپریٹنگ موڈ اور، RoCE کے لیے، مکمل بھیڑ-کنٹرول ڈیزائن؛ ماپا کیبل کا راستہ اور نتیجے میں آپس میں جڑنے کا انتخاب؛ کنیکٹر، قطبیت اور نقصان کا بجٹ؛ FEC اور بریک آؤٹ موڈ؛ مکمل-آبادی تھرمل حدود کے خلاف ماڈیول پاور؛ فرم ویئر اور CMIS مطابقت؛ وینڈر کی اہلیت کی حیثیت؛ اور بی ای آر، کارکردگی، بھیڑ، ناکامی اور سوک ٹیسٹنگ کے لیب کے نتائج۔

QSFP-DD قابل توسیع 400G یا 800G AI فیبرک کو اچھی طرح سے سپورٹ کرتا ہے۔ یہ اب بھی ڈیزائن کا صرف ایک جزو ہے۔ اختتامی پوائنٹس اور ٹریفک ماڈل کے ساتھ شروع کریں، ٹوپولوجی کا حساب لگائیں، ناپے گئے فاصلے سے فزیکل لنک کا انتخاب کریں، اور تربیتی کام کرنے سے پہلے اسمبل شدہ سسٹم کی توثیق کریں۔

طریقہ کار اور دائرہ کار

یہ گائیڈ تین قسم کے ماخذ پر مبنی ہے، اور انہیں جان بوجھ کر اوپر کے متن میں الگ رکھا گیا ہے۔معیارات اور MSA دستاویزات- IEEE 802.3df، QSFP-DD اور OSFP MSA ہارڈویئر کی وضاحتیں، اور OIF CMIS نفاذ کے معاہدے - فارم کے عوامل، سگنلنگ اور انتظامی رویے کی وضاحت کرتے ہیں۔وینڈر دستاویزات- NVIDIA DGX سسٹم گائیڈز، DGX SuperPOD ریفرنس آرکیٹیکچرز، ConnectX-8 پورٹ کنفیگریشن نوٹس اور Cumulus Linux RoCE دستاویزات - کو وینڈر کے لیے مخصوص مثال کے طور پر پیش کیا گیا ہے، نہ کہ عالمگیر رویے کے طور پر؛ دوسرے پلیٹ فارم مختلف ہیں۔انجینئرنگ کے رہنما خطوط- ترتیب دینے کا مشورہ، چھوٹے لنکس کی ترجیح، توثیق کی حدیں - تعیناتی کی مشق سے تیار کردہ آپریشنل سفارشات ہیں، اور ان پر بطور تصریح پیش کرنے کے بجائے اس طرح کا لیبل لگایا گیا ہے۔

 

انکوائری بھیجنے