การเดินสาย IB ตามรุ่น: DAC, AOC, ทรานซีฟเวอร์ และสายแยก
คลัสเตอร์ InfiniBand เดินสายตามคลาสระยะส่ง: ทองแดงในจุดที่สวิตช์อยู่ในระยะเอื้อมถึง ทองแดงแบบแอ็กทีฟสำหรับระยะที่ไกลกว่านั้นเล็กน้อย สายเชิงแสงแบบแอ็กทีฟไปจนถึงแถวตู้แร็กถัดไป และทรานซีฟเวอร์กับใยแก้วนำแสงแบบมีโครงสร้างสำหรับส่วนที่เหลือ แต่ละรุ่นขยับขอบเขตเหล่านี้เข้ามาใกล้ขึ้นและเปลี่ยนคอนเนกเตอร์ ส่วน NDR เพิ่มโมดูลแบบสองพอร์ตและสายแยกเข้ามา ซึ่งสร้างความสับสนให้ผู้ติดตั้งมือใหม่ หน้านี้คือข้อมูลอ้างอิงด้านการเดินสาย — ระยะส่ง คอนเนกเตอร์ การกำหนดค่าสายแยก กฎเชิงกลและข้อมูลระบุตัวตน
คอนเนกเตอร์แยกตามรุ่น
| รุ่น | อัตราต่อเลน | พอร์ต 4x | คอนเนกเตอร์ | หมายเหตุ |
|---|---|---|---|---|
| SDR / DDR | 2.5 / 5 Gb/s | 10 / 20 Gb/s | CX4 (ทองแดง), ภายหลังเป็น QSFP | รุ่นเก่า |
| QDR | 10 Gb/s | 40 Gb/s | QSFP | การจัดการแบบ SFF-8436 |
| FDR | 14.06 Gb/s | 56 Gb/s | QSFP+ (เรตสำหรับ FDR) | 64B/66B; FEC เป็นทางเลือก |
| EDR | 25.78 Gb/s | 100 Gb/s | QSFP28 | ออปติกส์เดียวกับ Ethernet 100G แต่การเข้ารหัสต่างกัน |
| HDR | 53.1 Gb/s PAM4 | 200 Gb/s | QSFP56 | ตัวแยกสัญญาณ 1:2 ไปเป็น HDR100 |
| NDR | 106 Gb/s PAM4 | 400 Gb/s | OSFP สองพอร์ต (2 × 400G ต่อโมดูล) บนสวิตช์; OSFP หรือ QSFP112 บน HCA | 800G ต่อเคจสวิตช์ |
| XDR | 212 Gb/s PAM4 | 800 Gb/s | OSFP / OSFP-XD | 1.6T ต่อเคจสวิตช์ |
รายละเอียดฟอร์มแฟกเตอร์: QSFP28, QSFP56, OSFP, QSFP112
คลาสระยะส่ง
| สื่อนำสัญญาณ | QDR | FDR | EDR | HDR | NDR | หมายเหตุ |
|---|---|---|---|---|---|---|
| DAC แบบพาสซีฟ | ≤ 7 m | ≤ 3–5 m | ≤ 3 m | ≤ 2 m | ≤ 1.5–2 m | ระยะส่งลดลงทุกรุ่น; ใช้เกจหนาขึ้นสำหรับระยะที่ยาวขึ้น |
| ทองแดงแบบแอ็กทีฟ (ACC/AEC) | — | ≤ 5 m | ≤ 5 m | ≤ 3–4 m | ≤ 3 m | หัวปลั๊กที่มีไฟเลี้ยง; AEC พร้อมรีไทเมอร์สำหรับ NDR |
| AOC | ≤ 100 m (บางรุ่น 300) | ≤ 100 m | ≤ 100 m | ≤ 100 m | โดยทั่วไป ≤ 30–50 m | VCSEL 850 nm, ริบบอน MMF ภายใน |
| ทรานซีฟเวอร์กลุ่ม SR (MMF) | ≤ 300 m | ≤ 100–150 m | ≤ 70–100 m | ≤ 70–100 m | ≤ 50 m (VR) / 100 m (SR) | OM3/OM4, MPO |
| ทรานซีฟเวอร์กลุ่ม DR/FR (SMF) | — | — | 500 m – 2 km (PSM4, CWDM4) | 500 m – 2 km | 500 m (DR4) / 2 km (FR4) | MPO-12 APC (DR4), LC ดูเพล็กซ์ (FR4) |
สิ่งที่อยู่ภายในสายแต่ละชนิด: ส่วนประกอบภายในสาย
สายแบบสองพอร์ตและสายแยกของ NDR
เคจสวิตช์ของ NDR หนึ่งช่องบรรจุโมดูล OSFP สองพอร์ต หนึ่งตัว = พอร์ต 400G อิสระสองพอร์ตอยู่หลังรีเซปตาเคิล MPO-12/APC สองชุด (หรือ LC ดูเพล็กซ์สองชุด) ตัวเลือกการเดินสายจากโมดูลเดียว:
| การกำหนดค่า | สาย | ปลายไกล |
|---|---|---|
| 2 × 400G ตรง | ทรังก์ MPO-12 APC สองเส้น | พอร์ต HCA แบบ NDR 400G สองพอร์ต (OSFP หรือ QSFP112) หรือสวิตช์อีกตัว |
| สายแยก 1:2 (800G → 2 × 400G) | สาย Y ปลายหนึ่งเป็น OSFP อีกสองปลายเป็น OSFP/QSFP112 | HCA สองตัว — การเชื่อมต่อเซิร์ฟเวอร์แบบมาตรฐาน |
| สายแยก 1:4 (800G → 4 × 200G) | ปลายหนึ่งเป็น OSFP อีกสี่ปลายเป็น QSFP56/QSFP112 | HCA ความเร็วระดับ HDR (NDR200) |
| AOC สองพอร์ต | ปลายหนึ่งเป็น OSFP สองพอร์ต อีกสองปลายเป็น OSFP/QSFP112 | สูงสุด ~30–50 m |
| DAC สองพอร์ต | ปลายหนึ่งเป็น OSFP อีกสองปลาย | ≤ 1.5–2 m; หนัก — ใช้ภายในแร็กเท่านั้น |
แต่ละขาของสายแยกคือลิงก์แยกที่มีการเจรจาของตัวเอง; สวิตช์มองเห็นเป็นสองพอร์ต (หรือสี่พอร์ต) การเขียนโค้ดข้อมูลระบุตัวตนต้องอธิบายทั้งชุดประกอบให้ตรงกันในทุกปลาย (ส่วนประกอบภายในสาย)
OSFP แบบมีครีบเทียบกับแบบแบน
- OSFP หลังมีครีบ — มีฮีตซิงก์ในตัว สำหรับเคจสวิตช์ที่มีการไหลของอากาศเปิดอยู่เหนือโมดูล ใส่ในเคจแบบแบนไม่ได้
- OSFP หลังแบน — สำหรับ HCA และเคจที่มีฮีตซิงก์แบบขี่ทับอยู่ ใส่ได้ทั้งสองแบบของเคจ แต่ในเคจสวิตช์แบบเปิดอาจร้อนได้
- QSFP112 บน HCA ใช้อินเทอร์เฟซไฟฟ้าของ NDR ร่วมกันที่ 4 × 106 Gb/s ในฟุตพรินต์ของ QSFP; พอร์ต HCA แบบ QSFP112 จับคู่กับสายแยกจากสวิตช์ OSFP
ผลกระทบด้านความร้อน: กำลังไฟและความร้อน
กฎเชิงกล
| กฎ | เหตุผล |
|---|---|
| รักษารัศมีการโค้งงอ (DAC ≥ 10 เท่าของเส้นผ่านศูนย์กลาง; AOC/ใยแก้วนำแสง ≥ 30 mm) | twinax ที่ถูกบีบ → เลนเกิดข้อผิดพลาด; ใยแก้วนำแสงที่โค้งงอ → Rx สูญเสีย |
| รองรับน้ำหนักสาย — DAC แบบสองพอร์ตมีน้ำหนักมาก | ดึงเคจ, สัมผัสไม่ต่อเนื่อง, แผงวงจร paddle card แตกร้าว |
| แบบมีพิน/ไม่มีพิน และ APC บน MPO ทุกตัว | เบรกเอาต์และการเดินสาย MPO |
| ทำความสะอาดและตรวจสอบ MPO ทุกตัวก่อนเสียบ | อนุภาคเดียวทำให้เลนสูญเสีย 1–3 dB |
| ใส่ฝาครอบกันฝุ่นไว้ที่เคจและคอนเนกเตอร์ที่ไม่ได้ใช้งาน | การปนเปื้อนคือสาเหตุอันดับหนึ่งของความล้มเหลวของเลน |
| เดินสายให้ห่างจากไอเสียร้อน | เอนจินของ AOC และปลั๊กของ AEC เสื่อมสภาพตามอุณหภูมิ |
ข้อมูลระบุตัวตนและนโยบายของผู้ผลิต
สวิตช์และ HCA ของ InfiniBand จากผู้ผลิตรายหลักตรวจสอบสายและทรานซีฟเวอร์เทียบกับรายการที่รองรับ และอ่านข้อมูลสาย (ผู้ผลิต, PN, SN, ความยาว, เทคโนโลยี) เข้าสู่ตัวจัดการฟาบริก สายที่ไม่ผ่านการตรวจสอบอาจลิงก์ที่ความเร็วลดลงหรือถูกตั้งค่าสถานะ; สายที่เขียนโค้ดความยาวหรือคลาสอัตราส่งผิดอาจเจรจาล้มเหลว ไบต์ข้อมูลระบุตัวตนเป็นฟิลด์มาตรฐานของ SFF-8636/CMIS บวกกับการประกาศอัตราส่งของ InfiniBand (รหัสความสอดคล้อง, การล็อกผู้ผลิต)
แนวปฏิบัติด้านคลังพัสดุ
- ติดป้ายกำกับทั้งสองปลายด้วยข้อมูลลิงก์ (สวิตช์/พอร์ต ↔ โฮสต์/พอร์ต); สายแยกต้องติดป้ายแยกตามขา
- บันทึกผู้ผลิต, PN, SN และความยาวต่อสายไว้ในตัวจัดการฟาบริกหรือ CMDB; ดึงข้อมูลจาก
mlxcablesหรือจาก CodingBox ตอนตรวจรับสินค้าเข้า - เก็บอะไหล่สำรองแยกตามคลาสระยะส่งและคอนเนกเตอร์; รุ่นสองพอร์ตและรุ่นแยกของ NDR ใช้แทนกันกับ 400G ธรรมดาไม่ได้
- เบิร์นอินออปติกส์ใหม่ก่อนนำไปใช้งานจริง (ความน่าเชื่อถือของลิงก์และการตรวจติดตาม)
ใน CodingBox
ปลายสายและทรานซีฟเวอร์อ่านได้เหมือนโมดูลทั่วไป: ข้อมูลระบุตัวตนพร้อมความยาวสาย เทคโนโลยี และคลาสอัตราส่ง, DDM ต่อเลนสำหรับ AOC และออปติกส์, สถานะ CMIS สำหรับโมดูล NDR (Check transceiver, DDM) การอ่านทุกขาของสายแยกก่อนติดตั้งช่วยจับปลายที่ไม่ตรงกัน ซึ่งไม่เช่นนั้นจะลิงก์ที่ความเร็วผิดไป
วิธีที่ HCA และไดรเวอร์ NIC ตรวจสอบสายเหล่านี้ และเครื่องมือที่แสดงผลลัพธ์จากฝั่งโฮสต์: ความเข้ากันได้ของทรานซีฟเวอร์บน NIC, เครื่องมือและการวินิจฉัยของ NIC