NVIDIA Mellanox MMAIB00-B150D 데이터센터 광 트랜시버 기술 백서

NVIDIA Mellanox MMAIB00-B150D 데이터센터 광 트랜시버 기술 백서: 랙 내부 및 건물 간 링크를 위한 대역폭과 거리 균형 맞추기

이 기술 백서는 네트워크 아키텍트, 사전 판매 엔지니어 및 운영 관리자를 대상으로 합니다. 이 백서는 NVIDIA Mellanox MMAIB00-B150D 400G 멀티모드 광 트랜시버에 중점을 두고 있으며, 랙 내부 및 건물 간 데이터센터 링크 전반에 걸쳐 고대역폭과 확장된 도달 범위를 균형 있게 맞추는 지속적인 과제를 해결하는 포괄적인 솔루션 아키텍처를 자세히 설명합니다. 이 문서는 실제 대규모 구현에서 파생된 설계 원칙, 핵심 기술, 배포 전략 및 운영 모범 사례를 다룹니다.

1. 프로젝트 배경 및 요구 사항 분석

현대의 AI 학습 클러스터 및 고성능 컴퓨팅(HPC) 환경은 두 가지 뚜렷한 트래픽 패턴으로 특징지어집니다. 단일 랙 또는 인접 랙 내의 동서 트래픽은 초저지연 시간과 막대한 처리량을 요구하며, 건물 또는 층 간의 더 긴 광섬유 경로를 자주 통과하는 남북 또는 스파인-슈퍼 스파인 트래픽입니다. 역사적으로 이 두 가지 사용 사례는 별도의 광 트랜시버 제품군(전자는 단거리 멀티모드, 후자는 장거리 단일 모드)을 필요로 하여 재고 복잡성 증가, 비용 증가 및 운영 마찰을 초래했습니다.

네트워크 아키텍트가 식별한 주요 요구 사항은 다음과 같습니다.

• 통합 광학 SKU: 2미터에서 150미터까지 기존 멀티모드 광섬유를 통해 거리를 커버할 수 있는 단일 트랜시버 유형으로, 여러 부품 번호의 필요성을 없앱니다.
• 전력 효율성: 9W 미만/포트로 고밀도 400G 스위치를 열 예산 초과 없이 지원합니다.
• 신호 무결성: 레거시 OM3/OM4 케이블링의 모달 분산 및 삽입 손실을 보상하기 위한 강력한 DSP 기반 이퀄라이제이션입니다.
• 상호 운용성: NVIDIA Spectrum, Quantum 및 타사 400G 스위치 플랫폼과의 원활한 호환성입니다.
• 비용 예측 가능성: 투명한 총 소유 비용(TCO) 모델을 통해 경쟁력 있는 포트당 경제성입니다.

MMAIB00-B150D가 선택되었으며, 예비 MMAIB00-B150D 데이터시트는 OM4에서 100미터, OM5에서 150미터 도달 범위를 지원함을 확인했습니다. 이는 단일 모드 광학 또는 액티브 케이블에 의존하지 않고 캠퍼스 규모 링크의 95% 이상에 충분합니다.

2. 전체 네트워크/시스템 아키텍처 설계

제안된 아키텍처는 컴퓨팅 클러스터에 대해 2계층 리프-스파인 토폴로지를 채택하고, 건물 간 연결을 위한 추가 슈퍼 스파인 계층을 사용합니다. 모든 400G 업링크는 NVIDIA Mellanox MMAIB00-B150D 광 트랜시버를 사용하여 구현되어 전체 데이터센터 캠퍼스에 걸쳐 동종 광학 계층을 생성합니다.

이 통합 아키텍처는 광학 SKU 수를 6개에서 1개로 줄이고, 케이블 플랜트 문서를 단순화하며, 재고에 있는 모든 예비 MMAIB00-B150D 판매용를 호환성 확인 없이 모든 랙 또는 건물에 배포할 수 있도록 합니다.

3. NVIDIA Mellanox MMAIB00-B150D의 역할 및 주요 기능

NVIDIA Mellanox MMAIB00-B150D입니다. 주요 기술 차별점은 다음과 같습니다.

• QSFP-DD 폼 팩터: 1U 스위치당 36개의 포트를 지원하여 전면 패널 밀도를 극대화하면서 적절한 공기 흐름을 유지합니다.
• 8x50G PAM4 변조: 성숙한 50G 전기 인터페이스를 사용하여 400Gb/s의 총 대역폭을 제공하여 성능과 신호 무결성을 균형 있게 맞춥니다.
• 통합 DSP 엔진: 채널 장애(크로마 분산 및 커넥터 반사 포함)를 능동적으로 보상하는 적응형 이퀄라이제이션 및 클럭-데이터 복구(CDR)를 제공합니다. 이는 레거시 멀티모드 광섬유 플랜트에서 도달 범위를 확장하는 데 중요합니다.
• 디지털 진단 모니터링(DDM): I²C 인터페이스를 통해 온도, 공급 전압, TX/RX 전력 및 바이어스 전류와 같은 실시간 매개변수를 보고하여 링크 상태를 사전에 모니터링할 수 있습니다.
• 광범위한 상호 운용성: MMAIB00-B150D 호환 광학 장치는 NVIDIA Spectrum-4, Quantum-2 및 주요 타사 스위치(Cisco, Arista, Juniper)와 표준 400G-SR8 광 인터페이스 사양을 사용하여 검증되었습니다.

공식 MMAIB00-B150D 사양에 따르면, 모듈은 0°C ~ 70°C의 케이스 온도 범위 내에서 작동하며 최대 부하에서 일반적인 8.5W를 소비합니다. 이는 9W 임계값보다 훨씬 낮아 고밀도 섀시에서 액티브 냉각 또는 정격 강하가 필요할 수 있습니다.

4. 배포 및 확장 권장 사항 (일반 토폴로지 포함)

새로운 그린필드 배포의 경우 다음 토폴로지가 권장됩니다.

• 랙 수준: 각 컴퓨팅 랙에는 400G ToR 스위치 한 쌍이 장착됩니다. 각 서버는 400G OSFP/QSFP-DD NIC를 통해 연결되며, 리프 계층으로의 ToR 업링크는 OM5 패치 코드(2~5미터)를 통해 MMAIB00-B150D 트랜시버를 사용합니다.
• 행/홀 수준: 리프 스위치는 행 또는 홀당 배포되어 32~64개의 ToR 업링크를 집계합니다. OM4 트렁크 케이블(최대 80미터)을 통한 리프-스파인 연결은 동일한 MMAIB00-B150D 광 트랜시버를 사용하며, 레거시 광섬유의 모달 분산을 극복하기 위해 DSP 이퀄라이제이션의 이점을 누립니다.
• 캠퍼스/건물 수준: 스파인 스위치는 OM5 링크(최대 150미터)를 사용하여 슈퍼 스파인 계층을 통해 상호 연결됩니다. OM5를 사용할 수 없는 경우 OM4 링크(최대 100미터)가 완전히 지원됩니다. 이는 단일 모드 트랜시버 또는 파장 분할 다중화(WDM) 장비 없이 건물 간 시나리오의 90% 이상을 커버합니다.

확장의 경우, 운영자는 새 랙을 추가하고 동일한 광학 SKU를 사용하여 기존 리프/스파인 스위치에 연결할 수 있습니다. MMAIB00-B150D 광 트랜시버 솔루션은 핫스왑을 지원하여 서비스 중단 없이 용량 업그레이드를 할 수 있습니다. 향후 800G 마이그레이션을 계획할 때, 기존 MMF 인프라는 그대로 재사용할 수 있습니다. 듀얼 400G 링크는 링크 집계(LAG) 또는 로드 밸런싱 프로토콜을 통해 결합될 수 있습니다.

MMAIB00-B150D 가격을 대체 솔루션과 비교할 때, 통합 SKU 접근 방식은 예비 부품 재고를 80~90% 줄이고, 교육 오버헤드를 낮추며, 특정 거리에서 잘못된 광학 유형을 배포할 위험을 제거한다는 점을 고려하십시오. 이는 5년 수명 주기 동안 총 소유 비용을 크게 개선하는 요소입니다.

5. 운영 모니터링, 문제 해결 및 최적화

MMAIB00-B150D Mellanox 광 데이터센터 네트워킹 환경의 효과적인 관리는 사전 모니터링과 체계적인 문제 해결 절차의 조합이 필요합니다.

모니터링 모범 사례:

• SNMP 또는 스트리밍 텔레메트리(예: gNMI)를 통해 DDM 폴링을 활성화하여 광 전력, 온도 및 전압 추세를 추적합니다. TX 전력 편차가 ±2dB를 초과하거나 온도가 65°C를 초과하는 경우 경고를 설정합니다.
• 전방 오류 수정(FEC) 수정 비트 수를 모니터링합니다. 갑작스러운 증가는 광섬유 성능 저하, 커넥터 오염 또는 과도한 굽힘 손실을 나타낼 수 있습니다.
• 모듈의 내장 루프백 기능(스위치 플랫폼에서 지원하는 경우)을 사용하여 유지 보수 기간 동안 온디맨드 링크 유효성 검사를 수행합니다.

일반적인 문제 해결:

• 장거리 링크에서 링크 다운 또는 높은 BER: 광섬유 유형이 예상 도달 범위와 일치하는지 확인합니다. OM4는 100m로 제한되며, OM5는 150m까지 확장됩니다. 모든 LC 커넥터를 엔드페이스 검사 스코프로 청소합니다. 400G에서는 미세한 오염도 상당한 신호 손실을 유발할 수 있습니다.
• 온도 관련 성능 저하: 적절한 전면-후면 공기 흐름을 보장하고, 충분한 간격 없이 고출력 광학 장치(예: ZR 모듈) 옆에 모듈이 설치되지 않도록 합니다.
• 상호 운용성 문제: 스위치 펌웨어가 최신 개정판 MMAIB00-B150D 호환 광학 목록을 지원하는지 확인합니다. NVIDIA는 분기별로 업데이트되는 인증된 호환성 매트릭스를 유지 관리합니다.

최적화 팁:

• 최대 도달 범위(OM4에서 100m)에 근접한 링크의 경우, 링크 마진을 복원하기 위해 계획된 업그레이드 중에 더 높은 등급의 OM5 광섬유를 사용하는 것을 고려하십시오.
• 스위치 공급업체의 권장 사항에 따라 FEC 설정을 조정하여(예: RS(544,514) 대 RS(272,258)) 지연 시간과 오류 수정 기능을 균형 있게 맞춥니다.
• OTDR 또는 광 파워 미터를 사용하여 케이블 플랜트 인증을 정기적으로 수행하여 프로덕션 트래픽에 영향을 미치기 전에 미세 굽힘 또는 스플라이스 손실을 식별합니다.

전체 레지스터 맵, 진단 임계값 정의 및 권장 작동 조건에 대한 자세한 내용은 MMAIB00-B150D 데이터시트를 참조하십시오.

6. 요약 및 가치 평가

NVIDIA Mellanox MMAIB00-B150D는 현대 AI/HPC 워크로드의 대역폭 및 도달 범위 요구 사항을 충족하면서 광학 인프라를 합리화하려는 데이터센터 운영자에게 강력한 가치 제안을 제공합니다. 단일 고성능 QSFP-DD 트랜시버로 단거리 및 중거리 링크를 통합함으로써 조직은 다음을 달성할 수 있습니다.

• 운영 단순성: 랙 내부 패치 코드부터 캠퍼스 건물 간 트렁크까지 모든 400G 링크에 대한 단일 SKU로 재고 비용을 절감하고 인적 오류를 줄입니다.
• 투자 보호: 레거시 OM4 광섬유 플랜트는 완전히 재사용할 수 있으며, OM5는 향후 도달 범위 확장을 위한 명확한 업그레이드 경로를 제공합니다.
• 확장성: 동일한 광학 솔루션이 현재 400G 배포와 향후 800G 결합 구성을 모두 지원하여 자산 낭비를 방지합니다.
• 입증된 상호 운용성: 주요 스위치 플랫폼 전반에 걸쳐 광범위하게 검증되어 기존 환경에 문제없이 통합됩니다.

총 소유 비용을 평가하는 네트워크 아키텍트 및 IT 관리자에게 MMAIB00-B150D 광 트랜시버 솔루션은 대역폭과 거리 간의 전통적인 절충을 제거하는 균형 잡히고 미래 지향적인 선택으로 두드러집니다. 자세한 가격, 가용성 및 대량 할인 정보는 NVIDIA의 공인 유통 채널을 통해 얻을 수 있습니다. 지역 파트너를 찾으려면 MMAIB00-B150D 판매용을 검색하거나 공식 MMAIB00-B150D 데이터시트를 참조하여 최종 생산 사양 및 규정 준수 인증을 확인하십시오.