Mellanox (NVIDIA Mellanox) MFS1S00-H005V AOC 액티브 광 케이블 실제 적용 - 단거리 고속

하이퍼스케일 데이터 센터와 고성능 컴퓨팅 클러스터가 계속 확장됨에 따라 랙 간 연결 밀도와 케이블 관리 복잡성이 확장 효율성의 중요한 제약으로 부상했습니다. 기존 수동 구리 케이블은 단거리 상호 연결 시나리오에서 신호 감쇠, 과도한 케이블 직경 및 공기 흐름 방해 문제를 야기하는 반면, 개별 광 트랜시버 솔루션은 추가 비용과 잠재적인 장애 지점을 발생시킵니다. 대규모 AI 컴퓨팅 클러스터의 최근 확장 프로젝트에서 Mellanox(NVIDIA Mellanox) MFS1S00-H005V 액티브 광 케이블(AOC)은 200Gb/s의 고속 랙 간 연결을 성공적으로 제공하면서 케이블링 아키텍처를 크게 단순화하여 유사한 데이터 센터의 단거리 상호 연결 업그레이드를 위한 복제 가능한 참조 모델을 제공했습니다.

해당 컴퓨팅 클러스터는 NVIDIA Mellanox Quantum HDR 스위치를 중심으로 구축되었으며 Fat-Tree 네트워크 아키텍처를 채택했습니다. 단일 Pod 내에서 수십 개의 스위치가 수백 개의 컴퓨팅 노드와 상호 연결되었으며, 랙 간 거리는 5~30미터였습니다. 초기 단계에서 운영팀은 랙 간 연결에 수동 구리 케이블(DAC)을 사용하려고 시도했습니다. 그러나 포트 속도가 200Gb/s로 증가함에 따라 15미터를 초과하는 구리 링크에서 신호 오류가 만연하여 링크 성능 저하 또는 간헐적인 플래핑이 발생했습니다. 더 중요하게는, 두꺼운 두께와 제한된 굽힘 반경이 특징인 고밀도 구리 케이블은 오버헤드 케이블 트레이에 심각한 혼잡을 야기하여 스위치 측의 핫 에일/콜드 에일 격리에 직접적인 영향을 미치고 냉각 비용을 증가시켰습니다.

모듈식 트랜시버 접근 방식에서도 또 다른 과제가 발생했습니다. 광 모듈과 광섬유 케이블의 조합은 이론적으로 더 나은 도달 거리와 유연성을 제공했지만, 수백 개의 랙 간 링크에 배포하면 수천 개의 분리 가능한 광 인터페이스가 발생합니다. 각 인터페이스는 잠재적인 오염 또는 장애 지점을 나타냈으며, 트랜시버와 케이블링의 총 비용은 예산 제약을 훨씬 초과했습니다. 팀은 구리의 "플러그 앤 플레이" 단순성과 광 기술의 신호 무결성 및 도달 거리를 결합하면서 엄격한 전력 예산 및 물리적 밀도 요구 사항을 유지하는 솔루션이 필요했습니다.

여러 대안을 평가한 후 아키텍처 팀은 MFS1S00-H005V 200G QSFP56 AOC 케이블을 모든 랙 간 링크의 표준 상호 연결로 선택했습니다. 이 액티브 광 케이블은 광 트랜시버를 커넥터 하우징에 직접 통합하여 분리 가능한 광 인터페이스를 제거하는 단일 밀봉 어셈블리를 제공합니다. 배포는 간단한 전략을 따랐습니다.

• 표준화된 링크 길이: 세 가지 표준 길이(15m, 20m, 30m)를 사용하여 모든 랙 간 거리를 커버하여 재고 복잡성을 줄였습니다.
• 직접 스위치 간 연결: MFS1S00-H005V InfiniBand HDR 200Gb/s 액티브 광 케이블은 중간 패치 패널 없이 인접 랙에 걸쳐 스파인 스위치를 리프 스위치에 연결했습니다.
• 간소화된 케이블 라우팅: 구리 DAC에 비해 AOC의 더 얇고 유연한 구조는 케이블 트레이에서 더 깔끔하게 묶을 수 있어 스위치 섀시로의 공기 흐름을 복원했습니다.

결정의 핵심 요소는 포괄적인 호환성 보장이었습니다. 팀은 모든 NVIDIA Mellanox Quantum HDR 스위치 및 ConnectX-6 어댑터에서 MFS1S00-H005V 호환 상태를 확인하여 펌웨어 수준 조정 없이 모든 링크가 200Gb/s에서 올바르게 학습될 것임을 보장했습니다. AOC를 각 길이에 대해 단일 SKU로 취급함으로써 운영팀은 검증이 필요한 고유 구성 요소 수를 두 개(트랜시버 + 케이블)에서 하나로 줄여 조달 및 현장 교체 절차를 모두 단순화했습니다.

배포 후 측정 결과 여러 차원에서 상당한 개선이 나타났습니다. 첫째, 링크 안정성이 크게 향상되었습니다. 모든 랙 간 링크의 비트 오류율(BER)은 90일 관찰 기간 동안 케이블링으로 인한 링크 플래핑 없이 InfiniBand HDR 사양 내에 유지되었습니다. 둘째, AOC의 더 작은 직경과 더 타이트한 굽힘 반경으로 인해 섀시 팬 흡입부를 막지 않고 더 체계적인 번들링이 가능해져 케이블 트레이 밀도가 약 40% 향상되었습니다.

운영 관점에서 볼 때, 단순화된 재고는 명확한 이점을 가져왔습니다. 링크당 단일 구성 요소 유형으로 운영팀은 예비 부품 SKU 수를 12개 이상에서 3개로 줄였습니다. 엔지니어가 문제 해결 또는 용량 계획 중에 기술 세부 정보를 참조해야 할 때 MFS1S00-H005V 데이터시트 및 MFS1S00-H005V 사양을 신속하게 참조하여 여러 구성 요소 문서를 교차 참조하지 않고도 전력 소비, 광학 예산 및 기계적 제한을 확인할 수 있었습니다. 총 소유 비용도 혜택을 받았습니다. 링크당 MFS1S00-H005V 가격은 동일한 길이의 구리 DAC보다 약간 높았지만, 액티브 광 모듈 제거와 문제 해결 노동력 감소로 인해 예상 3년 수명 주기 동안 TCO가 25% 낮아져 MFS1S00-H005V 판매 평가가 수량이 증가함에 따라 점점 더 유리해졌습니다.

배포는 NVIDIA Mellanox MFS1S00-H005V가 단순한 케이블 교체 이상임을 입증했습니다. 이는 성능, 밀도 및 운영 단순성을 균형 있게 맞춰야 하는 단거리 고속 연결 환경을 위한 완전한 MFS1S00-H005V 200G QSFP56 AOC 케이블 솔루션 역할을 합니다. 새로운 AI 클러스터를 설계하거나 기존 InfiniBand 패브릭을 업그레이드하는 아키텍트에게 MFS1S00-H005V는 고속 네트워크 확장에 역사적으로 수반되었던 케이블링 복잡성 없이 확장할 수 있는 예측 가능한 경로를 제공합니다.

앞으로 데이터 센터 토폴로지가 더 높은 포트 수와 증가된 GPU-GPU 통신 요구 사항으로 발전함에 따라 여기서 입증된 원칙(표준화된 길이, 밀봉된 광 어셈블리 및 검증된 호환성)이 점점 더 중요해질 것입니다. 이러한 결과를 재현하려는 네트워크 엔지니어 및 IT 관리자는 MFS1S00-H005V 사양을 자체 랙 레이아웃 및 거리 요구 사항과 비교하여 검토하는 것이 좋습니다. 프로덕션 환경에서의 입증된 성능과 NVIDIA Mellanox HDR 인프라 전반의 광범위한 호환성을 통해 이 액티브 광 케이블 솔루션은 차세대 고성능 컴퓨팅 및 AI 워크로드를 위한 효율적이고 확장 가능한 랙 간 연결의 백본 역할을 할 준비가 되어 있습니다.