멜라녹스 (NVIDIA 멜라녹스) MFS1S00-H005V AOC 액티브 광케이블 응용 실무

멜라녹스 (NVIDIA 멜라녹스) MFS1S00-H005V AOC 액티브 광케이블 애플리케이션 실습을 수행하기 위한 단거리 고속 인터 랙 인터 커넥트 및 케이블 단순화

배경과 도전: 랙 간 연결의 케이블링 병목

국가적 슈퍼 컴퓨팅 센터는 인피니밴드 HDR 200G 네트워크를 업그레이드 한 후 예상치 못한 병목에 직면했습니다.각각 16개의 GPU 서버를 포함합니다., 각 서버는 상위 랙 (ToR) 리프 스위치에 두 개의 200G 업링크가 필요합니다. 전통적인 접근법 하에서는, 랙 간 연결은 섬유 패치 케이블과 분리된 광 모듈에 의존합니다.QSFP56 SR4 트랜시버는 각 랙의 상단에 배치되었습니다., MPO 섬유 점퍼를 통해 인접한 래크의 Leaf 스위치에 연결합니다. 이 솔루션은 초기 배포 중에 여러 가지 문제를 노출했습니다. 첫째,케이블 확산이 심각했습니다. 48개 래크 사이에 300개 이상의 섬유 연결이 필요했습니다.두 번째, 광학 모듈의 고장율은 특히 높았습니다.운영팀은 배치 후 첫 3개월 동안 일주일에 평균 3~4개의 모듈을 교체하는 것을 기록합니다., 종종 링크 재 자격을 요구하고 캐스케이드 작업 스케줄 지연을 유발합니다. 셋째, 각 MPO 점퍼는 철저한 극성 관리와 청소를 필요로합니다.초기 부착 시 링크당 15~20분씩 추가운영 책임자는 "우리는 같은 200G 성능을 제공 할 수있는 솔루션이 필요하지만 더 적은 구성 요소, 더 간단한 조작,그리고 현장 실패율을 크게 줄였습니다.."

솔루션 및 배포: MFS1S00-H005V 활성 광 케이블을 도입

이러한 고통의 지점을 해결하기 위해 센터는 여러 대안을 평가하고 최종적으로MFS1S00-H005VMellanox (NVIDIA Mellanox) 에서MFS1S00-H005V 200G QSFP56 AOC 케이블광학 트랜시버와 광섬유를 단일, 사전 종료 된 어셈블리로 통합합니다.MFS1S00-H005V 인피니밴드 HDR 200Gb/s 활성 광 케이블, 별도의 모듈과 점퍼의 필요성을 제거합니다.최대 50 미터까지의 플러그 앤 플레이 인터 커넥트를 제공합니다. 이 시설의 래크 사이의 전형적인 5 ~ 15 미터 거리에 이상적입니다..

배포 전략은 3 주 주말에 걸쳐 단계적으로 진행되었습니다. 단계 1에서 팀은 핵심 척추층의 모든 잎과 잎 상호 연결을NVIDIA Mellanox MFS1S00-H005V, 확인MFS1S00-H005V 호환이 목록은 기존의 퀀텀 스위치를 포함했습니다. 단계 2는 AOC 배포를 톱 오브 랙 업링크로 확장하여 각 컴퓨팅 노드를 리프 스위치에 연결했습니다.단계 3는 GPU에서 저장장치 조직에 초점을 맞추고 있습니다., 어디MFS1S00-H005V 200G QSFP56 AOC 케이블 솔루션이 연구팀은MFS1S00-H005V 데이터 시트연결 예산을 확인하고 50m의 범위가 가장 긴 운행에 충분하다는 것을 보장하기 위해 (서비스 루프를 포함하여 37m로 측정됩니다).

AOC 접근 방식의 주요 장점은 개별 트랜시버 청소 단계의 제거였습니다.MFS1S00-H005V공장에서 테스트되고 밀폐되어 도착하여 설치 전에 연결 장치 끝면의 시각 검사만 필요합니다.연구팀은 잎과 척추 사이의 연결을 잎과 컴퓨터의 연결에서 구별하기 위해 색상 코딩된 케이블 부츠를 사용했습니다., 문서를 더욱 단순화합니다.

결과와 이점: 신뢰성 및 운영 효율성의 실질적인 향상

배포 후 측정은 여러 차원에서 상당한 이득을 보여주었습니다.MFS1S00-H005V 사양1e-15보다 낮은 BER를 포함 한 전형적인 전력 소비 1.5W 이상 생산 환경에서 완전히 실현되었습니다이 센터는 연결과 관련된 업무 실패가 전혀 없는 것을 보고하고 있습니다.다음 표에서는 주요 개선 사항이 요약되어 있습니다.

운영팀은 또한MFS1S00-H005V케이블의 유연한 자켓과 30mm의 최소 굽기 반지름은 케이블 트레이 내부에서 훨씬 더 깔끔한 경로를 허용하여 케이블 연결의 필요성을 줄이고 공기 흐름을 향상시킵니다. 총 비용을 평가 할 때,이 센터는MFS1S00-H005V 가격단위당 분리 모듈과 점퍼 조합보다 약간 더 높았습니다. 연결 기준으로, 예비 재고 제거, 문제 해결 노동 감소,그리고 거의 0의 실패율은 소유의 총 비용 (TCO) 을 더 유리한 것으로 만들었습니다..판매용 MFS1S00-H005V또한 NVIDIA 채널을 통해 결함이있는 단위의 신속한 교체 (처음 3개월 동안 발생하지는 않았지만) 를 보장했습니다.

요약 및 전망: 단순화 된 HDR 직물 에 대한 청사진

슈퍼 컴퓨팅 센터의 성공적인 채택MFS1S00-H005V액티브 광케이블이 HDR 200G 환경에서 랙 간 연결을 어떻게 극적으로 단순화할 수 있는지 보여줍니다.AOC 방식은 부품 수를 줄입니다., 모듈 관련 현장 장애를 제거하고 배포 시간을 80% 이상 단축합니다.NVIDIA Mellanox MFS1S00-H005V더 높은 신뢰성 및 더 낮은 운영 전반적인 비용에 대한 검증된 경로를 제공합니다.MFS1S00-H005V 데이터 시트그리고 검증된 호환성 매트리스는 공식 채널을 통해 제공됩니다. 센터는 이제 AOC 전략을 새로운 GPU 확장 날개로 확장할 계획입니다.같은 혜택을 더 큰 규모에서 재현할 것으로 기대합니다..