멜라녹스 (NVIDIA 멜라녹스) MCX623106AN-CDAT 서버 어댑터 작동: RDMA/RoCE 구동 낮은 지연 전송 및 서버

분산 데이터베이스, 인공지능 추론 클러스터, 하이퍼 컨버전스 스토리지를 호스팅하는 실제 생산 환경에서전통적인 TCP/IP 스택에 의한 대기 지체와 CPU 오버헤드는 확장에 대한 어려운 병목이되었습니다.대규모 인터넷 인프라 팀은 최근멜라녹스 (NVIDIA 멜라녹스) MCX623106AN-CDAT서버 어댑터, 낮은 지연 전송 및 서버 처리량 증진에 대한 RDMA / RoCE 기술의 실질적인 이점을 검증하는 데 중점을두고 있습니다.이 기사에서는 이 실제 사례에서 배포 세부 사항과 주요 결과를 분해합니다..

이 팀은 분산 스토리지 (Ceph) 와 실시간 추천 시스템을 실행하는 수천 개의 서버를 운영하고 있었습니다.각 저장 노드는 수천 개의 동시 TCP 연결을 처리해야 했습니다., 네트워크 프로토콜 처리에 CPU 자원의 거의 30%를 소비하고, 끝에서 끝까지 읽기 / 쓰기 지연이 종종 200μs를 초과합니다. 또한, NVMe over Fabrics 실험은 랙을 통해,하드웨어 하드오로드 기능이 없는, 지속적으로 예상 된 로컬 플래시 성능을 달성하지 못했습니다. 팀은 급히 RoCEv2를 지원 할 수있는 서버 어댑터 솔루션이 필요했습니다.그리고 동시에 높은 처리량과 낮은 지연 시간을 동시에 제공합니다..

평가 후, 팀은MCX623106AN-CDAT핵심 네트워크 엔진으로. 이 어댑터는 ConnectX-6 Dx 가족에 속합니다. 단순히 레거시 10GbE 어댑터를NVIDIA 멜라녹스 MCX623106AN-CDAT각 노드에서 손실없는 RoCE 네트워크 구성 (DCQCN 및 PFC) 을 배포하여 팀은 기반을 마련했습니다.MCX623106AN-CDAT 이더넷 어댑터 카드, 스토리지 노드 하드웨어 TCO 오프로드 및 동적 링크 집합을 가능하게했습니다.MCX623106AN-CDAT 데이터 시트PCIe 4.0 x16 및 듀얼 포트 100GbE 기능에 대한 지침을 위해 링크 예산 및 백플레인 호환성을 보장합니다. 테스트 후 모든 서버는MCX623106AN-CDAT 호환기존의 Leaf-Spine 스위치와의 상호 연결, 핵심 네트워크 장비의 교체가 필요하지 않습니다.

업그레이드 후 성능 평가는 눈에 띄는 결과를 얻었습니다. 동일한 분산 저장 작업 부하를 실행할 때,MCX623106AN-CDAT ConnectX 어댑터 PCIe 네트워크 카드검증된:

• 끝에서 끝까지 평균 지연시간210μs에서 18μs로 떨어지는 (RoCEv2보다 직물 읽기 작업을 수행하는 NVMe보다 NVMe)
• CPU 네트워크 오버헤드28%에서 4%로 떨어지고, 비즈니스 애플리케이션을 위한 계산 주기를 자유롭게 합니다.
• 노드당 효과적 처리량98.7Gbps에 도달하고, 직선 속도에 가까운 전송
• 전체 4K 무작위 기록 IOPS여러 노드 Ceph 클러스터의 크기가 3.2배 증가합니다.

팀 리더는 이렇게 말했습니다. "MCX623106AN-CDAT 이더넷 어댑터 카드 솔루션우리의 환경에 진정한 라인 레이트 RoCE 기능을 제공합니다. 이전에는 상상할 수 없었던 지연 민감한 혼합 작업 부하가 이제 같은 네트워크 차원에서 배경 작업과 공존 할 수 있습니다." 게다가, 계약 기록에 따르면,MCX623106AN-CDAT 가격이 경우 FPGA 기반 가속기 어댑터에 비해 전체 소유비용 (TCO) 이 40% 감소하고,MCX623106AN-CDAT 판매표준 채널을 통해 프로젝트 기간을 크게 단축했습니다.MCX623106AN-CDAT 사양이 어댑터가 모든 패킷 크기에서 600ns 이하의 지연시간과 전선 속도 성능을 제공한다는 것을 확인했습니다.

이러한 적용 관행은MCX623106AN-CDAT고성능 이더넷 어댑터일 뿐만 아니라 저연속성, 고출력 데이터센터 네트워크를 구축하는 초석입니다.완전한 RoCE 오프로드 아키텍처와 하드웨어 가속 엔진은 CPU와 연결된 네트워크 처리 및 프로토콜 스택 지연의 핵심 과제를 해결합니다.서버 처리량을 풀고, 스토리지 액세스 지연을 줄이고, AI와 NVMe-oF 작업 부하를 준비하려는 모든 조직을 위해,멜라녹스 (NVIDIA 멜라녹스) MCX623106AN-CDAT검증된, 생산 준비가 된 앞으로의 길을 제공합니다.