NVIDIA Mellanox MCX631432AN-ADAB 서버 어댑터 실제 적용 | RDMA/RoCE 저지연 전송 및 서버 처리량 향상

NVIDIA Mellanox MCX631432AN-ADAB 서버 어댑터 작동입니다.

배경과 도전: 분산 저장소에서의 지연 단속

큰 인터넷 회사의 인프라 팀은 최근에 익숙한 과제를 직면했습니다.점점 더 많은 애플리케이션 수요에 맞추기 위해 노력했습니다.스토리지 노드에는 강력한 CPU와 빠른 NVMe 드라이브가 장착되어 있었지만, 네트워크 지연은 특히 I/O 작업의 정점 동안 주요 병목이되었습니다.기존 10GbE 어댑터는 하드웨어 오프로드 기능이 부족했습니다., 처리된 모든 패킷에 대한 과도한 CPU 개입을 유발합니다.

이 오버헤드는 각 I/O 작업이 여러 네트워크 왕복을 필요로 하는 쓰기 집중 작업량에서 가장 두드러졌다.팀은 전체 서버 처리량을 높이는 동시에 꼬리 지연 시간을 크게 줄일 수 있는 솔루션이 필요했습니다.기존 이더넷 인프라를 완전히 개편하지 않아도 됩니다. 여러 가지 옵션을 평가한 후NVIDIA 멜라녹스 MCX631432AN-ADAB이중 포트 25GbE SFP28 어댑터, 컨버지드 이더넷 (RoCE) 배포를 통해 RDMA를 위해 특별히 제작되었습니다.

솔루션 및 배포: ConnectX-6 Lx와 RoCE를 배포

이 배포는 Ceph 클러스터 내에서 메타데이터 서버로 봉사하는 세 개의 저장 노드를 목표로했습니다.MCX631432AN-ADAB 커넥트X-6 Lx 듀얼 포트 25GbE SFP28RoCEv2 지원을 가진 25GbE 상단 스위치에 연결하는 어댑터로최대 50Gb/s의 전체 대역폭을 집계하면서 오류 전환 리던스를 제공합니다..

구현의 중요한 측면은 손실없는 네트워크 동작을 보장하기 위해 우선 흐름 제어 (PFC) 및 명시적 혼잡 알림 (ECN) 로 RoCEv2를 가능하게하는 것입니다.MCX631432AN-ADAB 이더넷 어댑터 카드이러한 고급 혼잡 관리 메커니즘을 원시적으로 지원하여 독점 스위치 또는 추가 라이선스의 필요성을 제거합니다.연구팀은 또한 어댑터의 내장 하드웨어 타임 스탬프와 텔레미터 카운터를 활용하여 초기 연소 단계에서 직물의 상태를 실시간으로 모니터링했습니다..

에 따르면MCX631432AN-ADAB 데이터 시트, 어댑터는 PCIe Gen 4.0 x8을 지원합니다. 호스트 버스를 병목하지 않고 이중 25GbE 포트를 완전히 포화시키는 데 필수적 인 것으로 나타났습니다. 기존 서버는 이미 Gen 4.0을 지원했습니다.업그레이드를 간단하게 만드는 것아직 PCIe 3세대 환경에 적용됩니다.0, 어댑터는 완전히 남아MCX631432AN-ADAB 호환성후기 호환성 ∙ 단계적 도입 계획을 단순화한 유연성

배포 프로세스는 특히 간소화되었습니다. NVIDIA 네트워크 드라이버 스택으로 어댑터는 CentOS 8 환경에서 즉시 인식되었습니다.MCX631432AN-ADAB 사양버퍼 할당을 정밀 조정하고 융합 설정을 중단하여 애댑터의 동작을 특정 작업 부하 패턴에 맞게 조정합니다.

결과 와 측정 할 수 있는 유익

성능 향상은 즉각적이고 수치화 가능했습니다.NVIDIA 멜라녹스 MCX631432AN-ADAB:

숫자를 넘어서 연구팀은 I/O 응답시간의 일관성을 향상시켰고, 이전에는 스토리지 백엔드를 공유하는 임대자 애플리케이션에 영향을 끼친 "음란한 이웃" 효과를 제거했다.하드웨어의 하하드 로드를 제공MCX631432AN-ADAB 이더넷 어댑터 카드 솔루션CPU 오버헤드를 크게 줄여서 노드는 CPU 포화치를 달성하기 전에 약 60% 더 많은 IOPS를 처리할 수 있었고, 계획된 하드웨어 업데이트 사이클을 효과적으로 지연시켰다.

네트워크 운영 팀의 경우, 어댑터의 내장 텔레메트리 및 실시간 성능 카운터에 액세스 할 수있는 능력MCX631432AN-ADAB 사양문제 해결 및 용량 계획에 상당한 용이성을 제공했습니다. 팀은 생산 작업 부하에 영향을 미치기 전에 미세한 폭발과 대기열 깊이 문제를 식별 할 수있었습니다.

요약 & 전망: 미래 규모 를 위한 기초

이 배포는NVIDIA 멜라녹스 MCX631432AN-ADAB단순히 점진적인 업그레이드가 아니라 지연 민감한 분산 시스템의 전환 요소입니다. RoCE의 잠재력을 최대한 발휘함으로써,어댑터는 평균 및 꼬리 지연량 두 가지에서 상당한 감축을 제공 동시에 거의 6 배로 집계 서버 처리량을 증가자유로웠던 CPU 사이클은 이제 애플리케이션 수준의 처리로 재배분되고 있으며, 클러스터의 전반적인 효율성을 더욱 향상시킵니다.

앞으로, 팀은 어댑터에 대한 추가 사용 사례를 탐구하고 있습니다.높은 성능의 블록 스토리지를 위한 NVMe over Fabrics (NVMe-oF) 를 포함하고, 인공지능 훈련 작업 부하를 위한 GPUDirect을 포함합니다.ConnectX-6 Lx 아키텍처의 유연성은 동일한MCX631432AN-ADAB하드웨어는 대체 없이 이러한 진화하는 요구를 지원할 수 있습니다.MCX631432AN-ADAB 가격, 운영 절감과 성과 향상에 비추면 설득력 있는 비즈니스 사례를 제시합니다.

연구팀의 경험은 더 광범위한 추세를 강조합니다. 데이터 센터가 25GbE와 더 높은 패브릭을 점점 더 채택함에 따라 서버 어댑터의 선택은 중요한 건축 결정이됩니다.MCX631432AN-ADAB 이더넷 어댑터 카드기존 인프라와 차세대 성능 요구 사이의 격차를 줄이고자 하는 사람들에게 검증된, 생산 준비가 된 솔루션을 제공합니다.