Mellanox (NVIDIA Mellanox) MCX653105A-HDAT 서버 어댑터 기술 솔루션

현대 데이터 센터는 컴퓨팅 중심에서 데이터 중심 아키텍처로 근본적인 전환을 겪고 있습니다. 분산 스토리지, AI 훈련 클러스터,고주파 거래 환경은 네트워크 지연 속도와 서버 처리량에 대한 엄격한 요구 사항을 부과합니다.전통적인 TCP/IP 스택은 높은 대역폭에서 CPU 중단을 발생시키고 컨텍스트 스위치를 발생시켜 네트워크 오버헤드에만 30% 이상의 컴퓨팅 전력을 소비합니다.NVMe-oF와 같은 신흥 저장 프로토콜은 성능 잠재력을 발휘하기 위해 마이크로 초점 규모의 끝에서 끝까지의 지연을 필요로 합니다.이러한 과제를 해결하기 위해 기업들은 네트워크 프로세싱을 완화하고 메모리 접근을 가능하게 하는 서버 NIC를 필요로 합니다.멜라녹스 (NVIDIA 멜라녹스) MCX653105A-HDAT배달합니다.

전형적인 배포 시나리오에서 확인 된 주요 요구 사항은: 2μs 이하의 애플리케이션 수준의 지연, 포트 당 100GbE 라인 전송률,RoCE (RDMA over Converged Ethernet) 를 위한 하드웨어 완화, 기존 PCIe 4.0 서버와 원활한 통합, 그리고 능동적인 혼잡 관리를 위한 포괄적인 텔레메트리MCX653105A-HDAT이 모든 것을 ConnectX-6 아키텍처로 처리합니다.

제안 된 솔루션은 RoCE 지원으로 두 계층 척추-잎 조직을 채택하여 이더넷 경제성을 유지하면서 TCP/IP 병목을 제거합니다.톱 오브 랙 스위치 (NVIDIA SN4000 시리즈 또는 동등한 PFC를 지원하는 스위치) 는 컴퓨팅 및 저장 노드를 상호 연결합니다.. 각 계산 노드는 통합MCX653105A-HDAT 이더넷 어댑터 카드, 듀얼 포트 100GbE 연결을 제공합니다. 스토리지 노드는 RDMA를 통해 NVMe-oF 타겟을 직접 서비스하기 위해 동일한 어댑터를 배포합니다.

건축적으로,NVIDIA 멜라녹스 MCX653105A-HDAT주요 데이터 플레인 가속기로서의 위치, 가상 머신, 컨테이너 및 맨 금속 워크로드에서 모든 네트워크 I/O를 처리합니다.제어 평면은 호스트 CPU에 남아 있지만 데이터 이동 작업에서 해방됩니다.이 분리란 RDMA를 지원하는 설계의 본질입니다.대용량 배포 (100+ 노드) 를 위해, 전용 RoCE 혼잡 제어 도메인은 DCQCN (데이터 센터 정량화 혼잡 알림) 를 사용하여 구성됩니다.컴퓨터 및 스토리지 트래픽을 위한 별도의 버퍼 풀을 갖춘.

의MCX653105A-HDAT ConnectX 어댑터 PCIe 네트워크 카드이 아키텍처에서 네 가지 중요한 기능을 합니다.

• 하드웨어-오프로드 RoCE:특수 스위치나 패브릭이 필요하지 않고 RDMA를 구현합니다. 데이터는 커널을 완전히 우회하여 응용 프로그램 버퍼와 원격 메모리 사이에서 직접 이동합니다.
• PCIe 4.0 x16 인터페이스:최대 200Gb / s 양방향 대역폭을 제공하여 호스트 버스 병목을 제거하고 이중 100GbE 포트를 완전히 활용합니다.
• 가속 전환 및 패킷 처리 (ASAP2):VXLAN/NVGRE 오프로드, VirtIO 가속 및 프로그래밍 가능한 텔레미터에 대한 유연한 파이프라인 사용자 정의를 지원합니다.
• 저장 가속도:NVMe-oF (TCP 및 RoCE) 에 대한 하드웨어 릴로드, T10-DIF 서명 생성/확인 및 삭제 코딩 가속화

에 따르면MCX653105A-HDAT 데이터 시트, 어댑터는 또한 안전한 부팅, 하드웨어 루트 신뢰 및 100GbE까지 인라인 IPsec/TLS 암호화 를 지원 합니다.MCX653105A-HDAT 사양, 엔지니어들은 이중 슬롯 너비, 수동 냉각 및 넓은 운영 온도 범위 (0 °C ~ 55 °C) 를 주목하여 밀집된 서버 환경에 적합합니다.

전형적인 토폴로지 (1024 노드 클러스터 예제):
- 잎층: 16x 잎 스위치, 각각 48x 100GbE 다운링크 포트 + 8x 400GbE 업링크
- 척추층: 4x 척추 스위치, 차단하지 않는 400GbE 천
- 계산 노드:MCX653105A-HDAT매 노드 (선택 가능한 액티브-액티브 또는 액티브-스탠드바이)
- 저장 노드: 1xMCX653105A-HDATRDMA를 통해 NVMe 네임스페이스를 서비스하는 노드당

배포 단계:확인MCX653105A-HDAT 호환성공식 호환성 매트릭스를 사용하는 서버. MLNX_OFED 또는 DOCA 프레임워크 (최저 버전 5.8) 를 설치합니다. 스위치 포트 (PFC, ECN, DCQCN 매개 변수 작업 부하에 조정) 에서 RoCE를 활성화하십시오.듀얼 포트 리던스를 위해 결합 또는 멀티 경로를 구성마지막으로, perftest 스위트 (ib_write_bw, ib_read_lat) 를 사용하여 검증합니다.

스케일링 고려사항:2000+ 노드, 조직 수준에서 적응 라우팅 및 혼잡 제어 구현.MCX653105A-HDAT 이더넷 어댑터 카드 솔루션각 어댑터가 중앙 병목 없이 독립적으로 작동하기 때문에 선형적으로 확장됩니다.MCX653105A-HDAT 가격TCO에 비해 전형적인 회수 기간은 서버 통합 및 CPU 코어 수요 감소로 인해 6-12 개월입니다.MCX653105A-HDAT 판매분량 가격 및 펌웨어 사용자 정의 옵션을 위해 지역 배급업체에 문의해야합니다.

모니터링 및 텔레메트리의NVIDIA 멜라녹스 MCX653105A-HDATPCM (Performance Counter Monitor) 및 DOCA 텔레메트리를 통해 실시간 카운터를 수출합니다. 추적해야 할 주요 메트릭: RoCE 혼잡 표시 비율, 버퍼 떨어지는 수, PCIe 링크 오류 및 포트 중지 프레임.프로메테우스+그라파나와의 통합은 NVIDIA 관리 라이브러리 (NVML) 를 통해 지원됩니다..

최적화 지침:작업 부하에 기초하여 DCQCN 매개 변수를 설정 (cnp_802p_prio=3, rpg_time_reset=300, 등) 합니다. 저장에 더 공격적이고 계산에 보수적입니다.혼합 작업 부하의 TSO/LRO, 지연 감수성 흐름에 대한 RoCE 및 NFV에 대한 ASAP2. 포함된 mlxconfig 툴을 사용하여 PCIe 최대 페이로드 크기를 조정하십시오. (256B는 대부분의 서버에 최적입니다.)

일반적인 문제 해결:포트 플래핑은 일반적으로 SFP/케이블 불일치를 나타냅니다MCX653105A-HDAT 호환성낮은 RDMA 처리량은 종종 스위치에 대한 불충분한 ECN 구성을 나타냅니다.직물 검증을 위해 ibdiagnet을 사용 하 고 내부 어댑터 레지스터를 검사 하 고 dump_emad지속적 인 문제에 대해MCX653105A-HDAT 데이터 시트레지스터 레벨 진단 및 오류 코드 테이블을 제공합니다.

의MCX653105A-HDAT이는 낮은 지연시간과 높은 처리량을 가진 데이터센터 네트워크를 위한 성숙하고 생산 준비가 된 빌딩 블록을 나타냅니다.표준 이더넷 인프라에서 RDMA/RoCE 배포를 가능하게 합니다.주요 가치 결과로는: 네트워크 작업에 대한 50-70%의 CPU 감소, 결정적 하위 2μs 지연, 원활한 NVMe-oF 통합 및 수천 개의 노드에 대한 선형 확장성.MCX653105A-HDAT 이더넷 어댑터 카드 솔루션기존 관리 도구와의 호환성을 유지하면서 200GbE 섬유에 대한 미래 확실한 경로를 제공합니다.MCX653105A-HDAT 사양콘셉트 증명이나 랙 규모의 도입을 계획하는 경우 이 어댑터는 성능과 전체 소유 비용 모두에서 수치적으로 향상됩니다.