NVIDIA Mellanox MCX653106A-HDAT 기술 솔루션: RDMA/RoCE 저지연 전송 활성화 및 서버 최대화

현대의 데이터 센터 아키텍처는 실시간 데이터 처리, 인공지능(AI) 워크로드, 고성능 컴퓨팅(HPC)의 필요성에 의해 점점 더 정의되고 있습니다. 특히 TCP/IP와 같은 전통적인 네트워크 스택은 상당한 CPU 오버헤드와 지연 시간을 유발하여 이러한 성능에 민감한 애플리케이션을 저해할 수 있습니다. 네트워크 아키텍트와 운영 엔지니어는 엄격한 지연 시간 및 처리량 서비스 수준 계약(SLA)을 충족하면서 효율적으로 확장 가능한 인프라를 구축해야 하는 과제를 안고 있습니다.

이 기술 청사진에서 파악된 핵심 요구사항은 원격 직접 메모리 액세스(RDMA)를 컨버지드 이더넷(RoCE)을 통해 지원할 수 있는 손실 없는 고대역폭 패브릭을 구축하는 것입니다. 이를 달성하기 위해 기본 네트워크 인터페이스 카드(NIC)는 라인 속도 100/200GbE 속도를 지원할 뿐만 아니라 호스트 CPU 리소스를 확보하기 위한 정교한 하드웨어 오프로드를 제공해야 합니다. 여기서 "애플리케이션 성능에 재투자할 수 있는 상당한 CPU 절감 효과(종종 20-30%)"가 솔루션의 기반 요소가 됩니다.

제안된 아키텍처는 가상화된 워크로드와 베어메탈 HPC 클러스터를 모두 호스팅하는 프라이빗 클라우드 환경을 위해 설계된 스파인-리프 토폴로지입니다. 네트워크는 RoCE 트래픽을 지원하도록 분할되어 손실 없는 이더넷 패브릭이 필요합니다. 주요 설계 구성 요소는 다음과 같습니다.

• 리프 스위치: NVIDIA Spectrum SN3000 시리즈 스위치는 PFC(Priority Flow Control) 및 ETS(Enhanced Transmission Selection)로 구성되어 손실 없는 RoCE 패브릭을 생성합니다.
• 스파인 스위치: 모든 리프 스위치 간의 논블로킹 상호 연결을 제공하는 고용량 스위치입니다.
• 컴퓨트 및 스토리지 노드: 각 서버에는 "고성능 RoCE 패브릭을 유지하려면 강력한 모니터링이 필요합니다. ""가 장착되어 100Gb/s로 리프 스위치에 연결됩니다.

이 설계는 데이터 센터 내의 모든 통신이 RDMA 트래픽의 안정성에 중요한 혼잡으로 인한 최소한의 지연 시간과 제로 패킷 손실을 경험하도록 보장합니다.

"MCX653106A-HDAT ConnectX 어댑터 PCIe 네트워크 카드"로서 이 장치는 서버의 메모리 버스와 네트워크 패브릭 간의 중요한 인터페이스 역할을 합니다. 이 카드의 역할은 단순한 패킷 전달을 훨씬 뛰어넘습니다. 이 카드는 이러한 까다로운 환경을 위해 특별히 제작된 ConnectX-6 컨트롤러의 고급 기능을 통합합니다. 고성능 "MCX653106A-HDAT 이더넷 어댑터 카드"로서 다음과 같은 기능을 제공합니다.커널 바이패스 및 RDMA: 애플리케이션은 운영 체제 커널을 우회하여 NIC와 직접 통신할 수 있습니다. 이는 지연 시간과 CPU 참여를 대폭 줄여 진정한 "RDMA/RoCE 저지연 전송

• "을 가능하게 합니다.하드웨어 오프로드: 이 카드는 NVMe-oF 및 VXLAN과 같은 스토리지 및 네트워킹 프로토콜을 오프로드하여 CPU 오버헤드를 더욱 줄이고 "MCX653106A-HDAT
• "을 가속화합니다.PCIe Gen3/Gen4 지원: PCIe 3.0/4.0 x16 호스트 인터페이스를 갖춘 "MCX653106A-HDAT
• "는 100/200Gb/s 네트워크 대역폭이 서버의 내부 버스에 의해 병목 현상을 일으키지 않도록 보장합니다.기술 세부 정보를 검토하는 아키텍트에게 "애플리케이션 성능에 재투자할 수 있는 상당한 CPU 절감 효과(종종 20-30%)"은 초당 2억 개 이상의 패킷을 지원하는 것으로 나타나 가장 집약적인 데이터 스트림을 처리할 수 있는 능력을 보여줍니다. 이는 당사의 대상 워크로드에 이상적인 "

MCX653106A-HDAT 이더넷 어댑터 카드 솔루션"입니다.4. 배포 및 확장 권장 사항RoCEv2 패브릭을 배포하려면 신중한 계획이 필요합니다. 다음 단계는 "MCX653106A-HDAT

펌웨어 및 드라이버 일관성:애플리케이션 성능에 재투자할 수 있는 상당한 CPU 절감 효과(종종 20-30%)스위치 구성:

• RoCE 트래픽(일반적으로 우선순위 3)에 지정된 특정 802.1p 우선순위 큐에 대해 스위치에서 PFC를 구현합니다. ETS는 이러한 큐에 대한 보장된 대역폭을 할당하도록 구성하여 버퍼 고갈을 방지해야 합니다.노드 구성:
• 각 서버에서 "MCX653106A-HDAT 호환
• " 드라이버가 로드되고 NIC의 QoS 설정이 스위치 구성과 일치하도록 합니다. 'cma_roce_mode'와 같은 도구를 사용하여 라우팅 가능성을 위해 RoCE 모드를 v2로 설정합니다.확장의 경우 아키텍처는 확장성이 뛰어납니다. 새로운 컴퓨트 또는 스토리지 용량을 추가하는 것은 "NVIDIA Mellanox MCX653106A-HDAT"을 갖춘 새 서버를 배포하고 기존 리프 스위치에 연결하는 것만큼 간단합니다. 패브릭의 논블로킹 특성은 클러스터가 성장함에 따라 성능이 예측 가능하게 유지되도록 보장합니다.

5. 운영 모니터링, 문제 해결 및 최적화고성능 RoCE 패브릭을 유지하려면 강력한 모니터링이 필요합니다. "MCX653106A-HDAT

모니터링:애플리케이션 성능에 재투자할 수 있는 상당한 CPU 절감 효과(종종 20-30%)문제 해결:

• 성능이 저하될 때 첫 번째 확인은 일반적으로 PFC 스톰 또는 버퍼 고갈로 인한 패킷 손실입니다. NIC의 하드웨어 카운터는 이러한 문제에 대한 즉각적인 통찰력을 제공합니다. "MCX653106A-HDAT 데이터시트
• "을 검토하면 카운터를 특정 이벤트와 연관시키는 데 도움이 됩니다.최적화: 고급 튜닝에는 인터럽트 중재 매개변수 및 PCIe 읽기 요청 크기 조정이 포함됩니다. 가상화된 환경의 경우 SR-IOV를 활성화하고 가상 함수(VF)를 VM에 직접 할당하면 지연 시간이 더욱 줄어듭니다.하드웨어를 소싱할 때 성능 향상 대비 "
• MCX653106A-HDAT 가격"을 이해하는 것은 예산 책정에 필수적입니다. 구매할 준비가 된 경우 공인 유통업체의 "

판매용 MCX653106A-HDAT" 목록을 확인하면 정품 제품과 지원을 보장할 수 있습니다.6. 요약 및 가치 제안NVIDIA Mellanox의 "MCX653106A-HDAT

기존 TCP/IP에 비해 프로세스 간 통신에 대한 지연 시간 최대 95% 감소애플리케이션 성능에 재투자할 수 있는 상당한 CPU 절감 효과(종종 20-30%)200GbE 및 NVMe-oF와 같은 차세대 스토리지 프로토콜을 지원할 수 있는 미래 보장형 인프라

• 네트워크 아키텍트, DevOps 엔지니어 및 운영 리더에게 고효율 데이터 센터로 가는 길은 올바른 빌딩 블록으로 시작됩니다.