Moait
홈인기 피드모든 블로그모든 태그
홈인기 피드모든 블로그모든 태그

컨테이너처럼 쓰고, VM처럼 격리하기 2편 - GPU 패스스루 계층과 GPU 8장 VM의 부팅·메모리 구성

NAVER D2 faviconNAVER D2·DevOps·
KubernetesGPU PassthroughIOMMUVFIOCDI
2026년 11월 18일0

AI 요약

이 글은 AI가 요약했어요. 정확한 내용은 꼭 원문을 확인해 주세요!

핵심 요약

NAVER D2의 GPU 8장 VM 구성을 통해 IOMMU/VFIO/CDI 기반의 PCIe 패스스루를 구현하고 BAR 매핑, 대용량 페이지, NUMA 구성을 최적화해 부팅 시간과 대역폭 문제를 해결했습니다.

구현 방법

  • IOMMU(VT-d) 활성화 및 intel_iommu=on iommu=pt 등 커널 부트 옵션과 1G 대용량 페이지 설정 적용
  • VFIO-pci 바인딩 및 QEMU의 -device vfio-pci로 GPU/NVMe 연결, 콜드 플러그로 부팅 전 연결
  • CDI를 통한 컨테이너에 필요한 VFIO 디바이스 파일 노출 및 VM 내 GPU 제어 구성
  • BAR 매핑 최적화: BAR0(제어)와 BAR2(GPU 메모리) 크기 기반 매핑, THP=always로 페이지 폴트 감소
  • 게스트 NUMA(enable_numa, numa_mapping) 적용으로 2개 NUMA 노드에 GPU/NIC 매핑 및 호스트 소켓 간 거리 정보 반영

주요 결과

  • 부팅 시간: GPU 8장 VM이 4분에서 141~151초 Ready로 단축
  • 대역폭: GPU→호스트 459 GB/s로 증가, 호스트→GPU 대역은 기존과 유사
  • BAR 매핑/메모리 할당: 1GiB 대용량 페이지로 BAR 매핑 페이지 수 대폭 감소, 게스트 메모리 분리로 NUMA 간 복사 거리 단축

연관 피드

%가 높을수록 이 글과 비슷할 가능성이 높아요!
No Image
88%

컨테이너처럼 쓰고, VM처럼 격리하기 4편 - IB 네트워크와 로컬 NVMe, vCPU 배치, 베어메탈 대비 성능

NAVER D2 faviconNAVER D2·2026년 11월 18일
No Image
79%

컨테이너처럼 쓰고, VM처럼 격리하기 1편 - 컨테이너와 VM의 차이, Kata Containers의 Pod 실행 구조

NAVER D2 faviconNAVER D2·2026년 11월 18일
No Image
75%

컨테이너처럼 쓰고, VM처럼 격리하기 3편 - Fabric Manager 파티션과 DRA를 이용한 GPU 할당

NAVER D2 faviconNAVER D2·2026년 11월 18일