Files
document-haness/docs/virtualization/tech-log-studio/network-virtualization/question/question-qemu-backend-vs-vhost-net-on-this-host.md
T

11 KiB

id, kind, slug, title, topic, topicName, project, status, questionStatus, lastVerifiedOn, studio, sourceRevision, evidence, source
id kind slug title topic topicName project status questionStatus lastVerifiedOn studio sourceRevision evidence source
bded6560-dc8d-473d-966c-5b037bb84c4c QUESTION qemu-backend-vs-vhost-net-on-this-host QEMU backend 와 vhost-net 의 차이가 이 호스트에서 실제로 보이는가 network-virtualization 네트워크 가상화 virtualization 초안 OPEN 2026-09-21 https://hyeonworks.com/studio/documents/bded6560-dc8d-473d-966c-5b037bb84c4c/edit no-commit · 밖에서 반입한 문서 한 편. 고정할 저장소 리비전이 없다
../../../final/evidence/raw/2026-09-21-test-server-revalidation/113-network-vhost-baseline-direct-node.txt
../../../final/evidence/raw/2026-09-21-test-server-revalidation/114-network-qemu-backend-define-precheck.txt
../../../final/evidence/raw/2026-09-21-test-server-revalidation/119-network-qemu-backend-boot.txt
../../../final/evidence/raw/2026-09-21-test-server-revalidation/120-network-qemu-driver-not-effective.txt
../../../final/evidence/raw/2026-09-21-test-server-revalidation/121-network-qemu-driver-restore-original.txt
../../../final/evidence/raw/2026-09-21-test-server-revalidation/123-libvirt-interface-driver-doc-excerpt.txt
final/document.md#122-open-question-oq-4
final/document.md#107-vhost-net-최적화
final/document.md#110-data-copy-최적화
final/document.md#111-interrupt-notification-최적화
final/document.md#117-이-구조에서-발생할-수-있는-문제-117-4

QEMU backend 와 vhost-net 의 차이가 이 호스트에서 실제로 보이는가

현재 세 VM의 packet datapath backend는 vhost-net으로 확인됐다. 2026-09-21 kc-lab-2에 libvirt 문서가 설명하는 <driver name='qemu'/>를 persistent XML로 넣고 실제 재부팅까지 했지만, 실행 중 QEMU argv는 여전히 vhost:true였다. 따라서 이 세션에서는 QEMU userspace backend 조건 자체를 만들지 못했고, 두 backend 성능 비교는 아직 수행하지 않았다. XML 설정값만으로 runtime backend 전환을 성공했다고 처리하지 않는다.

현재 baseline backend

  • 2026-09-21 재검증에서 현재 vhost baseline에서 kc-lab-2의 QEMU argv는 {"type":"tap",...,"vhost":true,"vhostfd":"31"}였다. host→.12:80 direct OIDC 2000회/concurrency 20은 2419.4 rps, avg 8.07 ms, p95 15.07 ms였다. 이 수치는 vhost 조건의 환경 의존 baseline이다.

  • 2026-09-21 재검증에서 inactive domain XML에 <driver name='qemu'/>를 넣는 것은 libvirt가 받아들였고 live XML에도 재부팅 후 그 요소가 남았다.

  • 2026-09-21 재검증에서 그러나 실제 재부팅 뒤 virsh domxml-to-native qemu-argv는 계속 vhost:true와 vhostfd를 냈다. 즉 XML 문자열만 보고 userspace backend로 전환됐다고 판단하면 틀린다.

  • 설치된 libvirt 문서(/usr/share/doc/libvirt/html/formatdomain.html)는 virtio NIC의 driver name='qemu'를 user-space backend, name='vhost'를 kernel backend로 설명한다. 현재 호스트의 실제 런타임과 문서상 기대는 일치하지 않았다.

  • 2026-09-21 재검증에서 실험 후 원본 inactive XML을 다시 virsh define했고 live datapath도 계속 기존 vhost-net 상태다. kc-lab-2는 Ready로 복구됐다.

  • 「vhost-net 최적화」에서는 QEMU 가 사용자 공간에서 패킷마다 I/O 를 처리하면 호스트 커널과 QEMU 사용자 공간 사이를 오가는 전환이 쌓인다고 적었다. 초당 패킷 수(packet rate)가 높아질수록 사용자 공간과 커널 사이의 전환 · 스케줄링 · 복사 · 알림 비용이 커질 수 있다.

  • 「vhost-net 최적화」에 적은 두 구성은 TAP 다음에 무엇이 오는지로 갈린다. QEMU userspace backend : TAP → QEMU → virtqueue vhost-net kernel backend : TAP → vhost-net → virtqueue

  • 「최종 기준 구조」에서는 최종 기준 구조에 두 Data Path 를 나란히 그렸다. 열한 칸 가운데 다른 곳은 TAP 다음 한 칸이고, 거기에 vhost-net 이 오느냐 QEMU virtio backend 가 오느냐로 갈린다.

  • 「vhost-net 최적화」에서 든 최적화 방향은 패킷마다 QEMU 사용자 공간이 끼어들던 처리를 커널 백엔드로 옮겨 컨텍스트 스위치와 사용자 공간 오버헤드를 줄이는 것이다.

  • 「Data Copy 최적화」에서는 virtio · virtqueue · vhost 구조가 버퍼 디스크립터(descriptor)로 불필요한 복사와 컨텍스트 스위치를 줄이도록 설계되어 있다고 적었다. 그렇다고 이를 항상 zero-copy 라고 일반화하면 안 된다고 못 박았다. 실제로 복사가 일어나는지는 아래에 따라 달라질 수 있다. Kernel version · QEMU version · vhost configuration offload · NIC capability · packet path · GSO/GRO/TSO

  • 「Interrupt / Notification 최적화」에서는 게스트와 호스트가 큐에 새 패킷이 들어왔음을 서로 알려야 한다고 적고, 패킷마다 인터럽트와 알림이 지나치게 많이 나가면 오버헤드가 커질 수 있다고 덧붙였다. 그래서 batching 과 interrupt moderation 과 queueing 이 중요하다.

  • 「vhost-net 미사용 또는 비효율적 datapath」에서는 초당 패킷 수가 높은 구간에서 QEMU 사용자 공간이 처리 경로를 직접 맡으면 CPU 오버헤드가 커질 수 있다고 밝혔다. 관찰할 것으로는 QEMU CPU usage · vhost thread · packet rate · latency · context switch 를 들었다.

  • 비교할 축은 여섯이다. Latency Throughput QEMU CPU Host CPU Context Switch Packet rate

  • 이 여섯 값을 어떤 도구로 읽을지는 현재 문서에 고정돼 있지 않으므로, 실행할 때 사용한 명령과 도구 버전을 함께 남긴다.

  • 「측정 환경」에서는 이 호스트의 판 번호를 실측으로 적었다. libvirt : 12.7.0 QEMU emulator version : 11.1.1 커널 : 7.2.2-arch1-1

  • 그래서 「Data Copy 최적화」에서 든 조건 여섯 가운데 kernel version 과 QEMU version 은 이제 적을 수 있다. vhost configuration 과 offload, NIC capability 는 이 호스트에서 읽은 값이 없다.

  • 「철거 — 실제 출력 전문」와 「재구축할 때 무엇이 남아 있나」에서는 게스트를 지우고 다시 세울 때 무엇이 사라지고 무엇이 남는지 적었다. 게스트 디스크와 시드 ISO 는 사라지고 base.qcow2 와 libvirt 의 default 네트워크 정의는 남으며, 재구축해도 IP 가 같다. 다만 백엔드를 바꿔 다시 세운 기록은 없다.

  • 이 호스트에서는 아직 QEMU userspace backend와 vhost-net을 같은 조건으로 비교한 측정값이 없다.

A/B 비교 조건

  • 같은 가상 머신을 다른 backend로 재구성할 수 있는지부터 확인한 뒤 성능 비교를 진행해야 한다.
  • 두 구성에 같은 부하를 걸 수 있다고 전제한다. 부하 도구와 요청 구성이 같아야 여섯 축을 견줄 수 있기 때문이다.
  • 부하를 걸기 전 값과 부하 중 값의 차이가 백엔드 차이보다 작다고 전제하지 않는다. 그래서 부하 전 값을 먼저 찍어 둔다.
  • 두 구성을 같은 시각에 나란히 돌릴 수 없다고 보고 차례로 잰다. 그 사이에 호스트의 다른 부하가 달라지면 값이 흔들릴 수 있다.

아직 없는 성능 차이

  • 같은 부하를 두 백엔드로 돌렸을 때 여섯 축이 실제로 얼마나 달라지는지.
  • 그 차이가 이 실험의 결과를 다르게 읽어야 할 만큼인지, 아니면 측정 흔들림 안인지.
  • 이 호스트가 내는 초당 패킷 수가 「vhost-net 최적화」에서 말한 「높아질수록 비용이 커지는」 구간에 들어가는지.
  • backend 전환 전후에 CPU, latency, throughput, softirq 등 어떤 지표를 사용할지 먼저 고정하고 같은 도구로 비교한다.

다른 환경의 수치는 제외한다

  • 현재 baseline backend는 vhost-net으로 확인됐다. 비교 실험은 이 구성을 먼저 측정한 뒤 같은 VM을 QEMU userspace backend로 바꿔 동일 부하를 다시 거는 순서로 진행한다.
  • 「Data Copy 최적화」에서 든 조건들(kernel version · QEMU version · vhost configuration · offload · NIC capability · packet path · GSO/GRO/TSO)을 함께 적지 않으면 이 측정을 다른 환경에 재사용할 수 없다. 앞의 둘은 「측정 환경」에서는 이미 적었으므로 잴 때 나머지를 채운다.
  • 이 호스트에서 잰 값이 없어 다른 장비의 백엔드 비교 수치를 근거로 삼지 않는다.
  • 어느 backend를 기본 구성으로 둘지는 두 조건의 측정 결과를 본 뒤 판단한다.

두 backend를 비교하는 방법

1. 지금 백엔드만 먼저 찍어 나중에 견줄 값을 만든다

구성을 바꾸지 않고 부하 전과 부하 중의 여섯 축을 한 번씩 기록한다. 가상 머신을 다시 구성하지 않으므로 지금 돌고 있는 Keycloak 실험을 멈추지 않아도 되고, 나중에 다른 백엔드를 잴 때 견줄 값이 생긴다.

한 구성의 값만으로는 이 물음이 닫히지 않는다.

2. 두 백엔드로 바꿔 가며 같은 부하를 건다

같은 VM을 vhost-net과 QEMU userspace backend로 각각 구성하고 동일한 부하를 걸어 여섯 축을 같은 방식으로 기록한다. 두 실행 사이에는 backend 외의 조건을 바꾸지 않는다.

가상 머신을 다시 구성하고 재시작해야 하므로 그동안 Keycloak 실험을 멈춰야 하고, 두 측정 사이에 호스트 상태가 달라지지 않도록 관리해야 한다.

3. 문헌의 백엔드 비교 수치를 가져다 쓴다 — 제외

실제 copy 경로와 offload 효과는 kernel·QEMU·vhost 설정·NIC capability·GSO/GRO/TSO에 따라 달라진다. 다른 환경의 수치는 방향을 이해하는 참고 자료일 뿐 이 호스트의 성능 차이를 대신하지 못한다.

backend를 가르려면 QEMU 인자와 thread를 다시 잡아야 한다

  1. 현재 baseline이 vhost-net임을 2026-09-21 QEMU 인자와 함께 기록한다.
  2. 부하를 걸기 전에 여섯 축을 한 번 찍어 둔다.
  3. 지금 구성에 부하를 걸고 여섯 축을 같은 시각에 기록한다. Latency 와 Throughput 과 Packet rate 는 부하 도구가 내는 값을 쓰고, QEMU CPU 와 Host CPU 와 Context Switch 는 호스트에서 읽는다.
  4. 같은 가상 머신을 다른 백엔드로 구성하고 같은 부하를 걸어 3 을 되풀이한다.
  5. 두 구성의 여섯 축을 나란히 적고, 「Data Copy 최적화」에서 든 조건들과 실행한 명령을 함께 증거로 남긴다.

두 구성의 여섯 축을 나란히 놓고 baseline 흔들림보다 큰 차이가 있는지 본다. 차이가 없다면 현재 packet rate에서는 backend 선택 영향이 관측되지 않은 것으로 기록한다. 차이가 반복되면 그 결과를 바탕으로 이후 실험의 backend를 정한다.