Files
..

2026-09-21 이후 workmachine -> SSH alias test-server -> test-server 실제 재검증 증거.

기존 docs/virtualization/final/evidence/raw/lab-state-before-rebuild/ 의 2026-09-17 historical evidence와 섞지 않는다.
이번 디렉터리의 값은 모두 이번 재검증 세션에서 실제로 실행한 명령과 실험 결과다.

환경:
- workmachine에서 `ssh test-server`
- target user: donghyeon
- target node: test-server
- destructive scope: 명확한 virtualization lab 자원(kc-lab-*)만
- preserved: libvirt default network 자체, host SSH/Tailscale, 사용자 파일, unrelated service/config, repository existing changes
- final sanity: 2026-09-22 KST, kc-lab-1/2/edge running, k3s 2 nodes Ready, key workloads Running, external OIDC discovery HTTP 200

분류는 CONFIRMED / CHANGED / INCORRECT / ENVIRONMENT-SPECIFIC / UNVERIFIED 를 사용한다.

CONFIRMED:
- 현재 test-server는 Intel i5-1135G7, 4 physical cores / 8 logical CPUs, single NUMA node이며 /dev/kvm과 KVM을 사용한다.
- 현재 세 VM은 libvirt default NAT network의 virbr0에 붙고, 외부 egress는 NAT다.
- virtio-net runtime backend는 vhost-net이며 worker NIC는 single RX/TX queue다.
- 실제 ingress path는 Tailscale -> host DNAT/source rewrite -> edge VM nginx -> worker Traefik -> Keycloak이다.
- qcow2 overlay 3개는 공통 base.qcow2를 backing store로 사용하고 같은 host NVMe/ext4를 공유한다.
- 실행 중 주 디스크 QEMU cache mode는 writeback이고 host NVMe I/O scheduler는 none이다.
- host THP policy는 always, explicit HugeTLB pool/backing은 없으며 virtio-balloon 장치는 세 VM에 구성돼 있다.
- kc-lab-2에서 4096MiB -> 3584MiB -> 4096MiB live balloon round-trip과 guest-visible memory 감소/복원을 재현했다.
- 512MiB first-touch workload의 fault 증가는 minor fault 중심의 demand paging이었고 major fault/swap 증가는 없었다.
- 두 worker 2+2 vCPU를 동시에 CPU-bound로 만들어도 현재 8 logical CPU host에서는 guest steal 증가가 관측되지 않았다.
- storage load 실험에서는 같은 NVMe를 공유하는 VM 사이의 latency 간섭을 현재 조건에서 재현했다.
- final sanity state는 124-final-sanity-state.txt에 남겼다.
- k3s worker 재구축 뒤 lab host의 기본 `~/.kube/config`가 옛 CA를 들고 있어 plain `kubectl`이 x509 오류로 실패하는 상태를 확인했다. 현재 server kubeconfig를 다시 복사하고 `server:`를 `192.168.122.11:6443`으로 바꿔, 환경변수 없이 `kubectl get nodes -o wide`가 두 노드 `Ready`를 반환하도록 복구했다. 증거는 125-host-default-kubeconfig-refresh.txt다.

CHANGED:
- 과거 문서에 남은 16-core 값과 달리 현재 host truth는 4 cores / 8 logical CPUs다.
- 과거 host nginx 진입 구조에서 현재는 host DNAT -> kc-lab-edge nginx 구조로 바뀌었다.
- 2026-09-17의 DNAT/service 배포 상태와 2026-09-21 재검증 상태를 같은 현재값으로 취급하지 않는다.
- kc-lab-2의 과거 balloon/current-memory 관측값은 현재 재검증 시 지속 상태로 재현되지 않았다.
- package manager로 설치한 libvirt/QEMU/nginx의 exact version은 관측값이며 설치 pin이 아니다.

INCORRECT:
- 우리 DNAT 테이블에 SNAT가 없다는 이유만으로 원본 client IP가 edge까지 보존된다고 보는 설명은 현재 환경에서 틀렸다.
  2026-09-21 packet capture에서 Tailscale ts-postrouting MASQUERADE로 source가 192.168.122.1로 바뀌었다.
- L7 hop 수가 이전과 같다는 이유만으로 X-Forwarded-* 계약도 그대로라고 보는 설명은 틀렸다.
- lab-edge-dnat.service 시작 시 ExecStartPost로 guest_input allow rule을 한 번 삽입하면 계속 유지된다는 설명은 충분하지 않다.
  libvirt가 guest_input chain을 다시 만들면 allow rule이 reject 뒤로 밀릴 수 있다.
- XML에 <driver name='qemu'/>가 있다는 사실만으로 runtime network backend가 QEMU userspace로 바뀌었다고 판정하면 안 된다.
  실제 QEMU argv 확인이 필요하다.

ENVIRONMENT-SPECIFIC:
- CPU/RSS/memory pressure 수치, qcow2 allocation, storage latency, network latency, packet rate, VM-exit 비율, exact package/kernel versions는 이번 host와 측정 시점의 값이다.
- 이 수치들은 일반적인 KVM/libvirt 고정값으로 일반화하지 않는다.

UNVERIFIED:
1. 물리 host/edge/certificate까지 비운 완전한 00~06 clean rebuild.
   Worker teardown -> cloud-init -> k3s -> Keycloak/observability -> power-cycle recovery는 CONFIRMED지만 완전 clean rebuild와는 구분한다.
2. 운영 서버가 bare-metal인지 상위 hypervisor/cloud VM 위인지.
3. 동일 refresh token 동시 요청에서 virtualization layer saturation이 결과를 흔드는지.
4. 2/4/8 vCPU별 동일 Keycloak workload throughput/latency 비교.
5. QEMU userspace network backend와 vhost-net의 동일 조건 A/B 성능 비교.
   <driver name='qemu'/>를 넣고 재부팅해도 runtime argv가 vhost:true여서 userspace backend 조건을 만들지 못했다.
6. libvirt firewall_backend=iptables에서도 nftables backend와 같은 guest_input hole이 필요한지.
   전역 firewall backend 전환은 현재 edge 경로를 크게 건드리므로 이번 세션에서는 수행하지 않았다.

문서 상태:
- QUESTION 43개 중 RESOLVED 37개, OPEN 6개.
- OPEN 6개는 모두 위 UNVERIFIED 사유를 본문에 명시한다.
- RESOLVED 질문은 모두 evidence 경로를 가진다.
- tech-log-tree build/verify, audit-records, project-layout 검증은 마지막 재실행에서 PASS했다.