refactor: 문서 사람처럼 작성하기
This commit is contained in:
+7
-7
@@ -31,12 +31,12 @@ source:
|
||||
|
||||
# 외부 요청은 Host DNAT와 Edge Nginx를 거쳐 Keycloak까지 어디를 지나는가
|
||||
|
||||
2026-09-21 같은 OIDC discovery 요청을 `tailscale0`, `virbr0`, edge의 `vnet13/enp1s0`, worker의 `vnet18/vnet19/enp1s0`에서 추적했다. 실제 경로는 **Tailscale ingress → host DNAT/source rewrite → edge Nginx → virbr0 L2 forwarding → worker Traefik**으로 확인됐다. edge Nginx가 TLS를 종료한 뒤 worker로 새 HTTP 연결을 만들기 때문에 ingress TLS 연결과 worker HTTP 연결은 같은 TCP flow가 아니다.
|
||||
2026-09-21 같은 OIDC discovery 요청을 `tailscale0`, `virbr0`, edge의 `vnet13/enp1s0`, worker의 `vnet18/vnet19/enp1s0`에서 추적했다. 실제 경로는 Tailscale ingress → host DNAT/source rewrite → edge Nginx → virbr0 L2 forwarding → worker Traefik으로 확인됐다. edge Nginx가 TLS를 종료한 뒤 worker로 새 HTTP 연결을 만들기 때문에 ingress TLS 연결과 worker HTTP 연결은 같은 TCP flow가 아니다.
|
||||
|
||||
## 2026-09-21에 캡처한 실제 경로
|
||||
|
||||
- 2026-09-21 재검증에서 workmachine의 요청은 `tailscale0`에서 `100.92.240.34:42996 → 100.83.212.4:443`으로 보였다. 같은 TCP sequence가 `vnet13`에서는 `192.168.122.1:42996 → 192.168.122.10:443`으로 보였다. destination DNAT뿐 아니라 source rewrite도 실제로 발생했다.
|
||||
- host `ip nat`에는 Tailscale의 `ts-postrouting` chain이 있고 fwmark `0x00040000` 패킷을 `MASQUERADE`하는 규칙이 존재했다. 따라서 기존 문서의 “lab_edge에 SNAT 규칙이 없으므로 edge가 원래 Tailscale client IP를 그대로 본다”는 설명은 현재 전체 netfilter 경로를 설명하지 못한다.
|
||||
- host `ip nat`에는 Tailscale의 `ts-postrouting` chain이 있고 fwmark `0x00040000` 패킷을 `MASQUERADE`하는 규칙이 존재했다. 따라서 Edge VM이 항상 원래 Tailscale client IP를 그대로 본다고 가정할 수 없으며, 현재 netfilter 전체 경로를 기준으로 source address를 확인해야 한다.
|
||||
- edge Nginx는 요청을 `192.168.122.10:<ephemeral> → 192.168.122.11:80` 또는 `.12:80`의 새 HTTP 연결로 전달했다. 6회 요청에서 `worker-1/3/5`는 `vnet18 → kc-lab-1 enp1s0`, `worker-2/4/6`은 `vnet19 → kc-lab-2 enp1s0`에서 동일 GET path가 확인됐다.
|
||||
- packet capture 전에 `lab-edge-dnat.service`가 active였는데도 libvirt `guest_input`의 generic reject가 allow rule보다 앞에 있어 외부 443가 `connection refused`였다. service를 restart해 allow rule을 chain 앞쪽으로 다시 삽입한 뒤 같은 OIDC 요청이 HTTP 200으로 복구됐다. service active 여부만으로 forwarding 가능 여부를 판단할 수 없다.
|
||||
- 이번 캡처 시점에는 host와 guest에서 `ethtool` feature 값을 확보하지 못했다. `79-network-offload-state.txt`에도 대상 이름만 남고 feature 출력은 없다. 따라서 `tcpdump`의 packet size/checksum을 wire-level 값으로 일반화하지 않고, 경로 판정에는 주소·포트·동일 HTTP path를 사용했다.
|
||||
@@ -59,15 +59,15 @@ source:
|
||||
전 : `tailnet:443` → 호스트 nginx → Traefik(게스트 .11/.12)
|
||||
후 : `tailnet:443` → 호스트 커널 DNAT → 엣지 nginx(.10) → Traefik(.11/.12)
|
||||
- 「엣지를 물리 호스트에서 VM 으로 옮기면 무엇이 새로 필요해지나」에서는 그렇게 옮겨도 L7 홉 수는 2홉 그대로라고 관측으로 적었다. 늘어난 것은 커널이 하는 L4 전달 한 번이다. 지금 호스트에는 `:443` 을 듣는 리스너가 없다.
|
||||
- 「엣지를 물리 호스트에서 VM 으로 옮기면 무엇이 새로 필요해지나」에서는 옮긴 이유를 성능이 아니라 더러워지는 층의 격리로 적었다. nginx 설정과 인증서, certbot, deploy 훅은 자주 갈아엎는 것들인데 호스트에 있으면 초기화가 불가능하고, 엣지 장애 실험이 SSH 까지 위험하게 만든다. 그 대가로 일곱 가지가 새로 필요해졌고 「엣지를 물리 호스트에서 VM 으로 옮기면 무엇이 새로 필요해지나」에서는 그중 DNAT 와 libvirt 방화벽 구멍 둘을 이 이동의 본질로 꼽았다. 그 둘을 본질로 본 것은 추론이라고 밝혔다.
|
||||
- Edge Nginx를 VM으로 분리하면서 외부 요청은 물리 호스트의 DNAT과 libvirt FORWARD 경로를 새로 지나게 됐다. 그래서 호스트 DNAT 규칙과 `guest_input`의 Edge VM 허용 규칙이 추가로 필요해졌다. nginx 설정과 인증서, certbot은 Edge VM에서 관리한다.
|
||||
- 「엣지를 물리 호스트에서 VM 으로 옮기면 무엇이 새로 필요해지나」에서는 호스트에서 게스트로 가는 요청이 OUTPUT 경로라 필터를 타지 않는다고 적었다. 밖에서 게스트로 들어오는 요청은 FORWARD 경로라 libvirt 의 guest_input 체인을 지난다.
|
||||
- 「`lab-edge-dnat.nft` — DNAT 파일이 자기 안에 적어 둔 네 가지」에서는 DNAT 파일에 forward 체인을 두지 않은 이유를 그 파일의 주석으로 적어 두었다. libvirt 의 guest_input 체인은 virbr0 으로 나가는 프레임을 reject 하며 끝난다. nftables 에서는 앞 base 체인의 accept 가 뒤 체인의 reject 를 멈추지 못하므로 구멍을 libvirt 체인 맨 앞에 뚫었고, 그래서 그 파일에 forward 체인이 없는 것은 실수가 아니다.
|
||||
- 「`lab-edge-dnat.nft` — DNAT 파일이 자기 안에 적어 둔 네 가지」에서는 DNAT 파일에 forward 체인을 두지 않은 이유를 그 파일의 주석으로 적어 두었다. libvirt 의 guest_input 체인은 virbr0 으로 나가는 프레임을 reject 하며 끝난다. nftables에서는 앞 base chain의 accept가 뒤쪽 libvirt reject를 막지 못하므로 Edge VM 허용 규칙을 `guest_input`의 reject보다 앞에 추가했고, 그래서 그 파일에 forward 체인이 없는 것은 실수가 아니다.
|
||||
- 「`lab-edge-dnat.nft` — DNAT 파일이 자기 안에 적어 둔 네 가지」에서는 이 DNAT 가 PREROUTING nat 에 있어 라우팅 결정보다 먼저 돌고 호스트의 로컬 소켓보다 이긴다고 적었다. 그래서 엣지를 띄운 채 전환하고, 되돌릴 때는 테이블 하나를 지운다.
|
||||
- 「`lab-edge-dnat.nft` — DNAT 파일이 자기 안에 적어 둔 네 가지」에서는 DNAT 만 하고 SNAT 는 하지 않는다고 적었다. 게스트의 기본 경로가 호스트여서 응답이 이 경로를 다시 지나고 conntrack 이 변환을 알아서 되돌린다. masquerade 를 붙이면 엣지가 모든 클라이언트를 192.168.122.1 로 보게 된다.
|
||||
- 「`lab-edge-dnat.service` — `ExecStartPost` 앞의 `-` 가 무엇을 봐주나」에서는 초기 설계의 의도를 설명했다. `ExecStartPost` 실패를 무시해 DNAT 자체는 살리고, 필요하면 유닛을 재시작해 accept 규칙을 다시 넣는 방식이었다. 하지만 2026-09-21 재검증에서 **유닛이 이미 active인 뒤 libvirt가 체인을 다시 쓰면 규칙 순서가 깨질 수 있음**이 확인됐다. 따라서 재시작은 현재 상태를 복구하는 수단일 뿐, 이후 libvirt chain rewrite까지 보장하는 persistence 해법으로 보지 않는다.
|
||||
- 「`lab-edge-dnat.service` — `ExecStartPost` 앞의 `-` 가 무엇을 봐주나」에서는 그 상태에서 유닛이 active 이고 아무 오류도 없다고 적고, 유닛이 active 라는 것은 DNAT 가 실렸다는 뜻이지 구멍이 뚫렸다는 뜻이 아니라고 추론으로 밝혔다. 그 상태를 실제로 재현해 보지는 않았다고 적혀 있다.
|
||||
- 「nftables 는 앞 체인의 `accept` 로 뒤 체인의 `reject` 를 막지 못한다」에서는 구멍이 빠졌을 때의 출력을 관측으로 남겼다. 호스트에서 게스트 주소로 친 curl 은 404 였고, 밖에서 tailnet 주소로 친 curl 은 connection refused 였다. reject 규칙의 카운터는 packets 4 bytes 240 으로 밖에서 친 횟수와 맞았다.
|
||||
- 「엣지를 물리 호스트에서 VM 으로 옮기면 무엇이 새로 필요해지나」에서는 안쪽과 바깥쪽을 한 번씩 쳐서 같은 값이 나오는지 보는 확인을 적었다. 둘 다 404 면 경로가 이어진 것이고, 안쪽만 404 면 nginx 설치 · DNAT · libvirt 구멍 셋 가운데 하나가 빠진 것이다.
|
||||
- 「`lab-edge-dnat.service` — `ExecStartPost` 앞의 `-` 가 무엇을 봐주나」에서는 그 상태에서 유닛이 active 이고 아무 오류도 없다고 적고, 유닛이 active라는 것은 DNAT가 적용됐다는 뜻이지 `guest_input` 허용 규칙까지 적용됐다는 뜻은 아니라고 추론으로 밝혔다. 그 상태를 실제로 재현해 보지는 않았다고 적혀 있다.
|
||||
- 「nftables 는 앞 체인의 `accept` 로 뒤 체인의 `reject` 를 막지 못한다」에서는 `guest_input` 허용 규칙이 없을 때의 출력을 관측으로 남겼다. 호스트에서 게스트 주소로 친 curl 은 404 였고, 밖에서 tailnet 주소로 친 curl 은 connection refused 였다. reject 규칙의 카운터는 packets 4 bytes 240 으로 밖에서 친 횟수와 맞았다.
|
||||
- 「엣지를 물리 호스트에서 VM 으로 옮기면 무엇이 새로 필요해지나」에서는 안쪽과 바깥쪽을 한 번씩 쳐서 같은 값이 나오는지 보는 확인을 적었다. 둘 다 404면 해당 경로가 이어진 것이고, 안쪽만 404면 nginx 설정, DNAT, libvirt `guest_input` 허용 규칙 가운데 하나를 확인한다.
|
||||
- 2026-09-21에는 host ingress, edge vnet/guest NIC, worker vnet/guest NIC에서 같은 OIDC 요청을 캡처해 실제 경로를 이어 붙였다. 따라서 과거의 기준 구조 그림과 현재 Edge VM 구조를 구분해 읽을 수 있게 됐다.
|
||||
|
||||
## capture를 해석한 기준
|
||||
|
||||
+5
-5
@@ -25,7 +25,7 @@ source:
|
||||
|
||||
# 이 호스트에서 vhost-net 이 실제로 packet datapath 를 맡고 있는가
|
||||
|
||||
2026-09-21 실제 `test-server`에서 세 VM의 QEMU 실행 인자를 읽었다. `kc-lab-1`·`kc-lab-2`·`kc-lab-edge` 모두 TAP netdev에 `vhost:true`와 `vhostfd`가 설정돼 있었다. 따라서 현재 세 VM의 packet datapath backend는 **vhost-net**이다. `lsmod`에 모듈이 올라와 있다는 사실만으로 결론내리지 않고 VM별 QEMU 구성까지 확인했다.
|
||||
2026-09-21 실제 `test-server`에서 세 VM의 QEMU 실행 인자를 읽었다. `kc-lab-1`·`kc-lab-2`·`kc-lab-edge` 모두 TAP netdev에 `vhost:true`와 `vhostfd`가 설정돼 있었다. 따라서 현재 세 VM의 packet datapath backend는 vhost-net이다. `lsmod`에 모듈이 올라와 있다는 사실만으로 결론내리지 않고 VM별 QEMU 구성까지 확인했다.
|
||||
|
||||
## runtime에서 확인한 backend
|
||||
|
||||
@@ -43,8 +43,8 @@ source:
|
||||
Feature negotiation · Queue configuration · Backend 연결
|
||||
Device reset · Control/configuration handling
|
||||
- 「vhost-net 미사용 또는 비효율적 datapath」에서는 초당 지나는 패킷이 많은데 QEMU 사용자 공간이 데이터 경로를 직접 처리하면 CPU 오버헤드가 커질 수 있다고 밝혔다. 관찰 대상으로는 QEMU CPU usage · vhost thread · packet rate · latency · context switch 를 들었다.
|
||||
- 원문의 3번째 확인 항목과 「실제 Linux에서 확인할 명령어」에 적힌 명령은 `lsmod | grep vhost` 하나다. 이어서 QEMU arguments 와 libvirt domain XML 도 확인한다고 적혀 있지만, 그 둘을 읽는 구체적인 명령은 제3부에 없었다.
|
||||
- 원문은 개념에서 질문을 만들고 실제 환경에서 확인하는 흐름의 예로 이 항목을 들었다. 출발점은 「vhost-net은 QEMU userspace를 우회해 packet datapath를 처리할 수 있다」였고, 실제 환경에서 확인할 내용은 「현재 테스트 Host에서 vhost-net이 실제 활성화되어 있는가?」였다.
|
||||
- `lsmod | grep vhost`만으로는 VM별 backend 사용 여부를 확정할 수 없다. QEMU arguments와 libvirt domain XML까지 함께 확인한다.
|
||||
- vhost-net은 QEMU userspace를 거치는 패킷 처리 비용을 줄일 수 있지만, 기능이 존재한다는 사실과 현재 VM이 실제로 사용하는지는 별개다. 이 환경에서는 QEMU 실행 인자와 libvirt XML을 함께 확인해 현재 backend를 판정한다.
|
||||
- 「이 부의 출처와 범위」에서는 이 실험대의 게스트를 3대로 적었고, 「철거 — 실제 출력 전문」의 철거 출력에는 domain 이름이 kc-lab-edge · kc-lab-1 · kc-lab-2 로 남아 있다. 원문의 `vm1`, `vm2` 표기는 이 가운데 k3s 노드 두 대를 가리킨다.
|
||||
- 「측정 환경」에서는 이 호스트의 판 번호를 실측으로 적었다. libvirt 12.7.0 · QEMU emulator version 11.1.1 · 커널 7.2.2-arch1-1 이다. 어느 backend 로 도는지는 그 줄에서 나오지 않는다.
|
||||
- 기존 구축 기록만으로는 backend를 확정할 수 없었지만, 2026-09-21 재검증에서 모듈 적재와 VM별 QEMU 인자를 함께 읽어 세 VM 모두 vhost-net을 사용하는 것을 확인했다.
|
||||
@@ -65,7 +65,7 @@ source:
|
||||
|
||||
- 백엔드가 무엇인지를 확정하는 데서 끊는다. 두 백엔드의 성능 차이는 그것을 비교하는 물음이 받는다.
|
||||
- 2026-09-21 이후에는 vhost-net 경로를 이 호스트의 확인된 현재 구성으로 사용할 수 있다. 다만 VM NIC backend 설정을 바꾸면 다시 확인해야 한다.
|
||||
- 명령을 기존 문서가 하나만 주었으므로, 나머지 둘을 무엇으로 읽었는지 실행한 명령과 출력을 함께 남긴다.
|
||||
- VM별로 같은 항목을 확인할 수 있도록 실행한 명령과 출력을 함께 남긴다.
|
||||
|
||||
## QEMU 실행 인자에서 vhost를 확인했다
|
||||
|
||||
@@ -77,7 +77,7 @@ source:
|
||||
|
||||
두 가상 머신의 libvirt domain 설정과 QEMU arguments 에서 백엔드 지정을 먼저 읽고, lsmod 출력으로 그 설정이 실제로 성립할 수 있는지 뒷받침한다. 가상 머신마다 다른 답이 나오는 경우까지 한 번에 잡힌다.
|
||||
|
||||
설정을 읽는 명령을 기존 문서가 주지 않아서 무엇으로 읽었는지 따로 적어야 한다.
|
||||
설정값을 확인할 때 사용한 명령과 런타임 출력을 함께 기록한다.
|
||||
|
||||
### 3. 「vhost-net 미사용 또는 비효율적 datapath」의 관찰 대상으로 되짚는다 — 제외
|
||||
|
||||
|
||||
+3
-3
@@ -26,7 +26,7 @@ source:
|
||||
|
||||
# 부하 중 network 가상화가 지연을 바꿀 만큼 호스트 CPU 를 쓰는가
|
||||
|
||||
2026-09-21 외부 `auth.hyeonworks.com` 경로에 OIDC discovery 4000회, concurrency 40 부하를 걸고 host의 vhost thread, QEMU vCPU, `/proc/softirqs`, `/proc/stat`, `vmstat`과 별도 probe latency를 함께 기록했다. 부하 중 vhost CPU와 NET_RX softirq는 실제로 증가했지만 host에는 39~56% idle CPU가 남았다. **현재 부하 수준에서는 network virtualization CPU cost가 관측되지만 host CPU를 포화시켜 지연을 지배했다는 근거는 없다.**
|
||||
2026-09-21 외부 `auth.hyeonworks.com` 경로에 OIDC discovery 4000회, concurrency 40 부하를 걸고 host의 vhost thread, QEMU vCPU, `/proc/softirqs`, `/proc/stat`, `vmstat`과 별도 probe latency를 함께 기록했다. 부하 중 vhost CPU와 NET_RX softirq는 실제로 증가했지만 host에는 39~56% idle CPU가 남았다. 현재 부하 수준에서는 network virtualization CPU cost가 관측되지만 host CPU를 포화시켜 지연을 지배했다는 근거는 없다.
|
||||
|
||||
## 부하 중 vhost와 softirq CPU 결과
|
||||
|
||||
@@ -39,7 +39,7 @@ source:
|
||||
- 「Host CPU Contention으로 network latency 증가」에서는 vhost-net · QEMU thread · softirq 도 호스트 CPU 를 쓰고, 따라서 네트워크 문제처럼 보여도 CPU 스케줄링 문제일 수 있다고 적었다.
|
||||
- 「vhost-net 최적화」에서는 QEMU 사용자 공간이 패킷마다 I/O 를 처리하면 호스트 커널과 사용자 공간을 오가는 전환 비용이 쌓인다고 밝혔다. 초당 지나는 패킷이 많아질수록 userspace/kernel transition · scheduling · copy · notification 비용이 커질 수 있다.
|
||||
- 「Interrupt / Notification 최적화」에서는 게스트와 호스트가 큐에 새 패킷이나 버퍼가 있음을 서로 알려야 한다고 적었다. 패킷마다 인터럽트나 알림이 지나치게 많이 발생하면 오버헤드가 커지므로 batching · interrupt moderation · queueing 이 중요하다고 밝혔다.
|
||||
- 「Keycloak Refresh Token 실험과의 관계」의 핵심은 refresh 경쟁과 네트워크 가상화 문제를 섞지 않는 것이다. 현재 lab에서는 클라이언트부터 PostgreSQL까지의 경로를 검증하고, Redis를 사용하는 별도 구조에서는 Redis 구간을 추가한다.
|
||||
- Refresh token 경쟁과 네트워크 가상화 비용은 별도로 측정한다. 현재 lab에서는 클라이언트부터 PostgreSQL까지의 경로를 확인하고, Redis를 사용하는 별도 구조에서는 Redis 구간을 추가한다.
|
||||
- 「Keycloak Refresh Token 실험과의 관계」에서는 Refresh Token 경쟁이나 DB lock 으로 오해할 수 있다고 든 다섯
|
||||
Node1 요청만 지연
|
||||
VM2 packet loss
|
||||
@@ -103,7 +103,7 @@ vhost 스레드와 softirq 가 올라도 지연이 그대로면 이 부하 수
|
||||
|
||||
### 4. 제외 — 초당 패킷 수를 따로 올려 vhost를 포화시킨다
|
||||
|
||||
그렇게 하면 vhost 처리 한계는 보기 쉽지만 현재 Keycloak 부하 시험의 영향 여부와는 다른 실험이 된다. 먼저 실제 Keycloak 부하 조건을 그대로 두고 측정하고, vhost 자체의 한계를 보려면 별도 네트워크 부하 실험으로 분리한다.
|
||||
그렇게 하면 vhost 자체의 처리 한계를 측정할 수 있지만 현재 Keycloak 부하 조건과는 다른 실험이 된다. 먼저 실제 Keycloak 부하 조건을 그대로 두고 측정하고, vhost 자체의 한계를 보려면 별도 네트워크 부하 실험으로 분리한다.
|
||||
|
||||
## 비용은 보였지만 host CPU 병목으로 보이지 않았다
|
||||
|
||||
|
||||
+4
-4
@@ -28,7 +28,7 @@ source:
|
||||
|
||||
# QEMU backend 와 vhost-net 의 차이가 이 호스트에서 실제로 보이는가
|
||||
|
||||
현재 세 VM의 packet datapath backend는 vhost-net으로 확인됐다. 2026-09-21 `kc-lab-2`에 libvirt 문서가 설명하는 `<driver name='qemu'/>`를 persistent XML로 넣고 실제 재부팅까지 했지만, **실행 중 QEMU argv는 여전히 `vhost:true`였다.** 따라서 이 세션에서는 QEMU userspace backend 조건 자체를 만들지 못했고, 두 backend 성능 비교는 아직 수행하지 않았다. XML 설정값만으로 runtime backend 전환을 성공했다고 처리하지 않는다.
|
||||
현재 세 VM의 packet datapath backend는 vhost-net으로 확인됐다. 2026-09-21 `kc-lab-2`에 libvirt 문서가 설명하는 `<driver name='qemu'/>`를 persistent XML로 넣고 실제 재부팅까지 했지만, 실행 중 QEMU argv는 여전히 `vhost:true`였다. 따라서 이 세션에서는 QEMU userspace backend 조건 자체를 만들지 못했고, 두 backend 성능 비교는 아직 수행하지 않았다. XML 설정값만으로 runtime backend 전환을 성공했다고 처리하지 않는다.
|
||||
|
||||
## 현재 baseline backend
|
||||
|
||||
@@ -63,11 +63,11 @@ source:
|
||||
커널 : 7.2.2-arch1-1
|
||||
- 그래서 「Data Copy 최적화」에서 든 조건 여섯 가운데 kernel version 과 QEMU version 은 이제 적을 수 있다. vhost configuration 과 offload, NIC capability 는 이 호스트에서 읽은 값이 없다.
|
||||
- 「철거 — 실제 출력 전문」와 「재구축할 때 무엇이 남아 있나」에서는 게스트를 지우고 다시 세울 때 무엇이 사라지고 무엇이 남는지 적었다. 게스트 디스크와 시드 ISO 는 사라지고 base.qcow2 와 libvirt 의 default 네트워크 정의는 남으며, 재구축해도 IP 가 같다. 다만 백엔드를 바꿔 다시 세운 기록은 없다.
|
||||
- 이 호스트에서 두 백엔드를 재 본 값은 기존 문서에 없다.
|
||||
- 이 호스트에서는 아직 QEMU userspace backend와 vhost-net을 같은 조건으로 비교한 측정값이 없다.
|
||||
|
||||
## A/B 비교 조건
|
||||
|
||||
- 같은 가상 머신을 다른 백엔드로 다시 구성해 띄울 수 있다고 본다. 그것이 이 실험 환경에서 되는지는 기존 문서에 적혀 있지 않다.
|
||||
- 같은 가상 머신을 다른 backend로 재구성할 수 있는지부터 확인한 뒤 성능 비교를 진행해야 한다.
|
||||
- 두 구성에 같은 부하를 걸 수 있다고 전제한다. 부하 도구와 요청 구성이 같아야 여섯 축을 견줄 수 있기 때문이다.
|
||||
- 부하를 걸기 전 값과 부하 중 값의 차이가 백엔드 차이보다 작다고 전제하지 않는다. 그래서 부하 전 값을 먼저 찍어 둔다.
|
||||
- 두 구성을 같은 시각에 나란히 돌릴 수 없다고 보고 차례로 잰다. 그 사이에 호스트의 다른 부하가 달라지면 값이 흔들릴 수 있다.
|
||||
@@ -77,7 +77,7 @@ source:
|
||||
- 같은 부하를 두 백엔드로 돌렸을 때 여섯 축이 실제로 얼마나 달라지는지.
|
||||
- 그 차이가 이 실험의 결과를 다르게 읽어야 할 만큼인지, 아니면 측정 흔들림 안인지.
|
||||
- 이 호스트가 내는 초당 패킷 수가 「vhost-net 최적화」에서 말한 「높아질수록 비용이 커지는」 구간에 들어가는지.
|
||||
- 여섯 축을 이 환경에서 무엇으로 재는지. 제3부가 도구를 적지 않아 실행하는 쪽이 정한다.
|
||||
- backend 전환 전후에 CPU, latency, throughput, softirq 등 어떤 지표를 사용할지 먼저 고정하고 같은 도구로 비교한다.
|
||||
|
||||
## 다른 환경의 수치는 제외한다
|
||||
|
||||
|
||||
+2
-2
@@ -54,7 +54,7 @@ source:
|
||||
kc-lab-edge : `52:54:00:aa:bb:10` · 192.168.122.10
|
||||
kc-lab-1 : `52:54:00:aa:bb:11` · 192.168.122.11
|
||||
kc-lab-2 : `52:54:00:aa:bb:12` · 192.168.122.12
|
||||
- 「DHCP 예약 (`ip-dhcp-host`)과 MAC `52:54:00`」에서는 `52:54:00` 이 QEMU/KVM 에 할당된 OUI(제조사 식별 접두사)라고 적고, 예약의 mac 과 VM 을 만들 때 준 mac 이 정확히 같아야 한다고 밝혔다. 다르면 예약이 조용히 무시되고 게스트가 동적 범위에서 아무 주소나 받는다.
|
||||
- 「DHCP 예약 (`ip-dhcp-host`)과 MAC `52:54:00`」에서는 `52:54:00` 이 QEMU/KVM 에 할당된 OUI(제조사 식별 접두사)라고 적고, 예약의 mac 과 VM 을 만들 때 준 mac 이 정확히 같아야 한다고 밝혔다. 값이 다르면 예약이 적용되지 않고 게스트가 동적 DHCP 범위의 주소를 받을 수 있다.
|
||||
- 「네트워크 — DHCP 예약의 실제 동작」에서는 예약과 리스를 다른 것으로 갈라 적었다. virsh net-dumpxml 의 예약은 줄 의도이고 virsh net-dhcp-leases 는 실제로 준 기록이라 둘이 다를 수 있다. 실제로 준 기록에는 `52:54:00:aa:bb:11` 이 192.168.122.11/24 을, `52:54:00:aa:bb:12` 가 192.168.122.12/24 을 각각 kc-lab-1 과 kc-lab-2 이름으로 받은 줄이 남아 있다.
|
||||
- 「이 부의 출처와 범위」와 「libvirt `default` 네트워크와 `virbr0`」에서는 게스트가 libvirt 의 default 네트워크에 붙는다고 적었다. 「libvirt `default` 네트워크와 `virbr0`」에서는 VM 이 한 대라도 뜨면 그 VM 의 vnetN 인터페이스가 virbr0 에 붙으면서 브리지가 UP 으로 바뀐다고 덧붙였다.
|
||||
- 「네트워크 — DHCP 예약의 실제 동작」에서는 VM 세 대가 돌 때 virbr0 이 UP 이고 전부 철거한 뒤에는 DOWN 이라는 출력을 남겼다. 상태가 갈린 이유를 브리지에 붙은 tap 인터페이스가 하나도 없어서라고 적었다.
|
||||
@@ -65,7 +65,7 @@ source:
|
||||
- 호스트에 붙어 virsh 와 ip 계열 명령을 실행할 수 있다고 본다.
|
||||
- 원문의 명령에는 `vm1`, `vm2`가 쓰였지만 「철거 — 실제 출력 전문」에 남은 실제 domain 이름은 `kc-lab-1`, `kc-lab-2`다. 따라서 실제 확인 명령에는 뒤쪽 이름을 쓴다. 「TAP의 역할」와 「실제 Linux에서 확인할 명령어」에서는 같은 명령의 domain 이름을 비워 두었다.
|
||||
- virsh domiflist 출력에 인터페이스 이름과 MAC 주소가 함께 나온다고 전제한다. 「TAP의 역할」도 「실제 Linux에서 확인할 명령어」도 이 명령의 출력 형식은 적지 않았다.
|
||||
- 두 가상 머신이 켜져 있는 동안 읽는다고 전제한다. 꺼진 가상 머신의 TAP 이 호스트에 남아 있는지는 기존 문서에 적혀 있지 않다.
|
||||
- TAP/vnet 매핑은 가상 머신이 실행 중인 상태에서 확인한다. 종료한 가상 머신의 인터페이스 상태는 이 측정에서 확인하지 않았다.
|
||||
|
||||
## runtime interface 이름의 수명
|
||||
|
||||
|
||||
+2
-2
@@ -24,7 +24,7 @@ source:
|
||||
|
||||
# 이 호스트의 가상 머신 네트워크는 Bridge 인가 NAT 인가 Routing 인가
|
||||
|
||||
2026-09-21 실제 libvirt network 정의를 읽었다. 이 실험대는 게스트를 `virbr0` Linux bridge에 붙이고 `default` network의 `forward mode='nat'`를 사용한다. 따라서 libvirt 분류로는 NAT network이고, 계층을 정확히 쓰면 **guest L2 연결은 bridge, 외부 egress는 NAT**다.
|
||||
2026-09-21 실제 libvirt network 정의를 읽었다. 이 실험대는 게스트를 `virbr0` Linux bridge에 붙이고 `default` network의 `forward mode='nat'`를 사용한다. 따라서 libvirt 분류로는 NAT network이고, 계층을 정확히 쓰면 guest L2 연결은 bridge, 외부 egress는 NAT다.
|
||||
|
||||
## 현재 libvirt network 구조
|
||||
|
||||
@@ -58,7 +58,7 @@ source:
|
||||
macvtap : LAN 에서 직접 IP(호스트↔VM 은 제외), WiFi 라 불가
|
||||
- 「libvirt `default` 네트워크와 `virbr0`」에서는 libvirt 의 default 네트워크를 소프트웨어 브리지 virbr0 과 거기 붙은 NAT 규칙으로 적었다. 기본 대역은 192.168.122.0/24 이고 호스트가 .1 을 가지며, VM 들은 이 브리지에 연결되어 서로 직접 통신하고 외부로 나갈 때만 호스트 IP 로 마스커레이딩된다. NAT 가 막는 것은 외부에서 VM 으로 들어오는 방향이다.
|
||||
- 「네트워크 — DHCP 예약의 실제 동작」에서는 이 호스트에서 ip -br addr show virbr0 을 돌린 출력을 남겼다. VM 세 대가 돌 때는 virbr0 이 UP 이고 192.168.122.1/24 을 갖고, 전부 철거한 뒤에는 주소는 그대로인 채 DOWN 이다.
|
||||
- 「nftables 는 앞 체인의 `accept` 로 뒤 체인의 `reject` 를 막지 못한다」와 「nftables 는 앞 체인의 `accept` 로 뒤 체인의 `reject` 를 막지 못한다」에서는 밖에서 게스트로 들어오는 방향이 FORWARD 경로라 libvirt 의 guest_input 체인을 지난다고 적었다. 그 체인이 oif "virbr0" reject 로 끝나 게스트 대역으로 새로 들어오는 연결을 거절했고, 밖에서 친 curl 은 connection refused 를 받았다. 호스트 안에서 같은 게스트 주소로 친 curl 은 OUTPUT 경로라 forward 를 타지 않아 404 로 응답했다. 그 reject 줄을 범인으로 확정한 것은 카운터다. 밖에서 curl 을 네 번 쳤을 때 그 줄에 packets 4 bytes 240 이 찍혀 있었다.
|
||||
- 「nftables 는 앞 체인의 `accept` 로 뒤 체인의 `reject` 를 막지 못한다」와 「nftables 는 앞 체인의 `accept` 로 뒤 체인의 `reject` 를 막지 못한다」에서는 밖에서 게스트로 들어오는 방향이 FORWARD 경로라 libvirt 의 guest_input 체인을 지난다고 적었다. 그 체인이 oif "virbr0" reject 로 끝나 게스트 대역으로 새로 들어오는 연결을 거절했고, 밖에서 친 curl 은 connection refused 를 받았다. 호스트 안에서 같은 게스트 주소로 친 curl 은 OUTPUT 경로라 forward 를 타지 않아 404 로 응답했다. 외부에서 `curl`을 네 번 실행했을 때 해당 reject 규칙의 카운터가 `packets 4 bytes 240`으로 증가했다. 이 값으로 외부 요청이 그 규칙에서 거절됐음을 확인했다.
|
||||
- 2026-09-21 재검증에서 `net-dumpxml`, `bridge link`, `ip route`를 직접 읽어 NAT network와 `virbr0` 내부 L2 연결을 확인했다.
|
||||
|
||||
## bridge와 NAT를 같이 읽는 기준
|
||||
|
||||
Reference in New Issue
Block a user