86 lines
7.3 KiB
Markdown
86 lines
7.3 KiB
Markdown
---
|
|
id: eead2379-94fe-463a-9e5e-06a01bf2105d
|
|
kind: QUESTION
|
|
slug: host-block-device-under-the-disk-image
|
|
title: disk image 는 최종적으로 어느 Host block device 위에 있는가
|
|
topic: storage-virtualization
|
|
topicName: 스토리지 가상화
|
|
project: virtualization
|
|
status: 초안
|
|
questionStatus: RESOLVED
|
|
lastVerifiedOn: 2026-09-21
|
|
studio: "https://hyeonworks.com/studio/documents/eead2379-94fe-463a-9e5e-06a01bf2105d/edit"
|
|
sourceRevision: no-commit · 밖에서 반입한 문서 한 편. 고정할 저장소 리비전이 없다
|
|
evidence:
|
|
- ../../../final/evidence/raw/2026-09-21-test-server-revalidation/50-storage-backend-state.txt
|
|
source:
|
|
- final/document.md#175-실제-테스트-서버에서-확인할-open-questions-oq-5
|
|
- final/document.md#158-host-block-layer
|
|
- final/document.md#159-여러-vm이-하나의-nvme를-공유하면
|
|
- final/document.md#141-qemu가-물리-ssd를-직접-제어하는-것은-아니다
|
|
- final/document.md#163-실제-i-o-scheduler-확인
|
|
---
|
|
|
|
# disk image 는 최종적으로 어느 Host block device 위에 있는가
|
|
|
|
세 VM의 qcow2와 공통 base는 모두 host 루트 파일시스템의 `/dev/nvme0n1p3` 위에 있다. 그 파티션은 `SAMSUNG MZVLQ256HAJD-00000` NVMe 장치 `nvme0n1`의 ext4 파티션이다. 따라서 현재 세 VM의 주 디스크 I/O는 같은 물리 NVMe를 공유한다.
|
|
|
|
## image 아래의 실제 block device
|
|
|
|
- 2026-09-21 재검증에서 `findmnt -T /var/lib/libvirt/images/kc-lab-1.qcow2`는 `/dev/nvme0n1p3 ext4 /`를 냈고, `lsblk`에서 상위 장치는 `nvme0n1`, 모델은 `SAMSUNG MZVLQ256HAJD-00000`이었다. base와 세 overlay는 모두 같은 `/var/lib/libvirt/images/` 아래에 있다.
|
|
|
|
- 「QEMU가 물리 SSD를 직접 제어하는 것은 아니다」에서는 백엔드가 qcow2 파일이면 QEMU 가 결국 호스트 리눅스에 파일 입출력을 요청한다고 적었다.
|
|
그 요청은 Host Kernel, Host Filesystem, Host Block Layer, NVMe Driver 를 지나 Physical NVMe 로 내려간다. 게스트의 스토리지 스택 아래에 호스트의 스토리지 스택이 한 번 더 존재할 수 있다.
|
|
- 「Host Block Layer」에서는 qcow2 와 RAW 의 파일 입출력이 호스트 파일시스템을 거쳐 실제 호스트 블록 입출력이 된다고 적고 경로를 이렇게 그렸다.
|
|
QEMU, vm1.qcow2, Host ext4/XFS, Host Block Layer, /dev/nvme0n1
|
|
- Host Block Layer에 도달한 I/O는 게스트의 PostgreSQL에서 시작했든 호스트 프로세스에서 시작했든 호스트의 블록 요청으로 처리된다.
|
|
- 여러 QEMU와 호스트 프로세스의 I/O는 같은 Host Block Layer를 거쳐 물리 NVMe로 전달된다. 초기 그림에는 Host Nginx가 따로 있었지만 현재 Nginx는 Edge VM 안에 있으므로 그 I/O도 edge QEMU 경로에 포함된다.
|
|
- 「실제 테스트 서버에서 확인할 확인할 항목」의 5번째 확인 항목에서는 확인 명령으로 lsblk 와 findmnt 를 들었다.
|
|
- 「Storage 관측 명령어」의 호스트 관측 명령 목록에도 lsblk 가 들어 있다.
|
|
- 「Host Block Layer」의 vm1.qcow2 와 /dev/nvme0n1 은 경로를 설명하려고 든 예시 이름이고 이 호스트에서 읽은 값이 아니다.
|
|
- 「측정 환경」에서는 2026-09-10 에 `df -h /` 를 돌려 `/dev/nvme0n1p3 226G 9.9G 204G 5% /` 를 받았다. 이 호스트의 루트 파일시스템이 그 파티션 위에 있다.
|
|
- 「디스크 — 오버레이는 얼마나 쓰나」의 `ls -l` 은 이미지가 `/var/lib/libvirt/images/` 아래에 모여 있는 것을 보였고, 같은 절의 `virsh pool-info default` 는 Capacity 225.31 GiB, Allocation 7.84 GiB, Available 217.46 GiB 를 냈다. 「디스크 — 오버레이는 얼마나 쓰나」에서는 그 Allocation 이 풀 전체, 곧 호스트 루트 파일시스템의 사용량이라고 적었다.
|
|
- 그래서 `default` 풀이 루트 파일시스템 위에 있고 게스트 두 대의 오버레이가 같은 디렉터리에 있다.
|
|
- 2026-09-21 재검증에서 이미지 경로를 `findmnt`로 루트 ext4 파티션까지 잇고, `lsblk`로 상위 NVMe 장치와 모델을 확인했다.
|
|
|
|
## 경로 확인 조건
|
|
|
|
- 이미지 경로가 앞 물음에서 이미 확정되어 있다고 보고 그 경로에서 시작한다. 백엔드가 파일이 아니라 호스트 블록 장치면 이 확인은 장치 이름에서 시작한다.
|
|
- 확인하는 동안 마운트 구성과 이미지 위치가 바뀌지 않는다고 전제한다.
|
|
- findmnt 가 보여 주는 source 이름이 물리 장치 이름과 다를 수 있다고 보고, 어느 상위 장치에 속하는지까지 lsblk 로 이어서 읽는다.
|
|
- 호스트에 붙어 두 명령을 같은 시각에 돌릴 수 있다고 본다.
|
|
|
|
## 세 VM이 공유하는 장치
|
|
|
|
현재 image 파일들이 어느 host block device를 공유하는지에 대한 미지수는 해소됐다. base와 세 overlay 모두 ext4 `/dev/nvme0n1p3`를 거쳐 같은 `nvme0n1`을 사용한다. 이 공유가 실제 cross-VM latency 간섭으로 이어지는지는 별도 부하 실험으로 남긴다.
|
|
|
|
## 공유와 contention은 다른 질문이다
|
|
|
|
- 확인만 한다. 마운트를 바꾸거나 이미지를 다른 장치로 옮기지 않는다. 배치를 바꾸면 지금 구성에서 무엇을 공유하는지 못 본다.
|
|
- 「Host Block Layer」에서는 예로 든 이름을 이 호스트의 값으로 옮겨 적지 않는다. 출력에 나온 이름만 적는다.
|
|
- 여기서 나온 장치 이름이 다음 두 물음의 입력이므로, 가상 머신마다 한 행으로 남기고 어느 이미지에서 나온 이름인지 함께 적는다.
|
|
- 여기서는 세 VM이 같은 NVMe를 공유한다는 사실까지만 확인한다. 이 공유가 지연에 미치는 영향은 별도 부하 실험에서 측정한다.
|
|
- VM의 `vda → qcow2` mapping과 `qcow2 → host block device` mapping은 서로 다른 계층이다. 앞쪽은 libvirt/QEMU 설정으로, 뒤쪽은 host mount와 block topology로 확인한다.
|
|
|
|
## 어떻게 따라 내려갔나
|
|
|
|
### 1. 이미지 경로마다 findmnt 로 마운트를 읽고 lsblk 로 그 아래를 잇는다
|
|
|
|
경로 하나에서 시작해 마운트, source device, 파티션, 상위 장치까지 한 줄기로 내려간다. 「실제 테스트 서버에서 확인할 확인할 항목」의 5번째 확인 항목에서는 든 두 명령 그대로이고, 이미지가 여럿이면 경로마다 같은 순서를 되풀이한다.
|
|
|
|
가상 머신이 늘어난 만큼 실행 횟수도 늘어난다.
|
|
|
|
### 2. 호스트 전체의 lsblk 를 먼저 한 장 받고 그 위에 이미지 경로를 얹는다
|
|
|
|
장치와 파티션의 전체 모양을 먼저 확보한 뒤 findmnt 로 각 이미지가 그 가운데 어디에 붙는지 표시해서, 두 가상 머신이 같은 장치를 쓰는지가 한 장에서 바로 보이게 한다.
|
|
|
|
이미지 경로와 마운트의 대응은 결국 findmnt 로 한 번 더 확인해야 한다.
|
|
|
|
### 3. 제외 — 가상 머신 한 대만 확인하고 나머지는 뒤로 미룬다
|
|
|
|
한 대만 따라 내려가도 경로의 모양은 확인된다. 그러나 이 물음이 답해야 하는 것에는 가상 머신들이 같은 장치를 공유하는지가 들어 있는데, 그것은 한 대의 출력만으로는 갈리지 않는다.
|
|
|
|
## image 경로가 바뀌면 아래 block device도 다시 잇는다
|
|
|
|
libvirt storage pool 위치나 mount 구성이 바뀌면 각 image 경로에서 `findmnt`와 `lsblk`를 다시 잇는다.
|