83 lines
7.8 KiB
Markdown
83 lines
7.8 KiB
Markdown
---
|
|
id: decbab8d-9c98-45c6-b5b8-e6162e407299
|
|
kind: REFERENCE
|
|
slug: a-speedup-that-removed-durability-is-not-an-optimization
|
|
title: 성능 개선 전후로 데이터 영속성 보장이 달라졌는지 확인한다
|
|
topic: storage-virtualization
|
|
topicName: 스토리지 가상화
|
|
project: virtualization
|
|
status: 초안
|
|
studio: "https://hyeonworks.com/studio/documents/decbab8d-9c98-45c6-b5b8-e6162e407299/edit"
|
|
sourceRevision: no-commit · 밖에서 반입한 문서 한 편. 고정할 저장소 리비전이 없다
|
|
source:
|
|
- final/document.md#171-성능과-durability의-trade-off
|
|
- final/document.md#152-가장-위험한-상황-거짓-완료
|
|
- final/document.md#156-writeback-=-위험-이라고-단정하면-안-되는-이유
|
|
- final/document.md#148-write-완료와-영속화는-다르다
|
|
- final/document.md#157-device-side-cache
|
|
- final/document.md#150-fsync-가-필요한-이유
|
|
- final/document.md#170-postgresql-예시-wal과-durability
|
|
- final/document.md#174-핵심-claim
|
|
---
|
|
|
|
# 성능 개선 전후로 데이터 영속성 보장이 달라졌는지 확인한다
|
|
|
|
데이터 영속성은 쓰기 지연과 별도로 확인한다. 예를 들어 `fsync()`를 제거해 응답 시간이 줄었다면 성능은 좋아질 수 있지만 전원 장애 후 데이터 보장은 달라진다. 가상 머신에서는 게스트의 flush 요청이 QEMU와 호스트 스토리지 계층을 거쳐 실제 저장장치까지 전달되는지도 함께 확인해야 한다.
|
|
|
|
## 빠름과 durability를 분리하는 이유
|
|
|
|
스토리지 설정을 바꿔 쓰기 지연이 줄었을 때 그것을 성능 항목으로만 적으면 어떤 실패에 노출됐는지가 기록에 남지 않는다. 개념 문서가 가장 위험한 상황으로 든 것은 거짓 완료다. 게스트가 WRITE 와 FLUSH 를 요청했는데 데이터는 호스트 RAM 에 있고 물리 스토리지에는 옛 데이터가 있는 상태인데도 게스트에게 FLUSH 완료라고 응답하는 경우다. 그러면 PostgreSQL 은 영속성이 확보되었다고 판단하고, 직후 호스트 전원이 나가면 RAM 의 데이터가 사라진다.
|
|
|
|
이 기준은 빨라진 것을 되돌리라고 하지 않는다. 무엇이 빨라졌는지 옆에 어느 보장이 사라졌는지를 같이 적게 한다.
|
|
|
|
완료의 네 단계를 설명하는 개념 기록 안에 각주로 두지 않고 따로 뺀 것은 이 기준이 필요해지는 때가 다르기 때문이다. 개념을 읽을 때가 아니라 설정을 고르고 성능 개선을 평가할 때 걸리는데, 각주로 두면 다음에 같은 판단을 하는 사람이 그때 이것을 찾지 못한다.
|
|
|
|
## 성능 비교 전에 지킬 계약
|
|
|
|
### 1. 완료를 네 단계로 갈라 어디까지 보장되는지 적는다
|
|
|
|
개념 문서는 write() 완료와 writeback 완료와 fsync/flush 완료와 전원 장애에도 안전한 durability 를 서로 다른 것으로 놓았다. write(fd, data, size) 가 성공했다는 것만으로 정전 이후 생존이 보장되지 않으므로, 필요한 시점에 fsync(fd) 를 불러 변경 내용을 필요한 영속성 경계까지 반영하도록 요청한다. 어떤 구성을 적을 때 이 네 단계 중 어디까지가 보장되는지를 함께 적는다.
|
|
|
|
### 2. 빨라진 구성에서 사라진 경계를 이름으로 적는다
|
|
|
|
무엇이 몇 밀리초 줄었는지보다 먼저, 그 변경이 위 네 단계 중 어느 것을 건너뛰게 했는지를 적는다. 개념 문서가 그린 전달 경로는 게스트가 요구한 durability 에서 시작한다. 거기서 Guest Filesystem, Guest Block Layer, virtio, QEMU 와 backend, Host Storage, Device 로 이어진다. 이 경로는 어디에서 의미가 끊겨도 결과가 같아서, 끊긴 곳을 짚지 못하면 그 구성이 무엇을 보장하는지 다음 사람이 다시 조사해야 한다.
|
|
|
|
### 3. 거짓 완료를 성능 항목으로 분류하지 않는다
|
|
|
|
FLUSH 완료 응답을 받은 쪽은 그 데이터가 살아남는다고 가정하고 그 다음 동작을 한다. PostgreSQL 이라면 COMMIT 을 성공으로 처리한다. 이 가정이 틀린 상태는 느려지는 것이 아니라 응답한 내용이 사실과 다른 것이므로, 개념 문서는 이것을 durability contract 가 깨지는 correctness 문제로 적었다.
|
|
|
|
### 4. 캐시 모드를 이름만 보고 안전과 위험으로 가르지 않는다
|
|
|
|
개념 문서는 none 을 캐시 자체가 없음으로, writeback 을 무조건 위험으로 읽는 것이 부정확하다고 적었다. cache=writeback 을 골라도 정상적인 스택이라면 게스트의 fsync 와 FLUSH 는 virtio FLUSH 와 QEMU 와 백엔드를 지나 호스트의 sync 와 flush 로 전달된다. 필요한 완료 확인 뒤에 게스트로 완료가 돌아간다. 개념 문서는 정확한 표현을 이렇게 적었다 — writeback caching 에서는 volatile cache 가 존재할 수 있으므로 Guest 의 flush/fsync semantics 가 전체 backend/storage stack 에서 올바르게 보존되는지가 중요하다.
|
|
|
|
그래서 이 기준은 어느 캐시 모드를 쓰라고 말하지 않는다. 2026-09-21 runtime 구성을 확인했을 때 세 VM의 주 디스크는 모두 `cache=writeback`이었다. 이 값은 현재 구성을 말해 줄 뿐, 전원 장애에도 안전하다는 뜻은 아니다. 실제 durability는 guest의 flush/fsync 의미가 QEMU·host filesystem·device까지 보존되는지 별도로 확인해야 한다.
|
|
|
|
### 5. DB 부하에서는 애플리케이션이 쓰는 영속성 규약을 함께 적는다
|
|
|
|
PostgreSQL 은 WAL 등의 durability protocol 을 사용하며 필요한 시점에 스토리지 동기화를 수행한다. 가상 머신의 스토리지 계층이 flush 와 fsync 의 의미를 제대로 보존하지 않으면 애플리케이션이 전제한 영속성과 실제 스토리지 동작이 어긋난다. 그래서 설정만 적지 않고 그 위에서 도는 애플리케이션이 무엇을 언제 동기화하는지도 같이 적는다.
|
|
|
|
## 쓰기 성능을 비교할 때
|
|
|
|
- 스토리지 관련 설정이나 코드를 바꿔 쓰기 지연이나 커밋 지연이 줄었을 때
|
|
- QEMU 의 캐시 모드를 고르기 전
|
|
- Direct I/O 를 켜거나 끄기 전
|
|
- fsync() 호출을 더하거나 뺄 때
|
|
- 파일시스템의 마운트 옵션을 고를 때
|
|
|
|
## 빨라도 제외해야 하는 구성
|
|
|
|
- 영속성을 실제로 포기해도 되는 데이터가 있다. 다시 만들 수 있는 캐시나 파생 파일이 그렇고, 그때는 빨라진 것이 정당한 선택이다. 이 기준이 요구하는 것은 포기를 막는 것이 아니라 무엇을 포기했는지 적게 하는 것이다.
|
|
- `cache=none`이나 Direct I/O를 사용해도 영속성이 자동으로 보장되지는 않는다. Direct I/O는 페이지 캐시를 우회하지만, 그 사실만으로 데이터가 즉시 비휘발성 저장장치에 기록됐다고 볼 수는 없다. 스토리지 컨트롤러나 장치에도 휘발성 쓰기 캐시가 있을 수 있다.
|
|
- 개념 문서는 실제 순서 보장과 영속성의 의미가 더 복잡하다고 밝혔다. 그래서 이 기준으로 특정 설정이 안전하다는 결론을 내지 않는다. 실제 운영에서는 장치의 flush 와 FUA semantics, power-loss protection 여부도 함께 본다.
|
|
- 이 저장소에는 영속성을 실제로 재 본 실험이 없다. 여기 적은 것은 개념 문서가 서술한 구분이고 이 호스트에서 확인된 동작이 아니다.
|
|
|
|
## fsync를 줄였을 때 확인할 것
|
|
|
|
- write() 완료 : 애플리케이션 호출이 돌아온 상태
|
|
- writeback 완료 : 캐시에서 아래로 내려간 것까지다
|
|
- fsync/flush 완료 : 여기서도 장치 쪽 휘발성 캐시가 뒤에 남을 수 있다
|
|
- 전원 장애에도 안전한 상태 : 위 셋과 다른 단계로 센다
|
|
- 빨라졌다 : 어느 단계를 건너뛰었는지 옆에 적는다
|
|
- 포기해도 되는 데이터 : 다시 만들 수 있는 캐시 · 파생 파일
|
|
- 이 호스트에서 잰 영속성 값 : x
|