test(setup): 자식 프로세스를 띄우는 시험이 잰 시간으로 timeout을 정한다

자식 프로세스를 띄우는 Vitest 시험 91개(24파일)가 기본 timeout 10초에
기대고 있었다. 셋은 FE-GATE-013에서만 도는 tests/system 시험이다.
기본값은 프로세스 안에서 도는 시험에 맞춘 값이다. 부하가 높은
desktop에서는 자식 프로세스 시험이 평소보다 크게 느려진다.
FE-GATE-020 drill 사본에서 평소 0.4~1.2초인 문서 시험이 10.6초 걸려
실패했다(2026-11-12). 가장 위험한 것은 tests/architecture/app-build-input
.test.ts로, desktop에서 이미 5.7초까지 걸렸다.

무엇을 고칠지는 desktop 계측으로 정했다.
- test:coverage 묶음(maxWorkers=4)과 test:unit을 세 번씩 돌렸다. 시험마다
  띄운 자식 프로세스는 child_process 함수를 감싸 기록했고, 소요 시간은
  JSON reporter로 받았다.
- 시험마다 실제 timeout은 task.timeout으로 기록했다.
- 자식 프로세스를 띄우는 시험 140개 중 88개가 기본값이었다. tests/system은
  그 묶음에 없어서, 아래 검사가 잡은 셋을 따로 세 번 쟀다.

고친 것:
- tests/helpers/child-process-timeout.ts의 childProcessTimeout(<잰 최대
  ms>)는 그 15배를 30초 단위로 올린 값이다. 15배는 위 0.7초 → 10.6초에서
  왔다. 시험마다 자기가 잰 최대값을 인자로 적어 근거가 호출 자리에 남는다.
- describe 안의 기본값 시험이 모두 자식 프로세스를 띄우면 describe에,
  일부만 띄우면 그 시험에 준다. 프로세스 안에서 도는 시험의 hang을 늦게
  잡지 않으려는 것이다.
- tests/setup.ts가 child_process 함수를 감싼다. 기본 timeout인 시험이
  자식 프로세스를 띄우면 그 호출에서 실패시키고, helper 이름을 알린다.
  helper나 시험이 import한 스크립트가 띄워도 잡는다. util.promisify가
  읽는 속성은 원래 함수에서 옮긴다.
- docs/work/reference/testing.md 2절에 값 정하는 법과 이 검사를 적었다.

버린 것:
- 전역 testTimeout 올리기: 프로세스 안 시험의 hang을 늦게 잡는다.
- 시험마다 손으로 정한 숫자: 근거가 남지 않고, 이미 있는 값도
  60_000·120_000처럼 근거가 없었다.
- 자식 프로세스를 띄우지 않게 바꾸기: 검사 스크립트를 CLI 그대로 시험하는
  것이 이 시험들의 목적이라 범위가 커진다.
- 파일에 timeout 선언이 있는지만 보는 정적 검사: helper가 띄우는 경우와
  같은 파일의 다른 시험을 놓친다.

위험:
- hook(beforeAll 등)에서 띄우는 프로세스는 검사하지 않는다. 계측에서
  hook이 띄운 곳은 둘이고, 둘 다 180초를 선언했다.
- 같은 파일 안에서 it.concurrent로 도는 시험이 섞이면 어느 시험의
  timeout인지 틀릴 수 있다. 지금은 그런 시험이 없다.
- 다운스트림 시험이 기본값으로 자식 프로세스를 띄우면 test:unit 등이
  실패한다. 메시지가 helper를 알린다.

검증(desktop):
- 다섯 검사(test:unit·check:types·check:ci·lint·verify:documentation)
  rc=0.
- 자식 프로세스를 띄우는 시험 파일 40개와 tests/scale: rc=0, 검사 위반 0.
- tests/system: 115개 중 18개 실패. 모두 bwrap 호스트 제약이고 검사
  위반은 0이다.
- 변이: 검사를 끄면 tests/unit/child-process-timeout.test.ts가 실패한다.
  tracked-artifacts describe의 timeout을 지우면 그 시험이 검사 메시지로
  실패한다.
- 재현: CPU 10% 제한에서 app-build-input·registry-governance·hosting-probe
  ·design-system-rules를 돌렸다. main 650d22fa는 11개가 10초 timeout으로
  실패했다. 이 커밋은 71개 모두 통과했고, 가장 긴 시험은 17.7초였다.
This commit is contained in:
DongHyeonka
2026-11-12 11:22:59 +09:00
parent 6b4f703c59
commit 91962e24e3
28 changed files with 202 additions and 59 deletions
@@ -17,6 +17,7 @@ import path from "node:path";
import { pathToFileURL } from "node:url";
import { afterEach, describe, expect, it } from "vitest";
import { childProcessTimeout } from "../helpers/child-process-timeout.ts";
/**
* This suite's budget, not the file's. The 10s default is sized for pure-JS
@@ -242,7 +243,7 @@ describe("provider guardian transaction protocol", () => {
await expect(lstat(rawPath)).rejects.toMatchObject({ code: "ENOENT" });
await expect(lstat(sealedTempPath)).rejects.toMatchObject({ code: "ENOENT" });
await expect(readdir(path.join(workspace, "provider-evidence/untrusted"))).resolves.toEqual([]);
});
}, childProcessTimeout(253));
it("creates no evidence for empty or truncated guard input", async () => {
const { startProviderGuardian } = await import(
@@ -279,7 +280,7 @@ describe("provider guardian transaction protocol", () => {
await expect(readdir(path.join(workspace, "provider-evidence")))
.resolves.toEqual(["untrusted"]);
}
});
}, childProcessTimeout(1_226));
it.each(["raw", "sealed"] as const)(
"cleans the independently bound %s private alias when peer bootstrap validation fails",
@@ -308,6 +309,7 @@ describe("provider guardian transaction protocol", () => {
await expect(readdir(path.join(workspace, "provider-evidence")))
.resolves.toEqual(["untrusted"]);
},
childProcessTimeout(250),
);
it("cleans guardian-created objects when the parent closes immediately after guard", async () => {
@@ -321,7 +323,7 @@ describe("provider guardian transaction protocol", () => {
.resolves.toEqual({ code: 125, signal: null });
await expect(readdir(path.join(workspace, "provider-evidence/untrusted"))).resolves.toEqual([]);
await expect(readdir(path.join(workspace, "provider-evidence"))).resolves.toEqual(["untrusted"]);
});
}, childProcessTimeout(314));
// G-1: a guardian that rejects its guard must exit then, not when the parent
// finally closes stdin. The client waits for READY with stdin open, so a
@@ -340,7 +342,7 @@ describe("provider guardian transaction protocol", () => {
}
await expect(readdir(path.join(workspace, "provider-evidence/untrusted"))).resolves.toEqual([]);
await expect(readdir(path.join(workspace, "provider-evidence"))).resolves.toEqual(["untrusted"]);
});
}, childProcessTimeout(430));
it("publishes the pinned sealed inode and preserves it only after commit EOF", async () => {
const {
@@ -410,7 +412,7 @@ describe("provider guardian transaction protocol", () => {
});
await expect(lstat(rawPath)).rejects.toMatchObject({ code: "ENOENT" });
await expect(readFile(sealedPath)).resolves.toEqual(bytes);
});
}, childProcessTimeout(448));
it("owns raw and sealed publication through the authenticated client lease", async () => {
const client = await import("../../scripts/lib/provider-guardian-client.ts") as
@@ -460,7 +462,7 @@ describe("provider guardian transaction protocol", () => {
await lease.commit();
await expect(lstat(lease.rawPath)).rejects.toMatchObject({ code: "ENOENT" });
await expect(readFile(lease.sealedPath)).resolves.toEqual(bytes);
});
}, childProcessTimeout(383));
it("cleans published evidence on EOF before commit and permits a same-workspace retry", async () => {
const workspace = await createWorkspace("provider-guardian-published-eof-");
@@ -483,7 +485,7 @@ describe("provider guardian transaction protocol", () => {
await retry.abort();
await expect(readdir(path.join(workspace, "provider-evidence/untrusted"))).resolves.toEqual([]);
await expect(readdir(path.join(workspace, "provider-evidence"))).resolves.toEqual(["untrusted"]);
});
}, childProcessTimeout(429));
it("fails closed when a separate trailing frame arrives after commit", async () => {
const { encodeProviderGuardianCommit } = await import(
@@ -501,7 +503,7 @@ describe("provider guardian transaction protocol", () => {
await expect(within(transaction.completion, PROCESS_HANDSHAKE_WATCHDOG_MS, "guardian trailing frame"))
.resolves.toEqual({ code: 126, signal: null });
await assertTransactionAbsent(transaction);
});
}, childProcessTimeout(301));
it("uses pinned fallback identities after a guardian hard death", async () => {
const { startProviderGuardian } = await import(
@@ -522,7 +524,7 @@ describe("provider guardian transaction protocol", () => {
await expect(lstat(lease.rawPath)).rejects.toMatchObject({ code: "ENOENT" });
await expect(lstat(lease.sealedTempPath)).rejects.toMatchObject({ code: "ENOENT" });
await expect(lstat(lease.sealedPath)).rejects.toMatchObject({ code: "ENOENT" });
});
}, childProcessTimeout(380));
it("cleans a linked raw inode when killed before READY and retries immediately", async () => {
const { startProviderGuardian } = await import(
@@ -568,7 +570,7 @@ describe("provider guardian transaction protocol", () => {
await retry.abort();
await expect(readdir(rawDirectory)).resolves.toEqual([]);
await expect(readdir(evidenceRoot)).resolves.toEqual(["untrusted"]);
});
}, childProcessTimeout(524));
it("preserves an external raw canary created after startup checks", async () => {
const { startProviderGuardian } = await import(
@@ -618,7 +620,7 @@ describe("provider guardian transaction protocol", () => {
.resolves.toEqual([]);
await expect(readdir(path.join(workspace, "provider-evidence")))
.resolves.toEqual(["untrusted"]);
});
}, childProcessTimeout(425));
it("allows exactly one same-kind guardian without deleting the winner", async () => {
const { startProviderGuardian } = await import(
@@ -655,7 +657,7 @@ describe("provider guardian transaction protocol", () => {
.resolves.toEqual([]);
await expect(readdir(path.join(workspace, "provider-evidence")))
.resolves.toEqual(["untrusted"]);
});
}, childProcessTimeout(945));
it("exits nonzero after cleanup when the diagnostic stderr pipe is closed", async () => {
const { decodeProviderGuardianReady } = await import(
@@ -683,7 +685,7 @@ describe("provider guardian transaction protocol", () => {
.rejects.toMatchObject({ code: "ENOENT" });
await expect(lstat(path.join(evidenceRoot, ready.sealedTempLeaf)))
.rejects.toMatchObject({ code: "ENOENT" });
});
}, childProcessTimeout(469));
it("expires an uncommitted lease only after cleaning every owned object", async () => {
const { decodeProviderGuardianReady } = await import(
@@ -733,7 +735,7 @@ describe("provider guardian transaction protocol", () => {
await lease.commit();
await expect(lstat(lease.rawPath)).rejects.toMatchObject({ code: "ENOENT" });
await expect(readFile(lease.sealedPath)).resolves.toEqual(bytes);
});
}, childProcessTimeout(1_126));
it("signals guardian exit only while the provider scope latch is active", async () => {
const lifecycle = await import("../../scripts/lib/provider-guardian-client.ts") as