frontend-quality-gates / merge / static checks (pull_request) Canceled after 0s
frontend-quality-gates / merge / tests (pull_request) Canceled after 0s
frontend-quality-gates / merge / browser tests (pull_request) Canceled after 0s
frontend-quality-gates / FE-GATE-014 / config-compatibility (pull_request) Canceled after 0s
frontend-quality-gates / FE-GATE-026 / lab-performance (pull_request) Canceled after 0s
frontend-quality-gates / FE-GATE-028 / manual-accessibility-review (pull_request) Canceled after 0s
frontend-quality-gates / FE-GATE-015 / immutable-release-candidate (pull_request) Canceled after 0s
frontend-quality-gates / external-vulnerability-provider (pull_request) Canceled after 0s
frontend-quality-gates / external-provenance-provider (pull_request) Canceled after 0s
frontend-quality-gates / promote-verified-immutable-candidate (pull_request) Canceled after 0s
frontend-quality-gates / deploy-promoted-release (pull_request) Canceled after 0s
frontend-quality-gates / main / self-tests and removal drills (pull_request) Canceled after 0s
frontend-quality-gates / FE-GATE-019 / hosting-header (pull_request) Canceled after 0s
frontend-quality-gates / FE-GATE-021 / runbook-boot-config (pull_request) Canceled after 0s
frontend-quality-gates / FE-GATE-022 / runbook-chunk-mismatch (pull_request) Canceled after 0s
frontend-quality-gates / FE-GATE-023 / runbook-api-degradation (pull_request) Canceled after 0s
frontend-quality-gates / FE-GATE-024 / runbook-telemetry (pull_request) Canceled after 0s
frontend-quality-gates / FE-GATE-025 / runbook-release-rollback (pull_request) Canceled after 0s
frontend-quality-gates / FE-GATE-018 / field-web-vitals (pull_request) Canceled after 0s
frontend-quality-gates / FE-GATE-017 / diagram-review (pull_request) Canceled after 0s
문제: 자식 프로세스 시험의 timeout은 `childProcessTimeout(<잰 ms>)`로
정한다(docs/work/reference/testing.md 2절). 그런데 기본값이 아니라서
`tests/setup.ts` 검사에 걸리지 않는 손 숫자가 남았다. 리뷰가 센 54곳 중
둘(`browser-soak.contract.test.ts`의 `evaluateSoak` 인자)은 timeout이 아니고,
AST로 다시 세면 80곳이다: 시험·describe·hook에 쓴 숫자, `VERIFY_TIMEOUT`·
`PROCESS_HEAVY_TIMEOUT_MS`(파일 넷에 따로)·`PROVIDER_BASE_FIXTURE_TIMEOUT_MS`
같은 상수, `PROCESS_WATCHDOG_MS * 3` 같은 식. taxonomy는 옛 상수를 예로
들었다. 실측으로 보면 손 숫자 하나가 모자랐다: system 시험의 provider 묶음
30초는 desktop 여섯 번 중 두 번 넘겼다.
고친 것:
- 80곳을 desktop에서 잰 가장 긴 실행으로 `childProcessTimeout(<ms>)`에
넘긴다. coverage 묶음(maxWorkers=4)·test:unit 각 9회, integration 3회,
scale(traffic·session·composition·global-local) 3회, 시스템 컨테이너의
tests/system 6회, JSON reporter로 받았다. hook은 파일 시간에서 시험 합을
뺀 값이다. 시간 초과로 끝난 실행은 그 시간을 하한으로 넣었다.
- 상수 사본은 지운다. 한 파일 안에서 여럿이 쓰는 값만
`const X = childProcessTimeout(...)`로 둔다(`VERIFY_TIMEOUT`). guardian
시험의 lease는 시험 timeout이 아니라 `childProcessTimeout(0)`(helper의 최소
30초)로 둔다.
- `tests/unit/test-timeout-declarations.test.ts`가 tests/의 Vitest 파일을
Babel로 읽어 시험·describe·hook의 timeout 인자가 helper 호출(또는 그것을
담은 파일 상수)이 아니면 파일과 줄로 실패한다. 프로세스 안에서 도는 긴
시험(scale tier)도 같은 helper를 쓴다.
- taxonomy 예시, testing.md 2절, `.claude/rules/tests.md` 9번, helper 머리
주석을 같은 방법으로 맞춘다.
버린 대안:
- `tests/setup.ts` 검사를 「helper가 만든 값이 아닌 timeout」까지 넓히기.
helper 값은 30초 단위 숫자라 손으로 쓴 60_000과 가릴 수 없고, hook과
프로세스 안 시험은 보지 못한다.
- 프로세스 안 시험은 손 숫자 그대로 두기. 근거 없는 숫자가 남고 검사가
예외를 가져야 한다.
위험·한계:
- 값이 커진 곳이 있다(15배 규칙): `manual-code-blocks` 300초 → 900초,
provider 묶음 30초 → 480초 등. hang을 늦게 잡는다. 줄어든 곳도 있다
(scale traffic 60초 → 30초 등, 잰 값의 15배 안).
- 측정은 desktop 부하 6~35에서 했다. runner가 더 느리면 다시 잰다.
- 검사 시험은 Vitest 파일 전부를 파싱해 coverage 묶음에서 최대 13.5초
걸렸고, 그 값으로 자기 timeout을 준다. 이름 있는 함수를 콜백으로 넘긴
시험(`it("x", run, 30_000)`)은 못 찾는다.
- 다운스트림: 손 숫자 timeout이 있는 제품 시험은 test:unit에서 이 검사에
걸린다. 메시지가 helper를 알린다.
검증(desktop):
- RED: 검사 시험이 고치기 전 80곳을 파일·줄로 내고 실패. GREEN: 검사·
child-process-timeout 6개 통과. check:types·eslint(바뀐 34파일) rc=0,
verify:documentation PASS_SCOPED, 노트북 `scripts/verify.sh docs` OK.
- 측정 원자료: /tmp/claude-gates/w2fe2-t08m, -t08m2, -t08m3.
- 게이트 결과는 PR 본문에 적는다.
Refs: 1112/03-08
156 lines
5.9 KiB
TypeScript
156 lines
5.9 KiB
TypeScript
import { afterEach, describe, expect, it, vi } from "vitest";
|
|
|
|
import { createQueryClient } from "../../../src/adapters/query-cache/tanstack-query-cache.ts";
|
|
import { createTelemetryPipeline } from "../../../src/platform/telemetry/telemetry-pipeline.ts";
|
|
import type { InstalledHttpContract } from "../../../src/contracts/external-contract-runtime.ts";
|
|
import { TEST_CREATE_HTTP_CONTRACT } from "../../helpers/external-contract-fixture.ts";
|
|
import {
|
|
jsonRows,
|
|
networkFailure,
|
|
testExecutionContext,
|
|
testExecutor,
|
|
type Transport,
|
|
} from "../../helpers/traffic-test-kit.ts";
|
|
import { classifyCounterSeries } from "../../../scripts/scale/memory-slope.ts";
|
|
import { TEST_QUERY } from "../traffic/synthetic-traffic.ts";
|
|
import { recordScaleMetrics } from "../scale-artifact.ts";
|
|
import { childProcessTimeout } from "../../helpers/child-process-timeout.ts";
|
|
|
|
const TEST_COMMAND = TEST_CREATE_HTTP_CONTRACT as InstalledHttpContract<
|
|
unknown,
|
|
unknown,
|
|
unknown
|
|
>;
|
|
|
|
afterEach(() => {
|
|
vi.useRealTimers();
|
|
});
|
|
|
|
/**
|
|
* A long-lived scope signal that counts its listeners, standing in for the
|
|
* session-wide server-state scope every execution subscribes to.
|
|
*/
|
|
function countingScope() {
|
|
const controller = new AbortController();
|
|
let listeners = 0;
|
|
const signal = controller.signal;
|
|
const add = signal.addEventListener.bind(signal);
|
|
const remove = signal.removeEventListener.bind(signal);
|
|
Object.defineProperty(signal, "addEventListener", {
|
|
value: (...args: Parameters<AbortSignal["addEventListener"]>) => {
|
|
listeners += 1;
|
|
add(...args);
|
|
},
|
|
});
|
|
Object.defineProperty(signal, "removeEventListener", {
|
|
value: (...args: Parameters<AbortSignal["removeEventListener"]>) => {
|
|
listeners -= 1;
|
|
remove(...args);
|
|
},
|
|
});
|
|
let generation = 1;
|
|
return {
|
|
scope: () =>
|
|
Object.freeze({
|
|
generation,
|
|
fingerprint: `scope-${generation}`,
|
|
identities: Object.freeze({}) as never,
|
|
signal,
|
|
isCurrent: () => true,
|
|
}),
|
|
listeners: () => listeners,
|
|
nextGeneration() {
|
|
generation += 1;
|
|
},
|
|
generation: () => generation,
|
|
};
|
|
}
|
|
|
|
/**
|
|
* scale-architecture.md §33 / §44. Thousands of login/navigation/query/mutation/logout cycles.
|
|
* Every long-lived resource must return to (or stabilize at) its post-warm-up
|
|
* bound rather than grow with the number of cycles.
|
|
*/
|
|
describe("long-session logical leak checks", () => {
|
|
it("returns timers, listeners, leases, buffers and cache entries to a stable bound", async () => {
|
|
vi.useFakeTimers({ toFake: ["setTimeout", "clearTimeout"] });
|
|
const session = countingScope();
|
|
let cycle = 0;
|
|
const transport: Transport = () => (cycle % 7 === 0 ? networkFailure() : Promise.resolve(jsonRows(2)));
|
|
const executor = testExecutor(transport, { maxRetryAttempts: 1 });
|
|
const telemetry = createTelemetryPipeline({
|
|
transport: { send: () => {} },
|
|
schedule: () => {},
|
|
setTimer: () => 0,
|
|
clearTimer: () => {},
|
|
});
|
|
const queryClient = createQueryClient();
|
|
|
|
const series = { timers: [] as number[], listeners: [] as number[], buffered: [] as number[], cache: [] as number[] };
|
|
const CYCLES = 3_000;
|
|
for (cycle = 0; cycle < CYCLES; cycle += 1) {
|
|
// login: a new session scope generation every 250 cycles
|
|
if (cycle % 250 === 0) session.nextGeneration();
|
|
const execution = testExecutionContext({
|
|
maxPhysicalRequests: 3,
|
|
maxRetries: 1,
|
|
maxConcurrentRequests: 2,
|
|
});
|
|
const context = { routeId: "TEST_ROUTE", scope: session.scope(), execution };
|
|
// navigation + query through the query cache (bounded key cardinality)
|
|
const queryKey = ["session", session.generation(), cycle % 25];
|
|
const query = queryClient.fetchQuery({
|
|
queryKey,
|
|
queryFn: () => executor.execute(TEST_QUERY, { limit: 1 }, context),
|
|
});
|
|
// mutation
|
|
const mutation = executor.execute(TEST_COMMAND, { name: `c${cycle}` }, {
|
|
...context,
|
|
intent: Object.freeze({
|
|
intentId: `intent-${cycle}`,
|
|
operationId: "TEST_CREATE_ENTITY",
|
|
canonicalInputIdentity: `input-${cycle}`,
|
|
idempotencyKey: `key-${cycle.toString().padStart(6, "0")}`,
|
|
createdAtMonotonicMs: cycle,
|
|
}),
|
|
});
|
|
const [queryOutcome, mutationOutcome] = await Promise.all([query, mutation]);
|
|
if (queryOutcome.kind !== "SUCCESS" || mutationOutcome.kind !== "SUCCESS") {
|
|
await telemetry.emit({
|
|
kind: "session.operation.failed",
|
|
severity: "warning",
|
|
interactionId: execution.interaction.id,
|
|
payload: { query: queryOutcome.kind, mutation: mutationOutcome.kind },
|
|
});
|
|
}
|
|
// logout: the interaction ends
|
|
execution.cancellation.cancel();
|
|
expect(execution.traffic.concurrency.active).toBe(0);
|
|
|
|
if (cycle % 100 === 99) {
|
|
await telemetry.flush();
|
|
series.timers.push(vi.getTimerCount());
|
|
series.listeners.push(session.listeners());
|
|
series.buffered.push(telemetry.stats().buffered);
|
|
series.cache.push(queryClient.getQueryCache().getAll().length);
|
|
}
|
|
if (cycle % 250 === 249) {
|
|
// Scope generation changed: the previous generation's entries are garbage.
|
|
queryClient.removeQueries({ queryKey: ["session", session.generation()] });
|
|
}
|
|
}
|
|
|
|
await recordScaleMetrics("long-session", { cycles: CYCLES, ...series });
|
|
|
|
expect(vi.getTimerCount()).toBe(0);
|
|
expect(session.listeners()).toBe(0);
|
|
expect(classifyCounterSeries(series.timers, { warmupSamples: 3 })).toBe("stable");
|
|
expect(classifyCounterSeries(series.listeners, { warmupSamples: 3 })).toBe("stable");
|
|
expect(classifyCounterSeries(series.buffered, { warmupSamples: 3 })).toBe("stable");
|
|
expect(Math.max(...series.cache)).toBeLessThanOrEqual(25);
|
|
expect(Math.max(...series.buffered)).toBeLessThanOrEqual(200);
|
|
queryClient.clear();
|
|
telemetry.dispose();
|
|
}, childProcessTimeout(1_753));
|
|
});
|