chore(review): 1105 실행 격리 조치 브랜치를 합친다
This commit is contained in:
@@ -864,7 +864,9 @@ Storybook static artifact를 production application artifact와 합치지 않는
|
||||
|
||||
- Vite dev server
|
||||
- 빠른 Chromium 중심 smoke
|
||||
- 로컬 `reuseExistingServer`
|
||||
- 떠 있는 dev server를 재사용하지 않는다. 빈 포트에 자기 dev server를 띄운다
|
||||
(1105/12-04, 13.6절). 예전에는 5173에 다른 checkout의 서버가 떠 있으면
|
||||
그 서버를 말없이 검사했다
|
||||
- 개발 중 route와 form 확인
|
||||
|
||||
#### Release 검증
|
||||
@@ -875,7 +877,7 @@ pnpm build
|
||||
-> Playwright release config
|
||||
```
|
||||
|
||||
- CI에서 기존 server 재사용 금지
|
||||
- 로컬과 CI 모두 기존 server 재사용 금지
|
||||
- production `dist`
|
||||
- 실제 runtime config/release manifest
|
||||
- base path와 hashed chunks
|
||||
@@ -989,6 +991,72 @@ Chromatic 같은 cloud visual service는 선택이다. 저장소 내부 Playwrig
|
||||
CI retry를 허용하는 경우 첫 실패 trace도 폐기하지 않는다. retry 후 통과한 test는
|
||||
flaky signal로 집계한다.
|
||||
|
||||
### 13.6 한 checkout에서 두 실행 (1105/12-04)
|
||||
|
||||
핵심: Playwright 실행마다 `TEST_RUN_ID`를 다르게 주면, 한 checkout에서 두
|
||||
실행이 동시에 돈다. 서버 포트는 run ID가 없어도 늘 빈 포트를 고른다.
|
||||
|
||||
예전에는 두 번째 실행이 둘 중 하나로 깨졌다.
|
||||
|
||||
- 고정 포트(e2e 4173 등) 때문에 `http://127.0.0.1:4173 is already used`로
|
||||
시작하지 못했다.
|
||||
- 시작하더라도 빌드가 첫 실행이 서빙 중인 `dist`를 비우고, Playwright가
|
||||
첫 실행의 결과 폴더를 비웠다.
|
||||
|
||||
```text
|
||||
TEST_RUN_ID=a playwright test
|
||||
-> config: 빈 포트 P를 고른다. TEST_E2E_PORT=P를 runner 환경에 쓴다
|
||||
-> web server: RUN_OUTPUT_ROOT=.tmp/runs/a 로 build
|
||||
-> .tmp/runs/a/dist, .tmp/runs/a/.generated/..., .tmp/runs/a/artifacts/release/...
|
||||
-> vite preview --port P --strictPort --outDir .tmp/runs/a/dist
|
||||
-> worker: 설정을 다시 읽고 TEST_E2E_PORT=P를 물려받아 baseURL이 같다
|
||||
-> 결과·report·JUnit: .tmp/runs/a/artifacts/tests/e2e/...
|
||||
```
|
||||
|
||||
- `.tmp/runs/<id>/` 아래 경로는 checkout 안 경로와 같다. `dist`는
|
||||
`.tmp/runs/<id>/dist`, `artifacts/tests/e2e/results`는
|
||||
`.tmp/runs/<id>/artifacts/tests/e2e/results`가 된다.
|
||||
- run ID가 없으면 지금까지와 같은 `dist`와 `artifacts/`에 쓴다. 게이트, CI
|
||||
upload, 증거 검사가 읽는 곳이다.
|
||||
- `.tmp/`는 git, Tailwind 소스 스캔, Vite watcher, vitest가 모두 건너뛴다.
|
||||
그래서 출력 루트는 `.` 또는 `.tmp/` 아래만 받는다.
|
||||
|
||||
| 변수 | 누가 읽나 | 없을 때 |
|
||||
|---|---|---|
|
||||
| `TEST_RUN_ID` | 다섯 Playwright 설정, `tests/e2e/preload-use.spec.ts` | `dist`, `artifacts/tests/<이름>/` |
|
||||
| `RUN_OUTPUT_ROOT` | 빌드 단계 전부(`scripts/build-frontend.ts`가 부르는 것), `vite.config.ts`. 설정이 web server에만 넘긴다 | `.` |
|
||||
| `TEST_E2E_PORT`, `TEST_VISUAL_PORT`, `TEST_CAPABILITIES_PORT`, `TEST_STORYBOOK_PORT`, `TEST_DEV_PORT` | 각 설정 | 빈 포트 |
|
||||
|
||||
- run ID는 글자·숫자·`.`·`_`·`-` 64자 이하이고 글자나 숫자로 시작한다.
|
||||
- 포트 변수를 주면 그 포트를 쓴다. 디버깅할 때 고정하는 용도다.
|
||||
예: `TEST_E2E_PORT=4173`.
|
||||
- `RUN_OUTPUT_ROOT`는 직접 export하지 않는다. 설정이 run ID에서 만든다. 빌드
|
||||
코드는 `TEST_RUN_ID`를 읽지 않는다. e2e가 저장소 복사본을 빌드할 때 그
|
||||
빌드는 복사본 자기 `dist`에 써야 하기 때문이다.
|
||||
- 규칙은 `scripts/lib/run-isolation.ts` 한 곳에 있다.
|
||||
|
||||
두 e2e 실행을 동시에 돌리는 예:
|
||||
|
||||
```bash
|
||||
TEST_RUN_ID=a corepack pnpm exec playwright test &
|
||||
TEST_RUN_ID=b corepack pnpm exec playwright test &
|
||||
wait
|
||||
```
|
||||
|
||||
한계:
|
||||
|
||||
- 게이트(`ci:gate`)와 증거 검사(`check:test-evidence`,
|
||||
`verify:browser-capability-evidence`)는 기본 경로만 읽는다. 게이트는 run ID
|
||||
없이 한 checkout에서 하나씩 돌린다. run ID를 준 채 게이트를 돌리면 증거가
|
||||
기본 경로에 새로 생기지 않아 "not freshly produced"로 실패한다.
|
||||
- 동시에 도는 두 실행이 같은 run ID를 쓰면 다시 부딪힌다.
|
||||
- `src/.generated`는 실행마다 따로 두지 않는다. 생성기는 내용이 같으면 쓰지
|
||||
않고, 다르면 rename으로 바꾼다. 그래서 같은 선택으로 도는 실행끼리는
|
||||
안전하다. `PRODUCT_APP_ID`나 `VITE_PRODUCT_FEATURES`가 서로 다른 두 실행은
|
||||
서로의 인덱스를 바꾼다.
|
||||
- Storybook 내부 캐시(`node_modules/.cache`)는 공유한다.
|
||||
- `.tmp/runs/<id>/`는 자동으로 지우지 않는다. 다 보면 직접 지운다.
|
||||
|
||||
## 14. Coverage 정책
|
||||
|
||||
Coverage 목표는 “99% 완성도”와 같은 표현을 숫자로 대신하기 위한 것이 아니다.
|
||||
|
||||
Reference in New Issue
Block a user