15 lines
936 B
Markdown
15 lines
936 B
Markdown
# Hyeonworks experience-foundation A/B
|
|
|
|
이 디렉터리는 실험 결과를 미리 주장하지 않는다. `experiment.yaml`은 동일 model/request와 arm별 1회
|
|
생성을 강제하는 실행 manifest이며, `status: planned`는 B arm의 accepted benchmark/blueprint/wireframe
|
|
exact refs가 아직 결속되지 않았다는 뜻이다.
|
|
|
|
```bash
|
|
python3 .claude/hooks/first_draft_experiment.py plan hyeonworks/experiments/experience-foundation-ab/experiment.yaml
|
|
python3 .claude/hooks/first_draft_experiment.py validate hyeonworks/experiments/experience-foundation-ab/experiment.yaml
|
|
python3 .claude/hooks/first_draft_experiment.py compare hyeonworks/experiments/experience-foundation-ab/experiment.yaml
|
|
```
|
|
|
|
외부 모델 실행이나 비용은 자동 승인하지 않는다. 실제 두 생성의 model receipt와 출력 exact SHA가 없는
|
|
상태에서 `completed`로 바꾸거나 B 우위를 주장하면 validator가 거부한다.
|