vignette/docs/ops/alliance-calibration-report-prompt-1.4.0-jsonrepair-envloaded-2026-08-07.md
Yun Chan 16e791e044 G0~G8 성과·동맹 측정 OS 작업 일괄 고정
8월 7일까지 워킹트리에만 남아 있던 미커밋 작업을 커밋한다. 여러 사본
폴더(worktree·clone)에 흩어져 있던 중간 스냅샷을 정리하기 전에 원본을
git 이력으로 고정하는 것이 목적이다.

- contracts/routes/services: measurement, outcome_trajectory, rupture_repair,
  deliberate_practice, calibration_transfer, supervision_research,
  multimodal_alliance, continuous_improvement 계열 신규 모듈과 테스트
- infra/db/init: 07~16 마이그레이션(측정 기반~calibration transfer 실행)
- apps/web: 세션 리뷰 카드·관리 화면·E2E 스펙 추가
- docs/ops: G0~G8 라이브 통합·배포·롤백 증거 문서와 evidence JSON/PNG
- scripts: smoke·ledger·릴리스 에이전트·NAS 프리뷰 운영 스크립트

engine.public 로그 .bak과 apps/web/test-results 산출물은 커밋에서 제외했다.
2026-08-08 01:30:53 +09:00

32 lines
1.7 KiB
Markdown

# Alliance measurement calibration comparison
> 교육용 합성 장면에 대한 모델 측정 보정 보고서다. 실제 내담자의 임상 결과를 뜻하지 않는다.
| 항목 | 기준 버전 | 후보 버전 | 변화 |
|---|---:|---:|---:|
| 방향 정확도 | 100.0% | 88.9% | -11.1% |
| 근거 재현율 | 88.9% | 94.4% | 5.6% |
| 근거 정밀도 | 72.7% | 81.0% | 8.2% |
| 무점수/실패 | 0 | 0 | +0 |
## 실행 식별자
- 기준: `claude_cli/claude-opus-4-8` · prompt `1.2.0` · run `g1-candidate-prompt-1.2.0-2026-08-06`
- 후보: `claude_cli/claude-opus-4-8` · prompt `1.4.0` · run `g1-candidate-prompt-1.4.0-jsonrepair-envloaded-2026-08-07`
- 비교 가능 예측: 24개
- 첫 실패 뒤 재시도 회복: 0개
- 평균 절대 점수 이동: 0.07208333333333335
## 후보 버전 장면별 결과
| 장면 | 관점 | 축 | 기대 | 값 | 상태 | 방향 | 근거 recall |
|---|---|---|---|---:|---|---|---:|
| oas-g0-001 | independent_observer | goal | low | 0.150 | ready | 통과 | 100.0% |
| oas-g0-002 | independent_observer | task | low | 0.150 | ready | 통과 | 100.0% |
| oas-g0-003 | independent_observer | bond | drop | 0.450 | ready | 실패 | 50.0% |
| oas-g0-005 | client_agent_report | bond | low | 0.100 | ready | 통과 | 100.0% |
| oas-g0-006 | client_agent_report | task | rise | 0.800 | ready | 통과 | 100.0% |
| oas-g0-007 | client_agent_report | bond | low | 0.050 | ready | 통과 | 100.0% |
| oas-g0-008 | client_agent_report | bond | high | 0.750 | ready | 통과 | 100.0% |
| oas-g0-008 | independent_observer | goal | low | 0.250 | ready | 통과 | 100.0% |
| oas-g0-008 | independent_observer | task | low | 0.250 | ready | 통과 | 100.0% |