From 03e7b7f50751159de78d4bcc724a171f2985c18d Mon Sep 17 00:00:00 2001 From: Yun Chan Date: Fri, 6 Nov 2026 21:47:37 +0900 Subject: [PATCH] docs: record the real-model polish probe and the thinking-model trap --- memory/project_status.md | 1 + 1 file changed, 1 insertion(+) diff --git a/memory/project_status.md b/memory/project_status.md index 1ef846c..37aefc2 100644 --- a/memory/project_status.md +++ b/memory/project_status.md @@ -8,6 +8,7 @@ - 교정 안전 규칙: 사용자가 실제로 쓴 어절은 절대 변경하지 않고, 후보가 동률이면 고치지 않으며, 조사는 그대로 두고 어절만 바꾼다. - 검증: core `transcript-correction.test.ts` 16, 데스크톱 `transcript-glossary.test.ts` 9, 데스크톱 offline 전체(2788)에서 드러난 회귀 2건을 수정해 재통과, workspace typecheck·변경 파일 ESLint·`test:hygiene` GREEN. 실회의 실측은 `GAP-MTG-04`로 남김. - **1.16.4 (AI 교열을 학습 기반으로):** 회의 전사 AI 다듬기(polish)가 일반 재작성 대신 학습 어휘를 교정 근거로 쓴다. 다듬기 전·후에 결정적 교정(사전 발음·라틴 식별자)을 돌리고, 모델에는 [사용자 용어]·[자주 쓰는 용어]·[사용자 표현]과 함께 「오인식이 문맥상 확실하면 학습 표기로 반드시 고치고, 근거 없는 일반 명사·조사·어미는 건드리지 말라」는 규칙을 넣는다. 받아쓰기 LLM 결과도 학습 표기로 다시 강제한다. 실데이터 프롬프트 블록 확인: HaramLog·Android·AI 대소문자 보존, 한영 자판 산물은 용어·힌트·예시에서 모두 제거, 실제 전사 3,005어절 결정적 변경 0. +- **1.16.4 실모델 검증(2026-11-06):** 실제 로컬 모델(gemma4:e4b)에 1.16.4 교열 프롬프트 + 실사용 학습 코퍼스를 넣어 확인했다. `하람록에`는 `HaramLog에`로, 사전 발음 `디에로`는 `D3RO`로 바뀌었고(단어 변경 2건, 주변 문장 무변경), 학습 용어가 없는 자연 문장은 **단어 교체 0건**(띄어쓰기만), 필러·말바꾸기는 제거됐다. **함정:** 이 모델은 thinking을 끄지 않으면(`think:false` 또는 `/no_think`) 출력 예산을 전부 thinking에 쓰고 content가 빈 문자열로 끝난다(`done_reason=length`) — 교열 청크 가드가 이를 거절한다. 새 LLM 프롬프트를 만들 때는 반드시 thinking을 끈다. - **1.16.2 배포 직후 실사용 DB로 직접 검증해 결함 발견 → 1.16.3으로 수정:** `users/_local/d3ro.db`(개인 문구 1,952·이핑 표본 2,522·회의 전사 3건)에 결정적 교정을 돌리니 실제 전사 3,005어절 중 **286개가 잘못 바뀌었다**(하면→라면, 이제→이게, 매일→메일, 정보→정도, 일단→일반). 학습 어휘 대부분이 일반 명사·부사·어미라 1자모 거리로는 오인식과 정상 단어를 구분할 수 없다. 수정: 결정적 교정은 **사전 발음 변형 + 사용자가 친 라틴 식별자**만(대소문자 보존), 한글 용어는 STT 힌트·LLM 교열 참고로만. 같은 코퍼스 재측정 **0/3,005**. 실제 사이드카(`large-v3-turbo`)로 한국어 TTS 픽스처 검증: 힌트 없음 `하람로그에` → 힌트 있음 `haramlog에`, 사전 발음 등록 시 `디에로`→`D3RO`. 한영 자판 오타 산물(`dkssudgktpdy`)은 힌트에서 제외. 교훈: **"학습 데이터를 쓴다"는 기능은 실사용 코퍼스로 오탐을 먼저 재고 나서 켠다.** ## v1.9.0 — 전사 구간·프리셋 프롬프트 동기화 (2026-09-27)