착각 검증 일보 — 방법론
개발 하루가 만든 '좋아 보이는 결과' 가 실제로 검증된 것인지를 사람이 아닌 기계가 매일 아침 점검한다. 보고서는 서술 모델이 쓰지 않고 버전 관리 이력·실험 대장·모델 등록부·자동 테스트·검수층 산출만 읽어 만든다.
1. 보고서 구조
보고서 절 6개:
- 비전공자용 — 오늘 무엇이 생겼고, 무엇이 증명됐나
- 핵심 수치 — 산출물에서 읽음, 재현 명령 병기
- 개발자용 — 증거
- 오늘의 검수 항목
- 검수자 체크리스트 — 착각 징후 6종
- 용어
원칙: 핵심 수치마다 재현 방법을 병기하고, 보고서 스스로 수치를 다시 계산하지 않는다(수치 대조는 별도 검수층에 맡긴다). 재현 방법은 '같은 입력 해시면 같은 수치' 를 확인할 수 있는 명령 하나로 적는다.
2. 착각 징후 6종과 오늘 판정
| 징후 | 무엇을 보는가 | 오늘 |
|---|---|---|
| 결과가 전부 성공으로 나온다 | 그날 채점된 가설이 모두 전 다리 통과인지 본다. 기각·미달이 섞여 있어야 정상이다. | 있음 |
| 검증이 자기 코드 출력을 되풀이한다 | 자동 테스트 산출물이 신선한지, 실패 없음이 실제 실행 결과인지 본다. | 없음 |
| 수치가 문서에만 산다 | 문서의 수치가 산출물과 대조되는지(환각 검수 오류·계약 통과율) 본다. | 없음 |
| 기준을 결과에 맞춰 바꾼다 | 합격 기준 변경이 사전등록 대장의 재등록으로만 일어났는지 본다. | 없음 |
| 복잡성이 검증보다 빨리 자란다 | 새로 등재된 층 수와 표본이 얇은 항목을 함께 본다. | 없음 |
| 만든 사람이 검증한다 | 변경의 작성 주체와 검수 서명의 분리를 본다. | 있음 |
3. 오늘 수치
| 항목 | 값 |
|---|---|
| 보고서 날짜 | 2026-09-29 |
| 종합 판정 | 주의 (징후 2/6) |
| 자동 테스트 통과 / 실패 | 53 / 0 |
| 오늘 실험 대장 행 | 1 |
4. 한계
- 징후 '없음' 은 점검한 여섯 가지 조건이 오늘 관측되지 않았다는 뜻이지, 결과가 맞다는 증명이 아니다.
- 검수자 서명 칸은 사람이 채운다. 서명이 없으면 외부 검증은 없는 것으로 읽는다.