Skip to content

chore(verification): enable independent reviews and Codex publishing - #252

Merged
anton061311 merged 3 commits into
devfrom
chore/drop-251-harness
Nov 19, 2026
Merged

anton061311 merged 3 commits into
devfrom
chore/drop-251-harness

Conversation

@anton061311

@anton061311 anton061311 commented Nov 19, 2026 •

Copy link
Copy Markdown
Collaborator

1. 📝 요약

AI 검증이 같은 설명과 가정을 반복하는 문제를 줄이도록 독립 검증 스킬과 지침을 연결한다. 사용자 승인에 따라 Codex도 commit·push·PR과 하네스 브랜치의 지침 편집을 수행할 수 있게 한다.
최종 커밋 3d5cc52에서 전체 하네스 PASS, 백엔드 906개 테스트 통과(실패·오류·스킵 0).

2. 🔧 변경 사항

  • 보고서 열람 전 반례 작성, 공유 가정의 별도 근거 확인, Standards/Spec/Assumptions 분리 판정과 SHA·스킬·하네스·실행 증거 기록
  • 동일 구현자의 검사는 참고 결과로 남기고 별도 컨텍스트 또는 사람의 추가 검토 요구
  • 드롭 지침과 문서 색인에 스킬 연결. 현재 PC의 개인 루트 지침과 하네스에도 적용
  • Codex의 일반 commit·push·PR 허용. 지침·검증 도구 편집과 HARNESS_EDIT는 하네스 브랜치로 제한. 다른 브랜치의 테스트 보호·마이그레이션 보호·hook 우회 금지 유지
  • 중첩 worktree의 경로 판별 결함과 .patch 파일 읽기 오차단 수정
  • Git 제외된 개인 하네스 변경은 integration.patch로 배포. 임시 사본에서 역적용·재적용 후 바이트 일치 검사
  • 도메인 동작·API·이벤트·사업 정책·기존 불변식·테스트 단언 변경 없음

3. 🔎 리뷰 포인트

사람이 판단할 정책 쟁점

  • 내부 구현 선택만 진행하고 금액·구매 자격·재고 소유·UNKNOWN·환불·공개 계약·열린 질문은 사람 결정으로 남기는 경계 채택 여부
  • 동일 구현자의 자기검증을 독립 검증 완료로 인정하지 않는 절차 채택 여부
  • 개인 하네스를 다른 PC에도 적용할지, 팀 공용 도구로 전환할지

남은 위험

현재 PC에는 권한과 지침 연결을 적용했다. 다른 PC는 같은 이전 버전의 개인 하네스가 있어야 배포 패치를 적용할 수 있다. 새 checkout에는 스킬·문서·드롭 지침이 제공되지만 개인 전역 스킬 자동 발견까지 보장하지 않는다. 브랜치명 제한은 OS 권한 분리나 보호 브랜치를 대체하지 않는다. 별도 컨텍스트도 같은 모델 편향을 완전히 제거하지 않는다.

4. 🧪 테스트

  • 기존 지침 baseline과 새 스킬 적용 시뮬레이션: 자기검증/시간 압박/증거 없음, 오래된 작성자 로그에서 INCOMPLETE 유지. 애플리케이션 테스트로 취급하지 않음
  • python3 tools/harness/guard/test_guard.py : 하네스·드롭·일반 브랜치 각각 60개, 실패 0
  • python3 tools/harness/test_doc_check.py: 18개, 실패 0
  • python3 tools/verification/test_integration.py: 1개 통과, 임시 사본 역적용·재적용 일치
  • 링크·frontmatter·diff 공백 검사와 패치 역적용 가능성 검사 통과
  • 최종 SHA 3d5cc52에서 HARNESS_EDIT=1 bash tools/harness/harness-check.sh: RESULT PASS, ./gradlew cleanTest build 성공(7분 26초), 906개·실패 0·오류 0·스킵 0, 꺼진 수용 테스트 없음. 경고 1개는 하네스 PR용 HARNESS_EDIT 안내. 중단 실행은 제외
  • 별도 컨텍스트 검증자가 사전 반례 작성 후 최종 SHA의 권한·절차를 검토: 범위 내 PASS. 이후 최종 SHA 전체 하네스 PASS 확인
  • 원시 기록은 Git 제외된 .ai-output/verification-251/에 보관

5. 🔗 관련 이슈

Closes #251

@anton061311 anton061311 self-assigned this Nov 19, 2026
@anton061311
anton061311 marked this pull request as ready for review November 19, 2026 01:37
@anton061311 anton061311 added this to the Phase 2 - FANQ milestone Nov 19, 2026
@anton061311
anton061311 merged commit 8a88834 into dev Nov 19, 2026
2 checks passed
@anton061311
anton061311 deleted the chore/drop-251-harness branch November 19, 2026 02:34
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

Projects

None yet

Development

Successfully merging this pull request may close these issues.

[Chore] AI 독립 검증 절차와 Codex 작업 권한 정비

1 participant