피드백 루프 · 검증

피드백 루프 · 검증

틀리면 다시 — PLAN · EXECUTE · VERIFY.

Feedback Loop — 출력을 검증하고, 틀리면 재시도시키는 메커니즘입니다.

패턴

• VERIFY 단계 — PLAN → EXECUTE → VERIFY → REPORT
• Deterministic checks — 린터, tsc, unit test — 모델 판단보다 신뢰
• Evals — 골든 셋·회귀 벤치
• Retry with error — 실패 로그를 다음 턴에 주입

CI 통합

• PR마다 에이전트 diff + 테스트 필수
• Pre-commit hook — 포맷·시크릿 스캔

점진적 하네스

• 데모에서 실패한 지점에만 장치 추가
• “완벽한 하네스” 한 번에 X → 관측 → 수정 반복

에이전트가 스스로 “완료”라고 해도, VERIFY 없으면 믿지 마세요.

"검증 없는 자율은 자신감 넘치는 환각이다."

이번 호 키워드

· 피드백
· VERIFY
· 테스트
· Eval