완전성 평가 (Completeness Rating)
Term (용어)aiverifiedFri May 01

완전성 평가 (Completeness Rating)

별칭: Completeness Rating · 완전성 평가 · Spec 완전성

#completeness-rating#spec#validation#dem

정의

term/spec 이 AI 가 작업 가능한 수준인지 평가하는 지표. 90% 이상 이 될 때까지 반복 검증해야 대형 Spec 의 핵심 디테일 손실 50% 를 방지.

핵심 메시지

"대형 Spec → AI 에 전달 → 요약 요청 → 초기에 핵심 디테일 ~50% 손실." "→ Completeness Rating 90% 이상 이 될 때까지 반복 검증."

평가 항목 (예시)

항목합격 기준
Goal 명시
Constraints 명시✓ (최소 3개)
Acceptance criteria✓ (테스트 가능)
입력 / 출력 형식
도구·의존성

강의 활용

05 DEM lesson/dem-pharmacy-agent-live 트러블슈팅 슬라이드:

  • "Spec 손실 50% 가 일반적입니다."
  • "90% 완전성에 도달할 때까지 반복."
  • "에이전트 실패 시 코드를 직접 수정하지 마세요. 하네스(입력)를 수정 하세요."

주의사항

  • 90% 의 절대값: 경험적 임계치. 도메인에 따라 다름.
  • 자동 측정 한계: Completeness Rating 자동 산출이 어려움 — 체크리스트 형태 의 정성 평가 권장.
  • 하네스(입력) 수정 메시지: 본 카드의 가장 강한 메시지 — 코드를 고치지 말고 프롬프트 를 고쳐라.