요약

SMB (중소기업) 대상 메시징 플랫폼 Podium 은 AI 에이전트의 도구 호출 흐름을 그때그때 AI 가 알아서 결정 하지 않고, 언제 어떤 도구를 호출해야 하는지 를 사람이 먼저 정교하게 설계해 사양으로 박아 두었다. 그 결과 — 엔지니어링 에스컬레이션 (AI 가 풀지 못해 사람에게 넘어가는 케이스) 이 90 % 감소 했다. 즉 같은 모델로 같은 사용자 요청을 처리하더라도, 도구 호출 흐름의 사전 설계 만으로 사람이 받는 부담이 1/10 로 줄어든다. 본 사례는 AI 자율성을 줄이고 사람이 미리 결정한 경로 안에서 작동하게 만드는 것 이 오히려 시스템 전체 효율을 올린다 는 점을 입증한다.

상세

변경

• 변경 변수: 도구 호출 결정 로직 의 정교한 사전 설계
• 결과: 엔지니어링 에스컬레이션 (사람 개입 필요) 90% 감소

에스컬레이션 의미

• 에이전트가 처리 못한 케이스 → 엔지니어링 팀에 티켓
• 90% 감소 = AI 가 자기 선에서 종결하는 비율 이 10배 증가

핵심 메시지

"무엇을 호출할지 미리 정의하면, 사람 호출 이 사라진다."

강의 활용

03 HRN lesson/hrn-sdd-evidence 비즈니스 사례 슬라이드 #2:

• "Podium — 엔지니어링 에스컬레이션 90% 감소. 도구 호출 설계 의 위력입니다."

주의사항

• 출처 정확성: LangChain 발표 1차. 강의 전 출처 확인.
• 에스컬레이션 정의 부연: 한국 청중에게 에스컬레이션 = 사람 개입 짧은 부연.
• 90% 의 한계: 어느 시점·어느 도메인 의 90% 인지 명확화.