답변이 좋아도 일이 끝나지 않았다면? Copilot Studio가 작업 완료를 평가합니다

에이전트가 친절한 답변을 만들었다고 고객 문의나 내부 요청이 해결된 것은 아닙니다. 업무형 에이전트의 평가는 실제 목적 달성까지 이어져야 합니다.

Copilot Studio의 Task completion grader는 관련성이나 답변 품질을 넘어, 에이전트가 의도한 과제를 성공적으로 수행했는지 평가합니다.

평가의 기준을 업무 결과로

원문은 기능적 실패를 찾고 신뢰성을 높이며 에이전트가 기대한 비즈니스 결과를 내는지 확인하는 데 도움이 된다고 설명합니다.

국내 팀에서는 “안내 문구가 포함됐다”와 “요청된 절차가 완료됐다”를 구분하는 테스트를 설계할 수 있습니다. 다만 성공 조건은 업무에 맞게 정의해야 하며, 평가기가 조직의 책임 있는 최종 확인을 대신하는 것은 아닙니다.

기능은 2026년 10월 15일 GA로 제공됐습니다. 공지는 별도 필수 조치를 요구하지 않습니다.

도입 시에는 완전 성공, 부분 완료, 실패와 추가 사용자 확인이 필요한 상태를 어떻게 판단할지 먼저 정리하는 것이 좋습니다. 이런 구분은 결과를 과도하게 성공으로 분류하는 일을 줄이는 데 도움이 됩니다. 이는 평가 설계에 관한 권고입니다.

말을 잘하는 에이전트와 일을 끝내는 에이전트는 다릅니다. Task completion grader는 업무 완료라는 관점으로 품질을 점검하는 도구입니다.

출처: MC1530742 — Copilot Studio - Task completion grader. Microsoft 365 Roadmap. 원문에 개별 Roadmap ID는 표시되어 있지 않습니다. 실제 출시 일정·기능은 변경될 수 있습니다.