배포가 두렵지 않은 팀 만들기: Argo Rollouts로 카나리 배포 자동화하기

문제롤링 업데이트에서 신규 버전이 1~2분 안에 전체 트래픽을 받아 장애 발생 시 빠르게 확산됐다. SLO 99.9%(월 43분 허용) 유지가 어려웠다.

접근Argo Rollouts로 1%→5%→15%→85%→100% 단계적 카나리 트래픽 이동을 구성하고, Datadog 연동 AnalysisTemplate으로 HTTP 5xx 에러율 ≤0.1% 임계치를 3분마다 평가해 초과 시 자동 롤백한다. Nginx Ingress 기반으로 서비스 메시 없이 구현했다.

결과카나리 초기 단계에서 자동 롤백으로 대형 장애를 예방했고, 엔지니어가 모니터링 없이 배포할 수 있는 환경을 만들었다.