페타바이트 트래픽 원인 분석

이 게시물은 CloudWatch에서 발생한 페타바이트 단위의 이상한 트래픽 수치에 대한 디버깅 경험을 공유합니다.

문제 발견

서비스에서 EKS와 CloudWatch Container Insights를 사용하여 모니터링을 하던 중, 1.67 페타바이트의 트래픽이 감지되었습니다.

원인 분석

cAdvisor의 메트릭 수집 방식과 uint64 타입으로 인한 언더플로우 문제를 분석하여, Pod 재시작 시 발생하는 문제를 확인했습니다. 이로 인해 수치가 비정상적으로 증가하게 되었습니다.