2025-06-12 GCP 장애 보고서

16 hours ago 5

Service Control: Google 및 Google Cloud API 가 사용하는 핵심 모듈 중 하나
- 2025-05-29 Service Control 에 새 기능 배포. 새로운 정책을 검사하는 기능이었음
- 2025-06-12 새로운 정책이 추가되면서 문제 시작:
  - null pointer 로 인한 크래시 루프* 발생
  - feature flag 가 없었음. 하지만 긴급 정지를 위한 red-button 실행
  - us-central-1 같이 커다란 리전에서는, 이 액션으로 인해 의존하고 있는 내부 서비스에 herd effect* 발생. 왜냐면 randomized exponential backoff** 전략이 구현되어있지 않았기 때문

한번에 트래픽이 많이 몰렸다는 얘기입니다.
** 트래픽 과부하를 방지하는 기법입니다.

Read Entire Article