5월 8일, 버지니아 북부에 있는 AWS 데이터 센터의 냉각 시스템 장애로 인해 과열이 발생하여 수 시간 동안 고객 서비스가 중단되었습니다. Coinbase는 오프라인이 되었고, CME 그룹은 플랫폼에서 문제를 보고했습니다. 복구는 예상보다 느렸지만, 진짜 문제는 기술적인 것이 아닙니다. 2006년부터 운영된 AWS의 가장 오래된 리전인 US-East-1에 과도하게 부하가 집중된 것입니다.
AWS가 피하지 못한 단일 장애 지점 🔥
US-East-1 리전은 스타트업부터 금융 기관까지 불균형적으로 많은 수의 중요 고객과 서비스를 집중시키고 있습니다. AWS가 트래픽을 다른 영역으로 리디렉션하려고 시도했지만, 이 리전에 대한 의존성은 아키텍처의 취약성을 드러냈습니다. 과열은 물리적 기반이 붕괴되면 중복 시스템만으로는 충분하지 않다는 것을 보여주었습니다. 개발자에게 주는 교훈은 분명합니다: 리전 간 부하 분산은 선택 사항이 아니라 단일 열 장애로 인터넷 절반이 마비되는 것을 막기 위한 필수 사항입니다.
플랜 B에도 에어컨이 필요할 때 💨
AWS는 트래픽을 다른 영역으로 이동시켰지만, 팬들에게 알리는 것을 잊은 것 같습니다. 복구는 예상보다 더 오래 걸렸는데, 아무도 뜨거운 서버는 커피 없는 프로그래머와 같아서 작동하지 않는다는 것을 계산하지 못했기 때문인 것으로 보입니다. Coinbase가 땀을 흘리고 CME 그룹이 선물이 과거가 되는 것을 지켜보는 동안, AWS 엔지니어들은 아무리 클라우드를 판매하더라도 하드웨어는 여전히 약간의 시원한 바람이 필요하다는 것을 배웠습니다.