쿠키런: 킹덤 긴급점검이 있었습니다. 접속자 수 증대와 함께 증가하는 부하를 개선했는데, 어떤 작업이 있었는지 궁금합니다.
우대조건에 아래와 같은 내용이 있는데 어떤 마음인지 알 것 같습니다.
try-catch 와 null 에 현실자각타임이 오신 분
평소 흥미롭게 보던 기술스택이 있습니다.
2월 19일(금) 23:22 ~ 2월 20(토) 19:00 까지 쿠키런: 킹덤 긴급 점검이 있었습니다.
아마존웹서비스 장애로 인한 긴급 점검이라고 안내하고 있습니다.
동일한 원인(AWS 도쿄 리전 장애)으로 의심되는 리그 오브 레전드의 경우 2월 20일 00:45 에 정상화되었는데, 왜 19:00 까지 점검이 지속되었는지 궁금합니다. 아마 서버 아키텍처의 유연성 차이 또는 데이터베이스의 HA 구성 차이일 것으로 짐작됩니다.
로블록스는 2021년 10월 28일부터 10월 31일까지 73시간의 장애 대한 디브리핑을 하고 자사 블로그에 공개했습니다.
최근의 개선사항과 계획된 작업들 중 인상적인 내용 몇가지를 기록합니다.
모니터링 시스템이 메인 시스템 간 순환 종속성 제거했습니다. 메인 시스템 장애가 모니터링 시스템 장애로 이어졌고, 그로 인해 장애 원인를 찾을 데이터를 빠르게 확보할 수 없었음
장애의 주 원인(Consul and BoltDB) 모니터링 시스템을 확장했습니다.
서비스 재시작 시 서비스에 필요한 캐시 배치, 웜업을 위해 서비스 복구가 느려졌습니다. 이 프로세스를 자동화하고 오류가 덜 발생하게 하기 위해 도구와 프로세스를 개발하고 있습니다. 특히 캐시 배포 매커니즘을 재설계했습니다.
쿠키런: 킹덤이 오픈 후 알 수 없는 이유로 오랜 시간 점검하였음
총 점검 시간: 39시간 40분(2021-01-25 16:50:00 ~ 2021-01-25 03:30:00)
기술적인 원인은 공개하지 않았음
나중에라도 데브시스터즈에서 공유해주시면 흥미로울 것 같음
여러분께 <쿠키런: 킹덤>을 선보이며 여러 가지 상황에 대비할 준비를 해왔지만 이번에 발생한 오류는 예상치 못한 치명적인 문제였고, 킹덤팀에서도 오랜 시간을 들여 수정하게 되었습니다.
긴급 점검 보상은 2021년 1월 25일(월) 점검 전까지 생성된 계정에 한하여 지급됩니다.