안녕하세요, 시스템 모니터입니다.

부하 테스트하다가 실수로 메인 데이터베이스 서버 하드 용량을 가득 채워서 메인 데이터베이스 장애가 발생했습니다.

장애 탐지 시스템에 의해 메인 데이터베이스 서버가 서비스에서 자동 중지되고, 비상 서버가 자동으로 작동하면서 서비스가 돌아가고 있으며, 비상 서버는 사양이 메인 서버 만큼 좋지 않고 메인 서버에 다시 데이터 복제하는 과정 때문에 서비스가 느리며 종종 장애가 발생하고 있습니다.

최대한 빠르게 메인 데이터베이스 서버로 복구하도록 하겠습니다.

관련 사항으로 불편 끼쳐 드려서 죄송합니다.

[상황 진행]

2019-10-10 20:10: 하드 용량을 실수로 가득 채워서 메인 데이터베이스 날려버림

-> 비상 서버로 서비스 돌리고 있으며 메인 데이터베이스 복구 중

2019-10-10 22:54: 메인 데이터베이스 서버 복구 완료

2019-10-10 23:01: 상황 종료

[요약]

- 시모 바보

- 테스트하다가 실수함 -> 비상 서버 돌리면서 메인 서버 복구 중(서비스는 작동중이지만 느림)

-> 2019-10-10 22:54 복구 완료