에펨코리아 모바일 -  유머, 축구, 게임, 풋볼매니저 종합 커뮤니티

로그인 가입 메뉴
신청하기
2019.10.10 21:05

[복구 완료] 서버 장애 복구 완료되었습니다.

조회 수 35939 추천 수 521 댓글 486

안녕하세요, 시스템 모니터입니다.


부하 테스트하다가 실수로 메인 데이터베이스 서버 하드 용량을 가득 채워서 메인 데이터베이스 장애가 발생했습니다.

장애 탐지 시스템에 의해 메인 데이터베이스 서버가 서비스에서 자동 중지되고, 비상 서버가 자동으로 작동하면서 서비스가 돌아가고 있으며, 비상 서버는 사양이 메인 서버 만큼 좋지 않고 메인 서버에 다시 데이터 복제하는 과정 때문에 서비스가 느리며 종종 장애가 발생하고 있습니다.


최대한 빠르게 메인 데이터베이스 서버로 복구하도록 하겠습니다.


관련 사항으로 불편 끼쳐 드려서 죄송합니다.


[상황 진행]

2019-10-10 20:10: 하드 용량을 실수로 가득 채워서 메인 데이터베이스 날려버림

-> 비상 서버로 서비스 돌리고 있으며 메인 데이터베이스 복구 중

2019-10-10 22:54: 메인 데이터베이스 서버 복구 완료

2019-10-10 23:01: 상황 종료


[요약]

- 시모 바보

- 테스트하다가 실수함 -> 비상 서버 돌리면서 메인 서버 복구 중(서비스는 작동중이지만 느림)

-> 2019-10-10 22:54 복구 완료


  1. 11월 7일 22:10 ~ 22:35 서버 장애 및 이후 일시적인 이상 현상 복구
  2. 11월 11일 월요일 오전 05:00 시에 네트워크 장비 교체 및 업그레이드 작업 예정입니다.
  3. 데이터베이스 장애 처리 및 업데이트 작업 진행 [6]

    2019.10.19 시스템모니터 조회378 추천-11
    데이터베이스 장애 처리 및 업데이트 작업 진행
  4. [복구 완료] 서버 장애 복구 완료되었습니다. [486]

    2019.10.10 시스템모니터 조회35939 추천-764
    [복구 완료] 서버 장애 복구 완료되었습니다.
  5. 서버 안정화 작업 진행 완료 [158]

    2019.08.19 시스템모니터 조회30854 추천50
    서버 안정화 작업 진행 완료
  6. 최근 주기적으로 발생한 일시 서버 장애에 대해 대응중
  7. 서버 응급 커널 교체 작업 및 부팅 작업 완료 [113]

    2019.08.10 시스템모니터 조회4601 추천-13
    서버 응급 커널 교체 작업 및 부팅 작업 완료
  8. 서버 회선 장애 복구에 대해 공지합니다 [86] 첨부파일

    2019.05.05 시스템모니터 조회21982 추천132
    서버 회선 장애 복구에 대해 공지합니다
  9. [해결완료] 서버에 회선 공급하는 통신사 장애가 발생 [63]

    2019.03.03 시스템모니터 조회24825 추천156
    [해결완료] 서버에 회선 공급하는 통신사 장애가 발생
  10. 2018년 6월 23일 새벽 3:10 부터 3:30 장애 발생했습니다.
  11. 일시적 서버 장애 및 관련 복구 작업 완료되었습니다.
  12. 3월 8일 오전 9:30에 서버 메인보드 교체 예정입니다. [37]

    2017.03.03 시스템모니터 조회5871 추천28
    3월 8일 오전 9:30에 서버 메인보드 교체 예정입니다.
  13. 서버 이전 후 장애 복구되었습니다. [95] 첨부파일

    2016.08.27 시스템모니터 조회16013 추천156
    서버 이전 후 장애 복구되었습니다.
  14. 새벽 4시~ 아침 11:30 까지 발생한 접속 장애 복구했습니다.
- +
1