에펨코리아 모바일 -  유머, 축구, 게임, 풋볼매니저 종합 커뮤니티

로그인 가입 메뉴
2021.02.17 15:49

포텐 신규 서버 세팅 완료

조회 수 192470 추천 수 2884 댓글 1043

시스템 모니터입니다.


최근에 장애가 많았는데, 이유는 신규 서버 추가, 테스트, 여러 튜닝 때문입니다.

방금 신규 서버 세팅 완료했습니다.

중고 장비에 비해 신규 장비가 고장날 확률이 초창기에 높은데, 고장만 안 나면 이론상 기존에 비해 서비스가 안정화되었을 것 입니다.


질문) 

서버 왜 이래? 시모 일하냐?

서버 샀지?


답변)

최근에는 일을 하고 있어서 장애 나는 것으로 전에 공지한 것 처럼 대부분의 에펨코리아 장애는 하드웨어 문제 보다는 소프트웨어 문제입니다.

물론 전에 하드웨어가 대량으로 고장나면서 장애가 발생한 적도 있긴 합니다.

이번에 파일 서버 용량이 차서 95 TB 이상 고성능 기업용 SSD 기반의 용량 증설을 오늘 새벽에 완료했고,

데이터베이스 서버로 AMD EPYC 128 코어 + 기업용 nvme 드라이브를 어제 추가했으며,

웹 서버로 함께 AMD EPYC 128 코어 + 기업용 nvme 드라이브를 어제 추가했습니다.

데이터베이스는 한대가 고장나더라도 10초 이내에 사이트 전체가 자동 복구되는 고가용성 세팅을 완료하고 테스트했습니다(어제 장애 일부가 관련 세팅 및 테스트). 즉, 망치로 데이터베이스 서버 한대 뽀개도 사이트가 10초 이내에 복구됩니다.

다만, 파일, 캐싱 서버, 네트워크 장비들은 고강용성 세팅이 어렵거나 비용 문제로 실패했습니다(어제 장애 일부가 관련 테스트 실패). 장애 발생하면 제가 수동으로 고쳐야 하는 경우들입니다. 현실적인 범위로 사이트 안정성을 구축하고 있으며, 완벽하게 만들려고 하면 오히려 복잡해서 장애가 늘어나는 경우도 많은 것 같습니다(어제 장애가 대부분 그런 경우 ^^;;). 엄밀히 따지면 억대 넘는 솔루션을 사서 적용하면 해결되겠지만, 그것 보다는 차라리 클라우드로 통채로 미래에 옮기는 것이 나을 것 같습니다. 지금의 경우 직접 운영이 몇 배로 저렴해서, 비용 문제를 포함해서 대부분의 서버 인프라는 직접 운영중이지만 클라우드 이전도 미래에 고려중이긴 합니다.


원래 과거에 4~5년 이상 사용하려고 구매했던 파일 서버 용량이 1년안에 가득 차서, 이번에 서버 자원을 크게 확장했습니다.


관련 파란색이 용량 차는 모습:

용량이왤케빨리차.png

[요약]

- 현실적으로 최고 사양의 고성능 서버 정말로 샀고, 세팅 및 튜닝 때문에 최근 며칠간 불안정 했음

- 파일 서버 용량이 가득 차고있었는데, 어제 크게 확장함

- 일을 안해서가 아니라 일을 해서 장애남 ;;


  1. 성인용품 관련 글 단속을 강화 [453] 첨부파일 포텐

    2021.04.15 알림 시스템모니터 조회195972
    성인용품 관련 글 단속을 강화
  2. [공식 입장]펨코에 좌표 찍기 하지 마시길 바랍니다 [1523] 포텐

    2021.04.13 알림 시스템모니터 조회438605
    [공식 입장]펨코에 좌표 찍기 하지 마시길 바랍니다
  3. 쪽지 및 스크랩 검색 지원 추가, 사이트 업데이트 [660] 첨부파일 포텐

    2021.04.10 알림 시스템모니터 조회103584
    쪽지 및 스크랩 검색 지원 추가, 사이트 업데이트
  4. 정치인 닉네임 금지 규정 완화 [1216]

    2021.03.27 알림 시스템모니터 조회123982
    정치인 닉네임 금지 규정 완화
  5. 사이트 속도 개선 패치 적용 [443] 포텐

    2021.03.26 알림 시스템모니터 조회97978
    사이트 속도 개선 패치 적용
  6. avi, wmv, asf, mkv 동영상 파일 지원 확대 [313] 포텐

    2021.03.25 알림 시스템모니터 조회51615
    avi, wmv, asf, mkv 동영상 파일 지원 확대
  7. 최근 여러 운영진 비판에 대한 답변입니다 [2310] 포텐

    2021.03.10 알림 시스템모니터 조회204236
    최근 여러 운영진 비판에 대한 답변입니다
  8. LH글 관련 제재 통계, 차단 해지 [364]

    2021.03.06 알림 시스템모니터 조회25421
    LH글 관련 제재 통계, 차단 해지
  9. 운영 관련 근거 없는 허위 소문, 성향 몰이 강력대응 및 입장문
  10. 핫딜 게시판 제휴 링크 관련 공지 [273] 포텐

    2021.03.03 알림 시스템모니터 조회67211
    핫딜 게시판 제휴 링크 관련 공지
  11. 신규 서버 세팅 완료 [1043] 첨부파일 포텐

    2021.02.17 알림 시스템모니터 조회192470
    신규 서버 세팅 완료
  12. 설 기프티콘 및 잉여력 이벤트, 서버 업그레이드 [1208] 포텐

    2021.02.10 알림 시스템모니터 조회120266
    설 기프티콘 및 잉여력 이벤트, 서버 업그레이드
  13. 포텐 상단 화제순 기능 테스트중 [468] 첨부파일

    2021.02.06 알림 시스템모니터 조회25779
    포텐 상단 화제순 기능 테스트중
  14. 포텐, 바로가기 테스트, 포텐 컷 고려중인 부분 [750] 첨부파일 포텐

    2021.02.05 알림 시스템모니터 조회70962
    포텐, 바로가기 테스트, 포텐 컷 고려중인 부분
  15. 포텐 시스템 관련 고민 + 업데이트 [697] 포텐

    2021.02.03 알림 시스템모니터 조회72407
    포텐 시스템 관련 고민 + 업데이트
다음
- +
1 2 3 4 5