안녕하세요 금일 장애 발생으로 불편 드려서 죄송합니다.

이번 장애의 원인은 ZFS 스토리지의 특성으로 파악됩니다.

ZFS 스토리지 사용량 80%를 초과하면 성능이 극적으로 떨어질수 있는데 백업스토리지가 사용량 83% 도달했고

백업스토리지가 알수없는 원인으로 셧다운(로그내용상 사용량 얼럿 뜨고나서 셧다운) 되었습니다.(아무래도 지나친 병목 발생으로 다운된듯합니다)

이로인해 가상시스템 전체가 마비가 왔고 원격지에서 복구가 불가능하여 직접 서버실에가서 백업서버에서 불필요한내용과 오래되어서 더이상 필요없는 파일을 제거하여

50%이하로 사용량을 낮추고 전체 시스템을 재가동 하였습니다.

앞으로는 이러한 부분에 좀더 신경쓰도록 하겠습니다.

주말동안 불편드려서 다시한번 죄송합니다.

감사합니다.