토픽

장애 조사 / 장기 가동 토픽

재현하기 어려운 장애, 장기 가동 후의 크래시, 통신 정지, 이상 경로 테스트 기반을 한데 모아 따라갈 수 있는 장애 조사 토픽입니다.

이 토픽에서 정리하고 싶은 것

장애 조사에서 정말 어려운 것은 예외가 나는 것이 아니라, 어디를 관측하고 어디부터 원인을 분리할지가 보이지 않는 것입니다. 이 토픽은 통신 정지, 누수, 장기 가동 장애, 이상 경로 테스트 기반을 하나의 흐름으로 따라가기 위한 자리입니다.

  • 드물게 멈추고, 죽고, 누수가 나는 현상을 어떻게 관측할 것인가
  • 로그 설계와 heartbeat를 어디에 넣을 것인가
  • packet capture, Application Verifier, 이상 경로 테스트를 어떻게 구분해 쓸 것인가
  • 원인 특정만이 아니라, 다음에 조사하기 쉬운 구조로 어떻게 옮겨 갈 것인가

상담에서 자주 나오는 논점

  • 저빈도 장애에서 우선 무엇을 수집해야 할지 모르겠다
  • 장기 가동 후에만 발생하는 이상을 어떻게 재현할지 고민이다
  • 통신 정지가 앱 요인인지 네트워크 요인인지 분리하고 싶다
  • 조사할 때마다 같은 수작업을 반복하고 있어, 재발 방지로 이어지지 않는다

맞는 진행 방식

이 영역에서는 글 한 편만 읽기보다, 관측, 원인 분리, 이상 경로 테스트를 한데 모아 보는 편이 앞으로 나아가기 쉽습니다. 장애 조사 서비스나 Windows 앱 개발 페이지와 함께, 조사 자체와 재발 방지 설계를 동시에 생각할 수 있는 형태로 구성했습니다.

문의하기

이 페이지의 내용과 비슷한 과제가 있다면, 현재 상황과 필요한 지원 형태를 함께 적어 문의해 주세요.

홈으로 돌아가기