토픽
장애 조사 / 장기 가동 토픽
재현하기 어려운 장애, 장기 가동 후의 크래시, 통신 정지, 이상 경로 테스트 기반을 한데 모아 따라갈 수 있는 장애 조사 토픽입니다.
이 토픽에서 정리하고 싶은 것
장애 조사에서 정말 어려운 것은 예외가 나는 것이 아니라, 어디를 관측하고 어디부터 원인을 분리할지가 보이지 않는 것입니다. 이 토픽은 통신 정지, 누수, 장기 가동 장애, 이상 경로 테스트 기반을 하나의 흐름으로 따라가기 위한 자리입니다.
- 드물게 멈추고, 죽고, 누수가 나는 현상을 어떻게 관측할 것인가
- 로그 설계와 heartbeat를 어디에 넣을 것인가
- packet capture, Application Verifier, 이상 경로 테스트를 어떻게 구분해 쓸 것인가
- 원인 특정만이 아니라, 다음에 조사하기 쉬운 구조로 어떻게 옮겨 갈 것인가
상담에서 자주 나오는 논점
- 저빈도 장애에서 우선 무엇을 수집해야 할지 모르겠다
- 장기 가동 후에만 발생하는 이상을 어떻게 재현할지 고민이다
- 통신 정지가 앱 요인인지 네트워크 요인인지 분리하고 싶다
- 조사할 때마다 같은 수작업을 반복하고 있어, 재발 방지로 이어지지 않는다
맞는 진행 방식
이 영역에서는 글 한 편만 읽기보다, 관측, 원인 분리, 이상 경로 테스트를 한데 모아 보는 편이 앞으로 나아가기 쉽습니다. 장애 조사 서비스나 Windows 앱 개발 페이지와 함께, 조사 자체와 재발 방지 설계를 동시에 생각할 수 있는 형태로 구성했습니다.
문의하기
이 페이지의 내용과 비슷한 과제가 있다면, 현재 상황과 필요한 지원 형태를 함께 적어 문의해 주세요.