12CODE
← 아카데미 academy 33강. 측정 사고 대응: 숫자가 갑자기 사라졌을 때 예상 4분

들어가며

상황

가상 브랜드 '한줄커피'의 담당자는 월요일 아침 대시보드를 열었다가 주말 이틀간 전환 이벤트가 거의 0으로 찍힌 것을 발견했습니다. 실제로 주문이 없었던 건 아니고, 이메일로 들어온 주문 문의는 평소와 비슷했습니다. 측정에 문제가 생긴 것 같은데, 무엇이 문제인지 바로 알 수 없어 일단 팀 채팅에 "주말 매출이 완전히 죽었다"고 올렸다가, 몇 시간 뒤 태그 설정 오류였다는 걸 알고 정정 메시지를 다시 보내야 했습니다.

한 줄 결론

숫자가 갑자기 사라지면 매출이 사라진 것으로 단정하지 말고, 측정 문제인지 실제 문제인지부터 나눠서 확인해야 합니다.

두 가지를 섞어서 보고하면 팀이 잘못된 방향(실제로는 필요 없는 프로모션 등)으로 움직일 수 있습니다. 원인을 다 밝히기 전이라도 "확인 중"이라는 상태를 정확히 전달하는 것이 먼저입니다.

개념

판단 기준

확인할 것 질문
영향 범위 전체인가, 특정 페이지·기기·채널에 국한되는가
교차 확인 다른 경로(주문 시스템, 문의 내역)에서도 같은 감소가 보이는가
최근 변경 최근 며칠 안에 태그·페이지·설정을 바꾼 적이 있는가
보고 방식 "실제 감소"라고 단정하지 않고 "확인 중"으로 먼저 알렸는가

실행 순서

  1. 확인: 대시보드 숫자와 다른 경로(주문 시스템 등)를 대조해 실제 감소인지 측정 문제인지 먼저 가른다.
  2. 결정: 측정 문제로 보이면 최근 변경 사항(태그, 페이지 수정)부터 점검하고, 실제 문제로 보이면 관련 팀(결제, 서버)에 바로 알린다.
  3. 기록: 확인 과정과 임시 보고 내용을 시간순으로 남겨, 나중에 같은 유형의 이상이 생겼을 때 참고하게 한다.

바로 쓰는 템플릿

측정 장애 대응표

즉시 확인

  1. 대시보드 숫자가 갑자기 0에 가까워졌을 때 가장 먼저 할 일은? 정답: 다른 경로(주문 시스템, 문의 내역)와 교차 확인해 실제 감소인지 측정 문제인지 가르는 것 — 단정하지 않고 먼저 나눠 확인합니다.
  2. 원인을 다 밝히기 전에 팀에 보고할 때 지켜야 할 것은? 정답: 확정된 것과 확인 중인 것을 구분해서 알리는 것 — 단정적으로 "매출이 죽었다"고 하면 잘못된 대응으로 이어질 수 있습니다.
  3. 이번 상황에서 실제 원인은 무엇이었나요? 정답: 태그 설정 오류로 인한 측정 문제 — 실제 주문 문의는 평소와 비슷했습니다.

핵심 정리

  1. 숫자가 사라지면 실제 문제인지 측정 문제인지부터 교차 확인으로 나눈다
  2. 원인이 확정되지 않아도 확인 중인 상태를 정확히 임시 보고한다
  3. 대응 과정을 기록해두면 다음에 같은 유형의 이상이 생겼을 때 빠르게 대응할 수 있다

→ 이 강의 퀴즈 풀어보기 (챌린지)