12CODE
← 아카데미 academy 23강. 비식별 데이터로 기여도 분석하기: 클린룸 리포트 해석 예상 6분

들어가며

크로스 미디어 기여도, 왜 매체 리포트만으로는 안 되나

117-7강이 짚었듯 검색광고 리포트는 검색광고 자체의 클릭·전환만 보여주고, 유튜브 리포트는 유튜브 기준 전환만 보여줍니다. 같은 유저가 유튜브에서 영상을 보고 나중에 검색으로 결제했다면, 두 리포트 모두 이 결제를 각자의 성과로 잡을 가능성이 있습니다(오버 어트리뷰션). 매체별 리포트를 아무리 나란히 놓고 봐도, 어느 유저가 두 매체 모두에 노출됐는지는 매체 밖에서 확인할 방법이 없습니다.

클린룸이 이 문제를 정밀하게 푸는 방식

구글 ADH는 검색광고와 유튜브의 이벤트 단위 데이터를 이미 같은 클린룸 환경 안에 보유하고 있어, "검색광고만 노출", "유튜브만 노출", "둘 다 노출" 세 그룹으로 정확히 나눠 각 그룹의 결제 전환율을 비교하는 쿼리를 짤 수 있습니다(117-7강). 이 결합은 매체 자체 로그를 클린룸 안에서 직접 조인하는 것이라, 광고주가 두 매체의 노출 데이터를 수동으로 맞춰볼 필요가 없습니다. 다만 이 분석은 두 채널이 모두 같은 매체(구글) 생태계 안에 있을 때 가장 정밀하게 작동하며, 구글과 메타처럼 서로 다른 클린룸에 걸친 채널은 22강에서 다룬 대로 결합이 더 제한적입니다.

상관관계를 인과관계로 보고하지 않는 법

21강에서 예고했듯, 두 매체 모두에 노출된 유저군의 결제 전환율이 높게 나온다고 해서 이것이 곧 중복 노출이 결제를 유발했다는 증거는 아닙니다(117-7강). 애초에 구매 의향이 높은 유저에게 리타겟팅 로직이 더 많은 매체·노출을 몰아줬을 가능성을 배제할 수 없기 때문입니다. 이 문제를 줄이려면 일부 유저군을 무작위로 노출에서 제외하는 홀드아웃 그룹을 설계해 비교하는 실험적 접근이 필요합니다. 보고할 때도 "중복 노출 유저의 결제 전환율이 N배 높다"는 수치만 단독으로 전달하면 인과관계로 오해받기 쉬우므로, 이 수치가 홀드아웃 실험 없이 나온 상관관계인지, 별도 실험으로 검증된 순수 리프트인지를 명확히 구분해 전달해야 합니다.

세그먼트를 나눌 때 임계값을 함께 고려한다

"검색만/유튜브만/둘 다/둘 다 아님"으로 나누는 것만으로도 이미 네 개 세그먼트가 생깁니다. 여기에 지역·연령·소재 버전까지 추가하면 각 세그먼트 유저 수가 21강에서 다룬 최소 모수 임계값 아래로 떨어지기 쉽습니다(117-7강). 처음에는 가장 굵직한 구분(중복 노출 여부)만으로 먼저 결과를 확인하고, 표본이 충분히 확보된 뒤에야 세부 세그먼트로 단계적으로 좁혀가는 순서가 안전합니다.

결과를 미디어믹스 의사결정에 연결하는 법

중복 노출군의 순수 리프트가 유의미하게 확인되면, 이는 두 채널을 별개로 분리 운영하기보다 순차적으로 노출시키는 시퀀싱 전략이 유효하다는 근거가 됩니다. 반대로 중복 노출의 추가 리프트가 미미하다면, 특정 유저에게 두 매체 예산을 중복 투입하는 대신 아직 노출되지 않은 유저 확보에 예산을 재배분하는 판단 근거로 쓸 수 있습니다(117-7강). 이 판단을 실제 예산 재배분 실험으로 연결하는 방법은 다음 모듈(29강)에서 이어집니다.

실무 산출물: 클린룸 리포트 해석·액션아이템 양식

[클린룸 리포트 해석·액션아이템 양식]

■ 쿼리 개요
- 분석 대상 캠페인·기간:
- 비교 세그먼트: [ ] 검색만 [ ] 유튜브만 [ ] 둘 다 [ ] 둘 다 아님
- 각 세그먼트 유저 수(임계값 통과 여부 확인):

■ 결과 요약
- 세그먼트별 결제 전환율:
- 세그먼트별 평균 결제액:

■ 해석 등급 분류(반드시 하나를 선택)
[ ] 상관관계 단계 - 홀드아웃 실험 없이 나온 결과. "추가 검증이 필요한 가설"로만 취급한다.
[ ] 검증된 리프트 - 홀드아웃 실험으로 확인된 결과. "예산 재배분 근거"로 격상해 쓸 수 있다.

■ 액션아이템
- 이 결과를 근거로 제안하는 행동:
- 필요한 추가 검증(홀드아웃 실험 설계 등):
- 실행 전 확인할 담당자·승인선:

■ 보고 문구 초안(인과 단정 표현 금지)
- 예시: "이 기간·이 조건에서 중복 노출 세그먼트의 결제 전환율이 단일 노출 대비 높게 나타났습니다. 이는 상관관계이며, 예산 재배분 전 홀드아웃 실험으로 추가 검증할 예정입니다."

즉시 확인

  1. 매체별 리포트만으로 크로스 미디어 오버 어트리뷰션을 걸러낼 수 없는 이유는 무엇인가요?
  2. 중복 노출군의 높은 전환율을 곧바로 "리프트 효과"라고 보고하면 안 되는 이유는 무엇인가요?
  3. 세그먼트를 세밀하게 나눌수록 어떤 문제에 부딪히기 쉬운가요?

정답·해설

  1. 어느 유저가 두 매체 모두에 노출됐는지는 매체 각자의 대시보드 밖에서 확인할 방법이 없기 때문입니다.
  2. 구매 의향이 높은 유저에게 더 많은 노출이 몰렸을 가능성(역인과)을 배제할 수 없어, 홀드아웃 실험 없이는 상관관계와 인과관계를 구분할 수 없기 때문입니다.
  3. 각 세그먼트의 유저 수가 최소 모수 임계값 아래로 떨어져 결과 자체가 출력되지 않을 수 있습니다.

다음 레슨

24강에서는 지금까지 배운 클린룸 지식을 종합해, 클린룸을 도입할지 도입하지 않을지를 판단하는 타당성 검토 보고서를 작성합니다.

핵심 정리

  1. 클린룸은 매체 리포트가 풀지 못하는 오버 어트리뷰션 문제를 유저 단위 결합으로 해결합니다.
  2. 결과는 상관관계와 검증된 리프트를 명확히 구분해 보고해야 인과관계 오해를 막을 수 있습니다.
  3. 세그먼트를 세밀화할수록 최소 모수 임계값에 부딪히므로 굵은 구분부터 시작해 단계적으로 좁힙니다.

→ 이 강의 퀴즈 풀어보기 (챌린지)