증분성 실험 설계에서 플랫폼 자동화에만 의존하면 생길 수 있는 리스크는 무엇인가요?

이 수치는 메타 자체 집계이자 시스템 차원에서 자동 적용되는 기여 모델링 기능이라, 광고주가 직접 돌리는 Conversion Lift 테스트와는 별개의 것입니다.

이 자동화 기능에만 의존하고 자사 계정에서 직접 홀드아웃 테스트를 한 번도 돌리지 않으면, 실제 우리 상품·타겟에서의 증분율이 24%와 얼마나 다른지 검증할 방법이 없는 상태에서 예산 배분 의사결정을 내리게 됩니다. 업종·데이터 품질에 따라 실제 증분율은 크게 달라질 수 있습니다.

따라서 자동화된 증분 기여 수치는 '참고치'로만 쓰고, 예산을 크게 재배분하기 전에는 최소 한 번 이상 자사 계정에서 직접 홀드아웃 기반 실험으로 검증하는 절차를 두는 것이 리스크를 줄이는 방법입니다.