업리프트 (Uplift)

Uplift 뜻과 광고에서의 의미

Uplift(업리프트)는 일반적으로 '증가·상승'을 뜻합니다. 광고 실험에서 업리프트는 광고를 집행하도록 배정한 실험군과 광고를 제외한 대조군의 성과 차이입니다.

이 차이를 광고의 순수 증가분으로 해석하려면 무작위 배정, 동일한 관찰 창, 집단 간 간섭 같은 설계 조건을 확인해야 합니다. 광고 집행 전후에 매출이 올랐다는 사실만으로 광고의 증분 효과가 확인되는 것은 아닙니다.

절대 업리프트 = 노출군 전환율 − 홀드아웃 전환율
상대 업리프트 = 절대 업리프트 ÷ 홀드아웃 전환율
증분 전환     = 절대 업리프트 × 노출 대상 수

전환율이 실험군 8%, 홀드아웃 5%라면 절대 업리프트는 3%p, 상대 업리프트는 3%p ÷ 5% = 60%입니다. 절대는 %p, 상대는 %로 적으므로 같은 실험에서도 숫자가 다릅니다. 아래 예시는 가상 계산이며 업계 기준이나 실제 캠페인 성과가 아닙니다.

인크리멘탈리티와는 층이 다릅니다. 업리프트는 두 그룹의 차이 그 자체이고, 인크리멘탈리티는 그 차이를 광고가 만든 몫으로 해석해도 되는지까지 묻습니다. 무작위 배정이나 적절한 준실험 설계 없이 얻은 차이만으로 광고의 증분 효과를 확정할 수는 없습니다.

왜 중요한가

전환수가 100건 나왔다고 다 광고 덕이 아니에요. 광고가 없었어도 어차피 살 사람(브랜드 검색·재구매 유저 등)이 섞여 있어요. 업리프트는 "그 사람들을 빼고, 광고가 진짜로 추가로 만들어낸 몫"만 봐요.

측정 방법은 보통 홀드아웃 테스트예요. 무작위로 나눈 두 그룹 중 한쪽에는 광고를 노출하고 다른 한쪽(홀드아웃)에는 노출하지 않은 뒤, 두 그룹의 전환율 차이를 업리프트로 봐요.

왜 CPA·ROAS만 보면 안 되나

CPA·ROAS는 정해진 귀속 규칙으로 집계한 성과와 비용의 관계를 보여줘요. 그 전환이 광고 덕분인지, 원래 일어났을 일인지까지는 구분하지 못합니다. 업리프트의 점추정치가 0에 가깝더라도 불확실성을 보기 전에는 효과가 작다고 확정하지 마세요.

업리프트는 어떻게 계산하나

무작위로 나눈 노출 그룹과 홀드아웃 그룹의 전환율 차이를 먼저 구합니다. 예를 들어 노출 그룹 전환율이 8%, 홀드아웃이 5%라면 절대 업리프트는 3%p, 홀드아웃 대비 **상대 업리프트는 (8%−5%)÷5%=60%**예요. 둘은 단위와 크기가 다르므로 보고서에 %p와 %를 반드시 구분해야 합니다.

무작위 배정이 아니거나 두 그룹의 기간·대상이 다르면 이 차이를 광고 효과라고 단정할 수 없습니다. 증분 분석 도구에서 홀드아웃·신규 켜기·종료 데이터에 맞는 방법을 고를 수 있어요.

같은 3%p라도 판단은 달라집니다

각 그룹 100명 중 8명 대 5명이 전환해도 차이는 3%p이고, 각 10,000명 중 800명 대 500명이 전환해도 3%p입니다. 두 표본의 불확실성은 같지 않습니다. 비율만 저장하지 말고 그룹별 배정 인원·전환 인원·관찰 기간을 함께 남기세요.

분모는 광고를 실제 본 사람만 사후 선택한 수가 아니라 분석 설계에서 정한 배정 대상이어야 합니다. 무작위 배정 뒤 실제 노출 여부로 다시 골라 비교하면 선택 편향이 생길 수 있습니다. 홀드아웃 전환율이 0이면 상대 업리프트는 계산할 수 없으므로 0%나 무한대 성과로 표시하지 않습니다.

더 깊게 보려면

홀드아웃 테스트로 업리프트를 실제로 측정하는 방법은 증분성 측정 글에서 다룹니다.