어느 날 대시보드 열었더니 CPA가 확 튀어 있어요. 심장이 철렁하죠. 근데 바로 손대기 전에 물어야 할 게 있어요. 이게 진짜 이상인가, 아니면 그냥 그날 노이즈인가?
먼저 고르세요: 오늘 튄 숫자인가요, 계속 나빠지는 흐름인가요?
- 오늘 또는 최근 며칠만 갑자기 튀었다면 이 글부터 보세요. 정상 범위를 벗어났는지 확인한 뒤 원인을 분해합니다.
- 지난주부터 CPA·CTR·전환율이 계속 나빠진다면 광고 성과 하락 4단계 진단으로 가세요. 측정 → 범위 → 믹스·효율 → 퍼널 순서로 고칩니다.
한 번의 이상 신호와 지속 하락은 같은 처방을 쓰면 안 됩니다. 먼저 이상 여부를 확정한 뒤, 반복되는 문제일 때만 더 깊은 진단으로 넘어가세요.
매일 숫자는 원래 흔들려요
일별 성과는 항상 위아래로 출렁여요. 주말·요일 효과, 표본이 적은 날의 우연, 매체 정산 지연 같은 것들 때문에요. 이 정상 범위 안의 흔들림을 이상으로 착각하고 손대면, 오히려 학습을 리셋시켜 상황을 악화시켜요.
그래서 "튀었다"의 기준이 필요해요. 감이 아니라.
이상의 기준: 평소 대비 얼마나 벗어났나
간단한 방법은 이동 평균 ± 표준편차 밴드예요. 최근 N일의 평균과 변동폭을 기준으로, 오늘 값이 그 밴드를 벗어나면 "이상 후보"로 잡는 거죠. 밴드 안이라고 문제가 없다는 뜻은 아닙니다. 작은 지속 변화·낮은 표본·기준선 오염으로 탐지하지 못할 수 있어요.
이렇게 하면 "CPA가 어제보다 20% 올랐다"에 반응하는 게 아니라, "평소 변동폭을 넘어섰다"에만 반응하게 돼요. 대부분의 헛손질이 여기서 걸러져요.
예시로 계산해 보기
최근 14일 CPA가 9,300원에서 10,600원 사이를 오갔다고 해 볼게요. 평균은 10,000원, 표준편차는 약 388원이에요. 평균 ± 2 표준편차로 범위를 잡으면 약 9,220원에서 10,780원이 평소 범위가 돼요.
- 오늘 CPA가 10,600원이면 직전 날(9,900원)보다 7% 올랐어도 범위 안이에요. 지켜보면 됩니다.
- 오늘 CPA가 11,400원이면 범위 밖이에요. 이상 후보로 잡고 아래 분해 단계로 넘어갑니다.
요일마다 수준이 다르면 같은 요일끼리 범위를 만드세요. 주말 CPA가 늘 높은 계정에서 평일 기준 범위를 쓰면 매주 토요일이 이상으로 잡혀요. 하루 전환이 수십 건 이하라면 CPA 자체가 크게 흔들리니, 며칠씩 묶어서 보거나 범위를 넓게 잡으세요.
이상이 맞다면, 다음은 분해
진짜 이상이 확인되면 원인을 쪼개요. 성과가 변했을 땐 크게 두 가지예요.
- 물량 때문인가: 지출·노출이 늘거나 줄어서
- 효율 때문인가: 전환율·단가가 나빠져서
이걸 섞어 보면 "CPA가 올랐다"까지만 알고 끝나요. 성과 변동 분해(PVM)로 채널·캠페인·소재 단위로 물량효과와 효율효과를 나눠 보면 "어느 채널의 효율이 빠져서 전체가 나빠졌다"까지 짚여요.
어디서 보냐면
운영 대시보드의 이상탐지 탭이 튀는 날을 자동으로 잡아주고, 성과 변동 탐지가 관측된 변화를 무잔차로 분해해줘요. 인과 원인을 증명하는 것은 아닙니다. CSV를 올리거나 구글 시트를 연동하면 돼요 — 공개 시트 기능이 활성화된 환경에서는 버튼으로 최신 데이터를 다시 불러옵니다. 자동 동기화는 아닙니다.
이상이 아니라 며칠에 걸쳐 계속 나빠진 것이라면 광고 성과 하락 원인이 맞는 순서고, 어느 지표부터 봐야 할지 헷갈리면 퍼포먼스 마케팅 지표 총정리로 사슬을 먼저 세우세요. 어떤 분석부터 할 수 있는지 자체가 막막하면 마케팅 데이터 분석 방법이 출발점입니다.
이 방법의 한계
이상탐지는 "여기 이상해 보여요"를 알려줄 뿐, 원인을 증명하진 않아요. 밴드를 벗어난 날에도 외부 요인(경쟁사 프로모션, 시즌)이 섞일 수 있으니, 숫자는 조사 시작점으로만 쓰고 맥락을 같이 보세요.
이상이 하루짜리 노이즈가 아니라 반복되는 하락으로 확인됐다면, 그다음 질문은 "무엇부터 고칠까"예요. 광고 성과 하락 4단계 진단에서 측정·채널·믹스·퍼널을 순서대로 좁혀보세요.