요약

• 100% 환급 패키지는 단기 매출을 폭발적으로 끌어올리지만, 광고비와 환급금을 제하면 실제 이익이 마이너스인 구조가 빈번하게 발생합니다.
• 대행사가 제출하는 ROAS 1,000% 대시보드는 '이미 구매할 유저'를 광고가 가로챈 결과일 수 있으며, 이를 '자기잠식(Cannibalization)'이라 부릅니다.
• 이 문제를 진단하는 유일한 방법은 순매출 기여도(Incrementality) 분석입니다. 광고 없이도 발생했을 매출을 제외한 '순증 매출'만을 진짜 성과로 측정하는 방식입니다.
• CMO와 마케팅 실무 책임자는 대행사 선정 단계에서 Holdout 설계·Lift Test·iROAS 계산 능력을 직접 검증해야 합니다.
• 이 글은 성인 교육(영어·코딩·자격증 등) 인강 플랫폼의 재무·마케팅 책임자를 위해 실무 검증 질문과 판단 기준을 구체적으로 제시합니다.

대시보드 ROAS 1,200%인데 왜 통장은 비어 있을까

분기 결산을 앞두고 마케팅팀이 자랑스럽게 가져온 대시보드를 보면 숫자가 화려합니다. 브랜드 검색 키워드 ROAS 1,200%, 리타게팅 캠페인 전환율 8%. 그런데 CFO가 내놓은 순이익 보고서에는 빨간 숫자가 가득합니다.

이 괴리는 어트리뷰션(Attribution) 모델의 구조적 결함 때문에 발생합니다.

어트리뷰션이란 고객이 결제하기까지 거친 여러 광고 접점에 성과를 나눠주는 방식입니다. 가장 흔히 쓰이는 '최종 클릭(Last-touch)' 모델은 결제 직전에 클릭한 광고에 성과를 100% 몰아줍니다.

문제는 100% 환급 패키지를 노리는 유저 특성에 있습니다. 이 유저들은 이미 브랜드를 알고 있고, 환급 조건을 꼼꼼히 따진 뒤 구매를 결심한 상태입니다. 광고가 없어도 네이버에 브랜드명을 직접 검색해 결제했을 사람들입니다. 그런데 대행사가 이들에게 리타게팅 광고와 브랜드 검색 광고를 집중적으로 세팅하면, 이 유저들이 결제 직전 광고를 클릭하게 되고 — 대시보드는 그 클릭을 '광고의 성과'로 기록합니다.

광고가 새 매출을 '만든' 게 아니라, 어차피 올 매출을 '가로챈' 것입니다. 광고비만 나가고 순이익은 제자리인 이유가 바로 이것입니다.

진단: 내 브랜드가 자기잠식 구조인지 확인하는 3가지 신호

아래 세 가지 신호 중 두 가지 이상 해당된다면, 지금 집행 중인 광고가 오가닉 유입을 잠식하고 있을 가능성이 높습니다.

① 브랜드 검색 광고를 끄면 오가닉 클릭이 거의 같은 비율로 올라온다 브랜드 키워드 광고를 일시 정지했을 때 오가닉 검색 클릭 수가 유사하게 증가한다면, 유저들은 광고 유무와 무관하게 브랜드를 직접 찾아오는 것입니다. 이 경우 브랜드 검색 광고의 실제 증분 효과는 0에 가깝습니다.

② 환급 패키지 출시 직후 리타게팅 전환율이 급등한다 환급 패키지는 '이미 알고 있는 유저'가 반응하는 상품입니다. 리타게팅 전환율 급등은 신규 유저를 끌어온 것이 아니라 기존 관심 유저를 광고가 가로챈 신호일 수 있습니다.

③ 광고비가 늘수록 오가닉 매출 비중이 줄어든다 광고 예산 증액과 동시에 직접 유입·오가닉 검색 매출 비중이 감소한다면 전형적인 자기잠식 패턴입니다. 총매출은 늘어 보여도 광고비가 오가닉 매출을 '대체'하고 있는 구조입니다.

핵심 개념: Incrementality(순매출 기여도)가 어트리뷰션과 다른 이유

두 개념의 차이를 한 문장으로 정리하면 이렇습니다.

• 어트리뷰션: "이 전환에 어느 광고가 관여했는가?"
• Incrementality(증분 효과): "광고가 없었다면 이 전환이 일어났을까?"

전자는 '관여 여부'를 따지고, 후자는 '인과관계'를 따집니다. 환급 패키지처럼 구매 의향이 높은 유저가 몰리는 상품에서는 어트리뷰션 모델이 광고 기여도를 심각하게 과대평가합니다.

실제로 주요 애드테크 데이터에 따르면, 라스트 클릭 모델만 사용할 경우 메타(Meta)와 같은 발견형 매체의 기여도를 약 31% 과소평가하는 반면, 전환율이 높은 브랜드 검색 영역에는 예산이 기형적으로 집중됩니다. 결과적으로 실제 신규 유저를 끌어오는 채널에는 예산이 부족하고, 오가닉 유저를 가로채는 채널에는 예산이 과잉 투입되는 역설이 생깁니다.

대행사 Incrementality 분석 실력, 이렇게 검증하세요

검증 포인트 1 — 오가닉 기준선(Organic Baseline) 설계 능력

물어봐야 할 질문: "우리 브랜드의 광고 없는 상태에서 순수 오가닉 전환 비중을 어떻게 측정하고 계신가요?"

진짜 증분 효과를 측정하려면 '광고가 없는 상태의 매출'이 기준선으로 존재해야 합니다. 이를 Holdout(홀드아웃) 설계라고 합니다. 특정 지역이나 오디언스 세그먼트를 광고 노출에서 완전히 제외하고, 그 집단의 자연 전환율을 측정하는 방식입니다.

대행사가 이 개념에 대해 즉각적으로 구체적인 설계안을 제시하지 못한다면, 그 대행사는 대시보드 숫자를 보고하는 수준에 머물러 있다고 판단해도 좋습니다.

검증 포인트 2 — Lift Test(리프트 테스트) 설계 역량

물어봐야 할 질문: "리타게팅 광고의 실제 증분 효과를 의심할 때, 대조군 설계를 어떻게 제안하시겠습니까?"

Conversion Lift는 타겟 오디언스를 무작위로 실험군(광고 노출)과 대조군(광고 미노출)으로 나눠 매출 차이를 측정하는 방법입니다. 메타와 구글은 각각 플랫폼 내장 Lift Test 도구를 제공하고 있습니다.

Ghost Bidding(고스트 비딩)은 대조군에게도 입찰은 하되 실제 광고는 보여주지 않는 방식으로, 더 정교한 대조군 형성이 가능합니다.

또한 앱스플라이어(AppsFlyer)나 에어브릿지(Airbridge) 같은 MMP(모바일 측정 파트너)의 증분성 리포트를 커스텀 활용할 수 있는지도 확인하세요. 이 도구들을 자유롭게 다루는 대행사라면 단순 대시보드 보고를 넘어선 실력을 갖춘 것입니다.

검증 포인트 3 — 환급 패키지 특화 유저 세그먼트 분리 능력

물어봐야 할 질문: "환급 미션 완료 가능성이 높은 우수 학습자와 단순 유입자를 타겟팅 설계 단계에서 어떻게 분리하나요?"

이 질문이 중요한 이유가 있습니다. 환급 패키지 유저는 크게 두 부류로 나뉩니다.

• 우수 학습자군: 이미 브랜드를 알고, 환급 조건을 달성할 의지가 강한 고관여 유저. 광고 없이도 오가닉으로 유입됩니다.
• 단순 유입자군: 환급 혜택에 끌려 가입하지만 미션 완료율이 낮고 환급금을 받지 못하는 유저.

정교한 대행사는 CRM 데이터와 연계하여 이미 오가닉으로 유입된 고관여 유저를 리타게팅 모수에서 Exclusion(제외) 처리합니다. 이 유저들에게 리타게팅 광고비를 쓰는 것 자체가 낭비이기 때문입니다. 이 설계 역량이 없는 대행사는 오가닉 유저를 광고로 가로채는 구조를 계속 만들어냅니다.

검증 포인트 4 — iROAS 중심 KPI 보고 여부

물어봐야 할 질문: "대시보드 ROAS가 아닌, 광고로 인해 추가로 발생한 매출 기준의 iROAS를 계산해서 보고해 주실 수 있나요?"

iROAS(Incremental ROAS)는 다음과 같이 계산합니다.

iROAS = (실험군 매출 - 대조군 매출) ÷ 실제 사용한 광고비

예를 들어 실험군 매출이 5,000만 원, 대조군 매출이 4,200만 원, 광고비가 500만 원이라면 iROAS는 160%입니다. 대시보드 ROAS가 1,200%라도 iROAS가 100% 이하라면 광고비를 쓸수록 손해인 구조입니다.

단순히 매체 대시보드 캡처본을 나열하는 대행사는 이 계산을 할 수 없습니다. iROAS를 자체적으로 계산하고 예산 포트폴리오 조정에 반영할 수 있는 대행사가 진짜 실력 있는 파트너입니다.

2026년 환경 변화: 왜 지금 Incrementality가 더 중요한가

2026년 현재 마케팅 측정 환경은 두 가지 이유로 Incrementality 분석의 중요성이 더 높아졌습니다.

첫째, 개인 추적 데이터의 소실. 애플 iOS ATT 정책 장기화와 구글의 서드파티 쿠키 대체 기술 정착으로 유저 단위 전환 경로 추적이 사실상 불가능해졌습니다. 단순 어트리뷰션 툴의 신뢰도가 근본적으로 하락한 상황입니다.

둘째, AI 자동화 캠페인의 블랙박스 문제. 구글 PMax, 메타 어드밴티지+(Advantage+) 같은 AI 캠페인은 신규 유저 확보보다 '이미 구매할 가능성이 높은 유저'를 타겟팅하는 데 예산을 집중하는 경향이 있습니다. 실제로 메타 어드밴티지+ 쇼핑 캠페인은 CPA를 7~9% 개선해주지만, 기존 충성 고객 전환을 성과에 섞어 넣기 쉬운 구조입니다. 정기적인 Holdout 테스트 없이는 AI가 만들어낸 성과가 진짜 신규 매출인지 확인할 방법이 없습니다.

이 환경에서 미디어 믹스 모델링(MMM)과 증분성 테스트(Incrementality Testing)는 2026년 성과 측정의 핵심 표준으로 자리잡고 있습니다. 대행사가 이 두 가지 방법론을 실무에 적용할 수 있는지가 파트너 선정의 핵심 기준이 되어야 합니다.

계약 전에 반드시 확인해야 할 실무 체크리스트

아래 항목을 대행사 미팅 또는 제안서 검토 단계에서 직접 확인하세요.

• [ ] Holdout 설계 경험이 있는가? — 구체적인 과거 사례와 측정 방법을 설명할 수 있어야 합니다.
• [ ] 플랫폼 내장 Lift Test 도구를 다뤄본 적 있는가? — 메타 Conversion Lift, 구글 Brand Lift 등 실제 운영 경험을 확인하세요.
• [ ] iROAS를 정기 보고서에 포함할 수 있는가? — 단순 ROAS가 아닌 증분 기여 매출 기준 KPI를 제시하는지 확인합니다.
• [ ] CRM 연계 Exclusion 설계가 가능한가? — 오가닉 고관여 유저를 리타게팅 모수에서 제외하는 설계 역량을 검증합니다.
• [ ] 계약서에 증분성 검증 주기를 명시할 수 있는가? — 최소 반기 1회 Holdout 테스트 진행 의무를 계약 단계에서 논의하세요.
• [ ] LTV 기반 이익 역산 시나리오를 제시하는가? — 환급금 지급액, 환급 미션 성공률, 재구매율(LTV)까지 포함한 최종 이익 관점의 분석 능력을 확인합니다.

주의: Incrementality 테스트를 잘못 쓰면 오히려 역효과

증분성 테스트는 강력한 도구지만 잘못 쓰면 오히려 성과를 망칩니다.

광고를 너무 자주 껐다 켰다 하지 마세요. 증분성 테스트는 충분한 구매 모수와 안정적인 대조군이 형성되어야 신뢰성 있는 결과가 나옵니다. 매주 반복하면 머신러닝 최적화가 깨지고 CPA가 급등할 수 있습니다. 최소 2~4주 단위로, 충분한 전환 모수가 쌓인 상태에서 진행하는 것이 원칙입니다.

어트리뷰션과 Incrementality를 이분법으로 보지 마세요. 일별 캠페인 최적화에는 어트리뷰션 지표가 여전히 유용합니다. Incrementality는 분기·반기 단위 예산 재분배 의사결정에 활용하는 것이 현실적입니다. 두 모델을 상황에 맞게 조합하는 것이 베스트 프랙티스입니다.

자주 묻는 질문 (FAQ)

Q1. 브랜드 검색 광고는 무조건 끄는 게 맞나요?

A. 아닙니다. 브랜드 검색 광고의 증분 효과는 경쟁사의 브랜드 키워드 침투 여부에 따라 달라집니다. 경쟁사가 내 브랜드 키워드에 광고를 집행 중이라면 브랜드 검색 광고는 방어 역할을 합니다. Holdout 테스트로 증분 효과를 측정한 뒤 예산을 조정하는 것이 올바른 순서입니다.

Q2. 소규모 인강 브랜드도 Incrementality 테스트를 할 수 있나요?

A. 가능하지만 최소 모수가 필요합니다. 통계적으로 유의미한 결과를 얻으려면 실험군과 대조군 각각에서 충분한 전환 수(일반적으로 주당 50건 이상)가 발생해야 합니다. 월 전환이 100건 미만이라면 테스트 기간을 길게 잡거나 MMM(미디어 믹스 모델링)으로 대체하는 방법을 고려하세요.

Q3. 대행사가 Holdout 테스트를 거부한다면 어떻게 해야 하나요?

A. 거부 이유를 구체적으로 물어보세요. "머신러닝 최적화가 깨진다"는 이유라면 테스트 기간과 모수 설계를 협의할 여지가 있습니다. 그러나 "우리는 그런 방식으로 보고하지 않는다"고 원칙적으로 거부한다면, 그 대행사는 성과 투명성에 대한 의지가 없다고 판단해도 좋습니다.

Q4. iROAS가 100% 이하면 광고를 전면 중단해야 하나요?

A. 반드시 그렇지는 않습니다. 신규 유저 획득 캠페인은 단기 iROAS가 낮더라도 LTV(고객 생애 가치)를 고려하면 장기적으로 수익이 날 수 있습니다. 중요한 것은 채널별 iROAS를 파악한 뒤, 오가닉 유저를 가로채는 채널(브랜드 검색·리타게팅)의 예산을 줄이고, 실제 신규 유저를 끌어오는 채널(발견형 광고·콘텐츠)에 재분배하는 의사결정입니다.

Q5. 환급 패키지 광고에서 LTV를 어떻게 계산해야 하나요?

A. 초기 구매 매출에서 환급금 지급액을 차감한 '실질 수취 매출'을 기준으로 삼고, 여기에 환급 미션 성공 후 추가 강의 재구매율과 재구매 평균 객단가를 더해 LTV를 산출합니다. 이 수치를 기준으로 광고 캠페인별 허용 CPA 상한선을 역산하면 적자를 구조적으로 방지할 수 있습니다.

마치며: 대시보드가 아닌 통장 잔고를 기준으로 대행사를 고르세요

화려한 ROAS 숫자는 대행사의 실력을 증명하지 않습니다. 그 숫자가 오가닉 유입을 광고가 가로챈 결과인지, 아니면 진짜 신규 매출을 만들어낸 결과인지를 구분할 수 있는 대행사가 진짜 파트너입니다.

100% 환급 패키지를 운영하는 성인 교육 브랜드일수록 Incrementality 분석 역량을 갖춘 대행사와 일하는 것이 적자 구조를 탈출하는 가장 빠른 방법입니다.

에이달(ADALL) 은 성인 교육·고관여 인강 플랫폼의 순매출 기여도 분석과 Holdout 설계 경험을 보유하고 있습니다. 광고비와 환급금을 제하고도 남는 구조를 만들고 싶다면, 아래로 문의해 주세요.

📞 02-2664-8631 📧 master@adall.co.kr 📍 서울특별시 강서구 방화대로31길 2, 5~6층

지금 바로 프로젝트 문의를 통해 현재 캠페인의 자기잠식 구조를 진단받아 보세요.