Incrementality test

Incrementality test — це експеримент, який допомагає оцінити, скільки продажів, лідів, конверсій або іншого результату кампанія створила додатково, а не просто отримала в атрибуції. Для цього порівнюють exposed group із control або holdout group.

Суть поняття

Інкрементальність відповідає на питання: чи змінив маркетинг поведінку людей. Це важливіше, ніж просто скільки конверсій платформа приписала кампанії.

Тест особливо потрібен для ремаркетингу, брендового пошуку, промо й каналів, де частина аудиторії й так мала високий намір купити.

Науковий і теоретичний контекст

Incrementality test варто розглядати в контексті performance-маркетингу, експериментального дизайну, CRM і оцінки реального ROI. Науково коректний підхід вимагає бачити причинно-наслідкові зв’язки, сегменти аудиторії, обмеження даних і вплив на поведінку клієнта.

З погляду CMO це поняття корисне лише тоді, коли воно допомагає ухвалювати рішення: що змінити в продукті, комунікації, каналі, бюджеті або процесі продажів, і як перевірити результат.

Практичне застосування

• Створювати test і control групи.
• Вимірювати різницю в конверсіях або revenue.
• Враховувати статистичну значущість.
• Не покладатися лише на platform-reported ROAS.
• Планувати тест до запуску кампанії.

Приклади

Retail media. Бренд перевіряє, чи sponsored products дали додаткові продажі, а не замінили органічні покупки.

Email. Проморозсилка порівнюється з holdout-групою, яка не отримала лист.

Paid search. Тест брендового пошуку показує, чи реклама додає продажі, чи перехоплює органічний попит.

Типові помилки

1. Плутати атрибуцію з інкрементальністю.
2. Не мати контрольної групи.
3. Робити висновки на малому обсязі.
4. Не враховувати перетікання аудиторій.
5. Оцінювати лише короткий період.

Коли це особливо важливо

Incrementality tests важливі для performance, CRM, retail media, remarketing, paid search, promo, affiliate і каналів із ризиком переатрибуції.

Метрики та оцінка

Дивляться incremental conversions, incremental revenue, lift %, confidence interval, p-value, ROI after incrementality і cost per incremental conversion.

Пов’язані поняття

Holdout group · Attribution · A/B-тестування · Статистична значущість · ROAS

Висновок

Incrementality test допомагає відрізнити справжній маркетинговий ефект від красивої атрибуції. Це складніше, ніж дивитися ROAS у кабінеті, але значно чесніше для бюджету.