AdAce AdsЩо атрибутований ROAS не здатний довести щодо інкрементальних продажів
Атрибутований ROAS ділить зараховану вартість конверсій на витрати на рекламу. Він корисний для опису того, як система вимірювання розподіляє результати, але не показує, скільки продажів зникло б без реклами. Інкрементальність ставить саме це контрфактичне запитання. Якщо плутати ці поняття, нібито ефективна кампанія може здаватися незамінною, навіть коли частина її клієнтів придбала б товар іншим шляхом.
Зарахування продажу не є доказом того, що реклама його спричинила
Надійна контрольна група приблизно показує, що сталося б без експериментального впливу. Залежно від структури тесту, одиницями спостереження можуть бути люди, географічні локації або інша відповідна сукупність, де розподіл і вимірювання результатів заплановані заздалегідь. Google описує Conversion Lift як контрольоване порівняння для оцінки інкрементальних результатів і зазначає, що інструмент доступний не всюди. Це не означає, що кожен рекламний кабінет має доступ або що довільно обраний необроблений регіон є повноцінною заміною.
Навчальний приклад, а не реальне дослідження приросту: витрати на рекламу становлять 1000 одиниць і приносять 5000 одиниць атрибутованої цінності, тобто атрибутований ROAS дорівнює 5. У гіпотетичному валідному нормалізованому порівнянні цільова група генерує 8000 доходу бізнесу, а її контрфактична оцінка становить 6000. Оцінка інкрементального доходу — 2000, що дає співвідношення інкрементального доходу до витрат 2. Якщо інкрементальний маржинальний прибуток до витрат на рекламу становить 40% від цього доходу, це 800 — менше за 1000 витрат на рекламу. Висновок: атрибутована окупність, інкрементальний дохід та інкрементальний маржинальний прибуток відповідають на різні запитання.
Необроблені підсумки тестової та контрольної груп не можна порівнювати, якщо розміри аудиторій або базовий попит відрізняються. Пояснюйте нормалізацію та припущення, що лежать в її основі. Слідкуйте за змішуванням (контамінацією): клієнти переміщуються між регіонами, спільна реклама охоплює контрольну групу або масштабна промокампанія впливає на обидві групи. Одночасна наявність контрольної групи допомагає врахувати спільні умови, але не здатна автоматично скоригувати неоднаковий вплив, різницю в наявності товарів чи помилки у вимірюванні результатів.
Ставте контрфактичне запитання
- Зберігайте атрибутований ROAS як атрибутоване підтвердження, а не відкидайте його. Він допомагає в операційній діагностиці, поки окремий дизайн експерименту досліджує причинно-наслідковий зв'язок.
- Обирайте бізнес-результат незалежно від зарахування конверсій платформою, коли цього вимагає дизайн дослідження. Інакше вимірювання може просто повторити те припущення атрибуції, яке воно покликане перевірити.
- Для прийняття бізнес-рішень спирайтеся на маржинальну економіку. Інкрементальний дохід може виявитися фінансово невигідним після врахування змінних витрат на виконання замовлень і залучення.
Плануйте обґрунтовану оцінку інкрементальності
- Визначте вплив, аудиторію та причинно-наслідкове питання. Уточніть, чи стосується рішення кампанії, каналу або приросту бюджету, оскільки це різні контрфактичні сценарії.
- Оберіть надійну схему контрольної групи та задокументуйте розподіл, порівнянність базових показників і ймовірні перетоки (spillover). Перевірте фактичну доступність на платформі, перш ніж пропонувати дослідження від провайдера.
- Визначте цільовий результат, вікно спостереження, зрілість конверсій і метод аналізу ще до вивчення результатів. Переконайтеся, що для обох груп збір даних і бізнес-процеси здійснюються однаково.
- Під час оцінювання перевіряйте змішування даних, акції, наявність товарів і пропускну здатність відділу продажів. Ведіть журнал інцидентів, щоб будь-який збій міг скоригувати чи анулювати інтерпретацію.
- Подавайте оцінку інкрементальності із зазначенням невизначеності, а також точної тестової аудиторії та періоду. Дані AdAce Ads можуть допомогти у підготовці в режимі лише для читання, але сам по собі збережений звіт про ROAS не можна називати експериментом з інкрементальності.
Оцінка приросту (lift) має свої межі
- Негативна чи невпевнена оцінка приросту не доводить автоматично, що канал взагалі не працює. Вона описує протестоване втручання лише в межах його планування та умов.
- Неконтрольоване зростання доходу за схемою «до і після» не замінює контрольну групу. Сезонність і одночасні зміни в бізнесі залишаються цілком імовірними поясненнями.
- Не замінюйте відсутні контрфактичні докази фіксованою знижкою, застосованою до атрибутованого ROAS. Це припущення, а не виміряний причинно-наслідковий результат. Враховуйте коригування доходу та повернення в межах того самого узгодженого визначення результатів, щоб зміни в бухобліку не виглядали як експериментальний рекламний ефект.
Джерела й додаткові матеріали
Спробуйте на своїх кабінетах
Створіть робочий простір, підключіть Google або Meta в кілька кліків і побачте свої кабінети чітко. Зміни проходять погодження або дозволяються налаштованою вами політикою.
Створити простір