Атрибуция отвечает не на тот вопрос
Отчёт кабинета говорит: канал принёс 6 000 000 ₽ при расходах 1 200 000 ₽. Гео-эксперимент по тому же каналу в те же недели говорит: если канал выключить, потеряется 1 800 000 ₽. Оба числа верны. Они отвечают на разные вопросы, и решение о бюджете принимается по второму.
Эта лекция — про второй вопрос и про приборы, которые на него отвечают: гео-эксперимент как процедуру, лифт-инструменты площадок и медиамикс-моделирование. Девятнадцать тем, пять частей.
Уровень продвинутый. Статистическая значимость, мощность, доверительные интервалы, дизайн A/B-теста, когорты и UTM-контур не объясняются заново: матчасть значимости и мощности разобрана в лекции про A/B-тесты и статистическую значимость, деление зачёта между каналами — в лекции про модели атрибуции. Здесь они применяются.
Что лекция не обещает: точного числа без доверительного интервала, измерения без потери денег и настройки, которая закроет границу региона. Каждое из этих ограничений разбирается там, где оно возникает.
Контрфакт: число, которого нет ни в одном отчёте
Инкрементальный эффект — разница между тем, что произошло, и тем, что произошло бы без воздействия. Второе число не наблюдается никогда. Оно контрфакт: его нельзя выгрузить, его можно только оценить.
Вопрос, который отличает инкрементальность от атрибуции, формулируется одной фразой: что изменилось бы, если бы канал выключили. Атрибуция отвечает на другой вопрос — кому записать конверсию, которая уже случилась.
Ни одна модель атрибуции не содержит сценария, в котором канала нет. Она делит уже случившиеся продажи между уже случившимися касаниями. Сценарий выключения в её входных данных отсутствует, поэтому ответа на вопрос о выключении в ней нет — ни при какой настройке окна и ни при какой вероятностной модели. Сами модели и их устройство разобраны в лекции про модели атрибуции.
Не следует, что атрибуция бесполезна. Она отвечает на свой вопрос и отвечает ежедневно: какую ставку поправить сегодня, какую кампанию остановить к вечеру. Эксперимент так не умеет — он занимает недели и стоит денег. Спор «атрибуция против инкрементальности» — это спор о приборах, а не о том, кто врёт.
Дальше в лекции слово «прирост» всегда означает инкрементальный прирост относительно названной базы, а слово «зачёт» — то, что приписала модель атрибуции. Смешивать их в одной таблице нельзя, и следующая тема объясняет почему.
Дальше нужен аккаунт
Прогресс и монеты сохранятся.