Полтеста не считается: как маркетологи переоценивают интуицию и недооценивают математику при сплит-тестировании
Павел Боревич, основатель маркетингового агентства
borevich.agency°. Эксперт по маркетингу проекта Ближе к делу банка ВТБ, спикер на MBA и DBA в РЭУ им. Плеханова, МГИМО и РАНХиГС
Интуиция — отличная штука, но не тогда, когда на кону маркетинговый бюджет. В докладе разберём, как агентства (в том числе мы сами) годами делали вид, что тестировали, и почему без понимания статистики даже лучший дизайнерский «вариант B» — это просто монетка. Факапы, мат. стат, конкретные кейсы и чек-лист.
— Почему A/A-тест также важен как A/B, и почему важно это понимать при работе с тестированием.
— Почему «Вариант А в 2 раза лучше B» звучит красиво, но всегда ложь.
— 7 шагов к понятному A/B-тесту: агентский регламент, который вы можете забрать себе.
— Разбор кейсов: как мы в одном проекте снизили CPL на 37%, а в другом — увеличили его на 83% за счет тестов. Один результат — три вывода и факап.