Про А/B тесты "А давайте потестируем гипотезы" Признавайтесь, пацаны и пацанессы, кто из вас никогда не слышал этой фразы? Скорее всего тот, кто никогда не взаимодействовал с маркетологами😁 Со стороны кажется, что ничего сложного нет: в Яндекс.Директ есть неплохой инструмент для А\Б тестирования, придумал, что тестировать, определил условия успеха, добавил новую кампанию к контрольной, распределил трафик - и погнали. Ага, как же... гладко было на бумаге, но забыли про овраги. Гладко было на бумаге... Если речь о новом проекте без исторической статистики, то я вообще не рекомендую на старте что-либо тестировать. В это случае вы собираете кампании максимально консервативно: ➖ самые очевидные ключевые фразы с явным коммерческим интентом ➖ самый очевидные оферы ➖ базовые настройки кампаний Дальше получаете первые конверсии , и только если в процессе оптимизации не получается выйти на нужный экономический результат, можно смотреть в сторону тестов альтернативных гипотез. Что есть смысл тестировать в порядке приоритета: 1️⃣ Офер/УТП Почему в первую очередь? Офер и УТП - это самый мощный рычаг влияния на конверсию сайта. Что тестировать: ➖ Разные ценностные предложения ("скидка 30%" vs. "бесплатная доставка") ➖ Акцент на цене vs акцента на качестве vs акцента на сервисе 2️⃣ Сайт (структура, контент, одиночный лендинг/раздел сайта) ➖ структура ➖ контент ➖ лендинг vs многостраничный сайт 3️⃣ Форматы объявлений и площадки Что тестировать: ➖ Поиск vs РСЯ (начинайте с поиска - он конвертит лучше) ➖ Креативы Почему я не вижу особого смысла тестировать сами объявления? Да потому что объявления в контекстной рекламе - это по факту адаптация офера и УТП к форматам объявлений на конкретной рекламной платформе. Тестировать изменения в объявления без изменения офера, как например, перенос какого то тейка из первого заголовка во второй и наоборот - смысла ноль целых хрен десятых. Тут как в математике - от перестановки мест слагаемых ничего существенно не поменяется. ​ ...Но забыли про овраги. Когда нет смысла лезть в историю с тестами и правильнее работать над оптимизацией уже имеющихся кампаний: ➖ Если ещё нет стабильного, пусть и неудовлетворительного результата на текущей кампании. Необходимость делить трафик между контрольной кампанией и тестовой может привести к тому, что можно не получить нужного результата по новой кампании и лишиться части (или всех) результатов в исходной ➖ Если нет 100 конверсий. Гипотезы на маленьком объеме трафике нет смысла начинать из-за отсутствия достаточной выборки для получения статистически корректных выводов. ➖ При этом, если тестирование затягивается, то на результат могут повлиять сезонность и другие внешние факторы — праздники, конкуренты, изменения спроса искажают результаты. Рассказывайте, пацаны и пацанессы, вы тестируете по науке, или как обычно😉