Забыл А/Б тест Сегодня хочу поговорить об институциональной памяти. Йоу, звучит уже душно, но дайте дорасскажу, мысль тут очень простая! Вот вы хотите катить эксперимент, а потом узнаете, что одна команда пару лет назад катила такой же тест или очень похожий. Вы идете смотреть их доку эксперимента — а там две строчки описания и пару непонятных чисел в результатах. В общем-то никакой пользы, а ребята когда-то вложили много сил в этот тест и вы могли их сейчас сэкономить. Чем круче становится дата-культура в компании и чем больше тестов катится — тем чаще мы их забываем. 🔘Забываем наши эксперименты «чемпионы», 🔘Забываем рисковые экспирименты, которые не принесли результата 🔘Забываем микро улучшения, которые стабильно дают рост метрики на какие-нибудь 0.5%. Вы можете спросить — но как забыть-то можно?? Везде же есть доки, у всех есть конфлюенс. А вот легко. Доки заполняются кое-как, много команд, тысяча аналитиков, продукты катят эксперименты плюс-минус обособленно. У нас в Тиньке, как во многих корпорациях, это тоже серьезная проблема. Что можно с этим сделать? Самая простая и очень эффективная вещь — это использовать единый шаблон доки для АБ-теста и всегда старательно его заполнять. Когда я пишу описание теста, то там обязательно: 🔘вставляю картинки макетов 🔘делаю понятные таблички с результатами и пояснениями — я всегда смотрю на нее глазами человека, который вообще не в контексте. 🔘Пишу call to action по результатам, тегаю ответственных Про метрики, mde и гипотезу я тут ничего не пишу — оно и так понятно, что must have. Для меня главное, чтобы даже через пару лет мой неуспешный или чемпионский эксперимент мог принести пользу бизнесу и какому-нибудь будущему аналитику Саше. А значит нужно сделать все максимально понятно. Ставьте поваренка-аналитика, чтобы он не забывал про свои тесты 🧑‍🍳 Хотите как-нибудь прикреплю свой шаблон доки аб-теста в формате ноушена чисто для примера? Если да, то давайте поваренка! 🧑‍🍳🧑‍🍳