Интернет-маркетинг

Чек-лист для проведения корректного А/Б тестирования

Технологии и инструменты Яндекс.Директ А/Б тесты Обучение
1 Определить место воронки теста
  • Повертеть разные изменения в воронке бизнеса и понять - увеличение какой метрики может принести наибольший результат
  • Проанализировать свою воронку относительно средних значений по рынку (есть в исследованиях)

2 Определить гипотезы для теста
  • С помощью своей насмотренности
  • Анализ конкурентов
  • Качественные исследования ЦА
  • Анализ отзывов на продукт

3 Выбрать эффективные гипотезы
  • Выписываем все гипотезы в таблицу лога гипотез
  • Приоритизируем по Райсу
  • Добавляем степень личной веры от команды
  • Выбираем наиболее эффективные и запускаем цикл тестирования

4 Выбрать инструмент для теста
  • Ручной вариант (для объявлений и текстов)
  • А/Б тесты в Яндекс Аудиториях
  • Вариокуб и аналоги
  • Подмена по гет параметру + тесты в Яндекс Аудиториях

5 Подготовить и запустить тест
  • Одинаковая выборка
  • Проверить отображения на всех устройствах
  • Меняется только одно условие
  • Один временной период (отсечь влияние сезонности и других факторов изменения спроса)
  • Оповестить всех причастных к тесту

6 Провести тест
  • Проверить правильность сбора статистики через день после запуска теста
  • Подвести предварительные итоги через неделю теста

7 Определить статистически значимый результат
  • Выборка должна быть достаточна
  • А/А/Б тестирование
  • Проверяем стат значимость
  • Калькулятор достоверности А/Б тестирования
Ссылка на чек-лист в Гугл доках
Если хотите быть в курсе новых статей, подпишитесть на мой Телеграм канал @shivasstories
Made on
Tilda