Цель: научиться планировать тесты, формулировать гипотезы, определять критерии остановки и контролировать риски.

Теоретическая часть

Зачем тестировать

Нельзя сразу масштабировать связку. Сначала — тест на небольшом бюджете.

Что такое гипотеза

Предположение, которое можно проверить. Пример: «Заголовок с указанием дохода увеличит CTR на 20%».

Тестовый бюджет

Для первого теста — от 10 000 ₽.

Критерии успеха

  • ROI > 100% — масштабировать.
  • ROI 70–110% — норма.
  • ROI < 0% — остановить.

Правило одного изменения

Меняйте один параметр за раз.

Пошаговый алгоритм

  1. Сформулируйте гипотезу.
  2. Определите метрику.
  3. Выделите бюджет.
  4. Запустите тест.
  5. Оцените результаты.
  6. Примите решение.

Практическое задание

Сформулируйте 2 гипотезы для выбранного оффера. Определите метрику, бюджет, критерий остановки.

Гипотеза Метрика Бюджет Критерий остановки
Заголовок с суммой дохода даст больше кликов CTR 5 000 ₽ CTR < 1%
Напоминание через 24 часа увеличит выход Конверсия в выход 3 000 ₽ Выход < 10%

Пример из практики

Вебмастер протестировал два заголовка. Второй дал на 40% больше кликов. Решение: использовать второй, масштабировать.

Типичные ошибки:

  1. Тестирование без гипотезы.
  2. Изменение нескольких параметров одновременно.
  3. Продолжение убыточного теста.
  4. Отсутствие критериев остановки.
Критерии выполнения: вы можете сформулировать гипотезу, определить метрику и бюджет, установить критерий остановки.
Чек-лист:

  • Сформулирована гипотеза
  • Определена метрика
  • Выделен бюджет
  • Определён критерий остановки
НазадДалее