Блог
A/B-тест лендинга: что тестировать первым и как не обмануться
Как проводить A/B-тест лендинга: гипотезы, размер выборки, метрики, сроки. Какие изменения дают прирост, а какие только шумят.
A/B-тест — не про «какой цвет кнопки лучше», а про проверку гипотез о клиенте. Если тест не отвечает на вопрос «почему», он бесполезен. Разберём, как ставить его правильно.
Что такое хороший тест
- Одна гипотеза: «клиентам важнее срок, чем цена».
- Одно изменение: заголовок упоминает срок.
- Одна метрика: конверсия в заявку.
- Достаточная выборка и срок.
Всё остальное — украшательство.
Порядок гипотез
| Приоритет | Что менять | Почему |
|---|---|---|
| 1 | Оффер и заголовок | Определяет, останется ли человек |
| 2 | Первый экран | Виден без скролла |
| 3 | Форма и кнопка | Прямо влияет на конверсию |
| 4 | Социальные доказательства | Снимают сомнения |
| 5 | Цены и тарифы | Требуют осторожности |
| 6 | Дизайн и цвета | Влияют меньше всего |
Начинайте сверху. Большинство прироста живёт в первых трёх строках.
Размер выборки
Грубое правило: нужно не меньше 100–200 конверсий на вариант, чтобы отличить реальный эффект от шума. При конверсии 3% и 1 000 посетителей в неделю это 30 заявок — тест будет длиться месяцами.
Что делать при малом трафике:
- сравнивать недельные периоды, а не варианты;
- тестировать крупные изменения;
- смотреть на качественные сигналы: звонки, вопросы, отказы;
- не гнаться за статистической значимостью любой ценой.
Как запускать
- Сформулируйте гипотезу и ожидаемый эффект.
- Соберите вариант B: одно изменение.
- Распределите трафик 50/50, без пересечений.
- Зафиксируйте метрику и срок до старта.
- Не меняйте лендинг во время теста.
- По итогу — решение: внедрить или отклонить.
Метрики
- Конверсия в заявку — основная.
- Конверсия в звонок и качество лида.
- Глубина скролла — вспомогательная.
- Время на странице — осторожно: больше не значит лучше.
- Отказы — как сигнал нерелевантности.
Ошибки
- Менять несколько элементов одновременно.
- Останавливать тест на пике.
- Тестировать на трафике из разных источников без сегментации.
- Игнорировать мобильные: там половина посетителей.
- Делать вывод по 50 визитам.
- Запускать тест перед праздниками и сравнивать с обычной неделей.
Итог
Хороший A/B-тест отвечает на вопрос о клиенте, а не о дизайнере. Начните с оффера, дайте тесту время и не верьте первому дню.
Сборка лендингов — наша услуга. Типичные ошибки — разбор.
Коротко о главном
Сколько трафика нужно для A/B-теста?
Для заметного эффекта — сотни конверсий на вариант. Если заявок мало, быстрее менять лендинг целиком и сравнивать недели, чем ждать статистику месяцами.
Что тестировать в первую очередь?
Оффер и первый экран: заголовок, подзаголовок, кнопку. Менять дизайн целиком на старте почти бессмысленно.
Сколько длится тест?
Минимум две полные недели, чтобы захватить разные дни недели. Не останавливайте тест в первый же день с красивыми цифрами.
Обсудим ваш проект
Применим описанный подход к вашей задаче — предложим решение и оценим сроки.