Как провести A/B-тест сайта: инструменты и популярные гипотезы
Гипотеза — то, что отличает A/B-тестирование от проверки на «авось» (давайте сделаем так, если не полетит — сделаем этак). Я разложил весь процесс по полочкам и выделил 22 гипотезы, которые чаще всего влияют на получаемую прибыль. Конечно, постарался объяснить все на доступном языке.
Что отличает A/B-тестирование от песен группы «Ленинград»?
- Главный принцип A/B-тестирования (сплит-теста) — случайная демонстрация посетителям сайта различных вариантов целевой страницы. Допустим, страница А — оригинальная версия, страница B — тестовый вариант, отличный от страницы А по одному параметру. Пользователь, которому показывается страница B, никогда не увидит вариант A, разве что зайдет на сайт с другого устройства. Когда количество показов достигает заранее заданной отметки (например, 10 000), полученные показатели конверсии двух вариантов страниц сравнивают и выбирают более эффективный.
- В A/B-тестировании обязательно присутствует гипотеза — утверждение или догадка, которую мы проверяем опытным путем. Проводить тестирование без гипотезы, просто ради любопытства — потеря времени, так как даже при получении положительного результата никаких выводов о целевой аудитории сделать не получится.
- В один отрезок времени необходимо тестировать только одну гипотезу. В противном случае сложно будет определить, какое именно изменение на странице повлияло на результаты.
Готовимся к A/B-тестированию
- Перед началом теста необходимо определить основной параметр отслеживания. Как правило, отслеживаются:
- доход;
- транзакции;
- цели;
- длительность сеанса;
- отказы;
- просмотры страниц.
-
Как работать с Google Trends — подробное руководство для новичков Рассчитываем текущий тренд (сезонность). Не стоит запускать A/B тестирование во время высокого и низкого сезона, это может значительно исказить результаты теста. Подробнее о сезонности и спросе читайте в нашем материале
о Google Trends .
- Последний подготовительный этап — определение размера выборки. Это позволит точно рассчитать количество пользователей, которым необходимо посетить сайт для того, чтобы определить разницу в основном измеряемом показателе. Можно воспользоваться специальным калькулятором — Driverback. Например, текущая конверсия сайта составляет 4%. Следовательно, минимальное количество пользователей, при котором можно будет определить 25-процентную разницу в конверсии — 6238.
Как проводить A/B-тестирование в Google ***ytics?
- Заходим в Google ***ytics, проходим по цепочке «Поведение» — «Эксперименты» — «Создать эксперимент».
- Указываем название эксперимента, цель, процент участвующего в эксперименте трафика.
- Отключаем равномерное распределение трафика между всеми вариантами, указываем в поле «минимальное время» две недели и порог достоверности — 95%. Для большинства тестов хватит этих значений.
14 дней — минимальный срок A/B-тестирования. Но продолжать тест следует до тех пор, пока не наберется необходимый размер выборки. Даже если вам кажется, что результат очевиден.
- Указываем исходную и тестовую страницу.
Откуда брать гипотезы?
Первый вариант — из головы, второй вариант — из проблемной ситуации. Допустим, мало переходов по кнопке заказа, или пользователи не листают страницу до конца. Гипотеза в первом случае может звучать так: «если разместить кнопку в другом месте, конверсия увеличится».
Очевидный факт: вопрос не в самой формулировке гипотез, а в том, как найти проблему или идею, которая станет фундаментом для гипотезы.
Варианты:
- Анализ ключевых показателей сайта в системах аналитики. Находим страницы с малой длительностью сеансов, большим процентом отказов, малым коэффициентом транзакций.
- Анализ карты кликов, карты скроллинга, вебвизора.
- Опросы пользователей и задаваемые ими вопросы в онлайн-консультантах и письмах в службу поддержки.
- Анализ «фишек» конкурентов.
На что смотреть во время анализа? Тестировать, как говорится, можно все, но зачем? Нет смысла тратить время на изменение текста, который никто не читает, или на внешний вид футера, до которого доскроллят только 10% пользователей. Поэтому чаще всего тестируют:
- CTA-кнопки (текст, внешний вид, место на странице).
- Заголовки и описания товаров.
- Формы (внешний вид, количество полей).
- Изображения, видео.
- Макет и дизайн страницы.
- Цену товара.
Какие гипотезы стоит тестировать?
Гипотезы, основанные на анализе тепловой карты кликов
Как добавить сайт в Google ***ytics, Яндекс.Метрику и LiveInternet — пошаговое руководство Карта кликов — инструмент для измерения и отображения статистики по кликам на вашем сайте. Вы найдете этот инструмент, пройдя по пути: «Яндекс.Метрика» — «Карты» — «Карта кликов» (читайте пошаговое руководство
Карта отображает клики по всем элементам страницы (в том числе по тем, которые не являются ссылками). Клики на карте подсвечиваются разными цветами, в зависимости от их частоты. Частым кликам соответствуют теплые цвета, редким — холодные.
Основные гипотезы:
- Если пользователи кликают на какой-то элемент сайта и не получают ожидаемого результата — его необходимо изменить в соответствии с их ожиданиями. Например, можно найти изображения, кликая по которым пользователь хочет перейти на другую страницу или увеличить их. Можно сделать данные изображения ссылками и уменьшить показатель отказов.
- Если пользователи кликают по каким-либо элементам сайта — их нужно улучшить.
- Элементы, на которые приходится большее число кликов, пользуются популярностью у пользователей и, следовательно, их можно перенести выше и левее.
Гипотезы, основанные на карте скроллинга
Карта скроллинга поможет проанализировать то, как распределяется внимание пользователей на разных областях страницы. Находится карта по адресу: «Яндекс Метрика» — «Карты» — «Карта скроллинга». Также она показывает среднее время и количество просмотров определенного участка страницы.
Если карта скроллинга показывает, что пользователи не прокручивают страницу до конца, то имеет смысл:
- Переместить важные элементы (кнопки или формы) в начало страницы.
- Уменьшить длину страницы.
Гипотезы о кнопках
Проблема — недостаточно кликов по кнопке на странице. Что делать?
1. Изменить текст на кнопке.
2. Изменить место размещения.
3. Увеличить размер кнопки.
4. Изменить цвет кнопки.
5. Изменить цвет текста.
6. Добавить иконку рядом с текстом кнопки.
7. Добавить hover-эффект при наведении на кнопку.
8. Добавить указатель на кнопку.
9. Увеличить свободное прострaнcтво вокруг кнопки.
Все эти действия направлены на то, чтобы выделить кнопку на фоне остального содержимого страницы. При этом необходимо следить, чтобы она не выбивалась из общей цветовой гаммы сайта. Для проверки качества выделения можно использовать букмарклет «Чёрно-белый» (третий снизу в списке).
Посадочные страницы: инструкция по повышению эффективности Больше подробностей про дизайн сайта читайте в нашей статье
С его помощью легко определить, какие элементы заметны сразу же, а какие — нет. Просто добавьте предыдущую ссылку в панель закладок и нажмите ее, открыв нужную страницу.
Гипотезы о заголовках
Если заголовок не привлекает внимание, нужно:
- Переделать заголовок — оптимизировать структуру текста. Отличные шаблоны заголовков на русском языке перечислил Devaka, а формулу идеального заголовка на английском ищите здесь.
- Изменить длину заголовка. Сегодня, несмотря на расширение колонки результатов поиска Google, специалисты Moz рекомендуют ограничиваться 60 символами.
Гипотезы о изображениях
- Большие и качественные изображения позволят увеличить количество переходов на страницы карточек товаров из категорий.
- Лучше использовать собственные фотографии, а не стоковые. Также желательно, чтобы люди на фото были примерно одного возраста с целевой аудиторией.
- Изображения без лишних деталей на светлом фоне позволяют сфокусировать взгляд пользователя непосредственно на товаре.
Гипотезы о формах
- Чем меньше полей в форме, тем больший процент пользователей будет их заполнять. Возможны исключения в специфических тематиках.
- Если форма содержит большое количество полей и ни одно из них нельзя удалить — стоит разбить заполнение данной формы на насколько этапов.
- Удаление поля с промокодом (или уменьшение его размеров) поможет увеличить доход.
Кстати, в агентстве Netpeak есть собственный чек-лист по оптимизации форм — читайте и используйте.
Как проверить результаты?
После окончания теста необходимо проверить значимость полученных результатов. Если результат статистически не значим, изменения не оказывают влияния на оцениваемый показатель.
Если результаты теста оказались удачными:
- Применяем данные изменения на сайте.
- Если есть возможность внедрить аналогичные изменения на других страницах сайта, создаем новый эксперимент и тестируем эти гипотезы.
- Переходим к следующему A/B тесту.
Если результаты теста оказались неудачными:
- Анализируем данные, использованные при составлении гипотезы с учетом полученного опыта и пытаемся улучшить гипотезу.
- Формируем новую гипотезу.
- Создаем новый эксперимент.
Выводы
- Главное отличие A/B-тестирования сайта от проверки на авось — наличие гипотезы.
- Перед стартом нужно определить основной параметр отслеживания, рассчитать текущую сезонность и размер выборки.
- Чтобы грамотно сформулировать гипотезу, стоит провести анализ ключевых показателей сайта, карты кликов и скроллинга, вебвизора, «фишек» конкурентов или сделать опрос пользователей.
-
Как должна выглядеть форма онлайн-заказа — подробный чек-лист В первую очередь стоит тестировать гипотезы, основанные на анализе тепловой карты кликов, на карте скроллинга, гипотезы о кнопках, заголовках, изображениях и формах. Про формы мы подробно рассказывали в посте
с подробным чек-листом по онлайн-заказам . - После теста нужно определить статистическую значимость результата и внедрять лучший вариант страницы. Или переходить к новому A/B-тесту :)
Комментарии:
Рассказываем о перспективном формате рекламы, который привлекает внимание потребителя даже в эпоху повсеместной «баннерной слепоты»....
26 04 2024 18:55:35
Опыт удаленки стартапа lemlist. Как сотрудники работали онлайн в доковидные времена и совмещали профессиональную деятельность с тимбилдингом. Читайте в коротком посте Владимира Поло, основателя AcademyOcean....
25 04 2024 5:45:33
Твиты, реплаи, ретвиты - как сделать правильные выводы из активности в Twitter? Об этом читайте в нашем посте....
24 04 2024 15:43:47
Результаты рейтинга зарплат интернет-маркетологов....
23 04 2024 21:56:14
Опыт контент студии WordFactory и 14 экспертов интернет-маркетинга....
22 04 2024 2:27:58
Перво-наперво для мониторинга ошибок SEO-специалист открывает вебмастерку с подсказками Google — она же панель вебмастеров, она же Google Search Console...
21 04 2024 22:52:48
Поисковая реклама для службы доставки еды — пpaктические советы, как выделиться на фоне конкурентов в популярной нише. На примере харьковской доставки пиццы мы покажем, как правильно продавать еду. Читайте в статье!...
20 04 2024 15:31:39
Нашим решением было трaнcлировать хотя бы часть опыта спикеров 8P, составив дайджест лучших, на их взгляд, кейсов, о которых они узнали за этот год....
19 04 2024 18:26:59
Обзор четырех самых популярных сервисов для автоматического продвижения сайтов...
18 04 2024 2:43:51
Много интересных фактов о работе мозга и новейших исследованиях социологии и психологии....
17 04 2024 20:46:20
22 оригинальные гипотезы для A/B-теста сайта, которые чаще всего влияют на получаемую прибыль...
16 04 2024 14:41:54
Одно из фундаментальных обновлений Universal ***ytics...
15 04 2024 15:27:19
Настраиваем автоматическое получение отчетов по потерянным конверсиям для оптимизации рекламных кампаний....
14 04 2024 11:55:42
Бесплатный образовательный проект для предпринимателей Netpeak Cluster предлагает пять своих лучших вебинаров о нюансах онлайн-продвижения...
13 04 2024 8:49:52
То, как мы разговариваем, важно не только в жизни, но и в соцсетях. Зачем нужен tone of voice и как сделать, чтобы ваш голос отличался от других и был эффективен? Читайте наш гайд....
12 04 2024 18:47:24
Рассказываем, как обменять свои деньги на действительно полезные знания....
11 04 2024 5:37:45
Зачем внедрять BI-решение для бизнеса, какие функции отдел может решить с помощью автоматизации? Кейс Netpeak....
10 04 2024 7:34:39
Аналитик Алексей Селезнев описал простой алогритм прогнозирования поисковой активности пользователей в Яндексе....
09 04 2024 15:37:19
Личный опыт маркетинг-директора Serpstat. Внутренняя перелинковка, работа с контентом, настройка email-рассылок и построение качественного комьюнити помогли нам получить стабильный поток читателей и новых пользователей. Обо всем читайте дальше!...
08 04 2024 3:54:53
Главная задача крауд-маркетинга — помочь, дать пользователю экспертный ответ и уже в последнюю очередь — оставить ссылку...
07 04 2024 5:58:44
Несколько полезных советов перед запуском. Tрaнcпорт и путешествия, ритейл, медиа и развлечения — тематики, в которых чаще используют мобильные приложения. Есть и другие факторы популярности приложений. Узнать!...
06 04 2024 21:12:32
Как говорится, люди делятся на тех, кто делит других на типы и тех, кто не делит. В этом посте — про желтых, синих, красных и зеленых людей....
05 04 2024 3:39:28
В Twitter удобно собрать список потенциальных клиентов, чтобы время от времени посматривать за их новостями...
04 04 2024 17:39:54
Фотоконкурс для стимуляции активности в сообществе, прироста фанов и поощрения лояльной аудитории....
03 04 2024 12:12:39
Почти 4,5 млрд людей имеют аккаунты в соцсетях. Огромная и активная аудитория. Но как среди нее найти своего клиента? Поможет таргетированная реклама....
02 04 2024 14:33:12
Как с помощью ботов ControllerBot и BotFather упростить управление каналами и разнообразить контент....
01 04 2024 3:56:16
Мы отключили интернет всем сотрудникам агентства интернет-маркетинга и получили удивительные результаты....
31 03 2024 0:51:46
Хороший пост с примерами продающих «Белых книг»....
30 03 2024 17:12:47
Насколько классно продается женская одежда в интернете....
29 03 2024 14:11:59
28 03 2024 11:12:12
Анализируя поведение аудитории, вы сможете понять, почему клиенты приходят на сайт, почему уходят, и почему не делают заказы....
27 03 2024 10:52:16
По следам «Игры в кальмара». Небольшая подборка ностальгических комaндных игр, которые могут прижиться в вашем офисе....
26 03 2024 11:47:44
Медиаплан для контекстной рекламы малого и среднего бизнеса — как составить медиаплан мечты для рекламных кампаний без ложного понимания, что автоматические сервисы могут корректно обработать сырые данные и выдать результат...
25 03 2024 4:48:16
Как подготовить фиды в Яндекс.Директ для разных тематик...
24 03 2024 14:12:33
Представляем Netpeak Journal — новый этап развития блога Netpeak...
23 03 2024 7:37:24
Сбор анкет до 16 декабря, публикация результатов в конце декабря...
22 03 2024 3:48:13
Google Penguin официально стал частью основного алгоритма поисковика. Как обезопасить свой бизнес и встретить апдейт алгоритма Google во всеоружии? О трафике, анкорах, бэклинках, ссылках и ссылочной массе, трастовости и постоянном мониторинге, с комментариями специалистов...
21 03 2024 10:26:42
Интерфейс прикладного программирования для работы с аккаунтами десятка сайтов....
20 03 2024 3:17:10
Настроенная бизнес-страница компании в Instagram и на Facebook помогает в продвижении товаров и услуг в интернете. Поэтому так важно сделать их seo-friendly. Читать!...
19 03 2024 2:49:35
Мы попросили спикеров ответить на острые для многих онлайн-проектов вопросы о развитии мобайла как канала, программатике и строительстве инхаус комaнд...
18 03 2024 6:48:12
Крупным брендам не избежать негатива в сети. Но с ним можно и нужно работать. Читайте успешный кейс для DOM.RIA....
17 03 2024 16:56:31
SMM — сфера с доступным обучением и большими деньгами, а хороших специалистов разбирают, как горячие пирожки. SMMщики работают с крупными брендами и создают свой бизнес всего через пару лет после старта....
16 03 2024 11:55:29
Планируете создание бизнеса, связанного с торговлей в интернете? Сначала прочитайте этот текст....
15 03 2024 15:38:58
Что делать перед составлением рекламного бюджета — инструкция для предпринимателей...
14 03 2024 17:24:58
Подробное руководство по настройке отслеживания событий в GA4...
13 03 2024 18:38:15
Гарантии результата в SEO: миф или реальность. Спрос рождает предложение, поэтому не удивительно, что существует большое количество SEO-студий. Сразу возникает резонный вопрос, как могут существовать те компании, которые не дают гарантии вообще?...
12 03 2024 9:40:55
Идеи, достойные распространения. Какие доклады TED Talks повлияли на нетпиковцев....
11 03 2024 4:21:35
Грамотная аналитика в мире мобильных приложений, как и в целом в маркетинге — единственный путь к окупаемости продукта и выходу в высшую лигу брендов...
10 03 2024 7:19:18
Алексей Селезнев проанализировал 29 млн кликов, и в этой статье вы прочитаете, как дорого обходятся рекламодателям клики в Google Ads....
09 03 2024 21:15:19
Исследование по 38,5 миллионам кликов в 22 тематиках в 391 городе страны....
08 03 2024 23:15:27
Еще:
понять и запомнить -1 :: понять и запомнить -2 :: понять и запомнить -3 :: понять и запомнить -4 :: понять и запомнить -5 :: понять и запомнить -6 :: понять и запомнить -7 ::