Настройка и проведение тестов¶
Настройка сплит-теста¶
-
В главном меню Roistat выберите пункт А/Б тесты:
-
Выберите, какой тип теста вы хотите создать:
-
Настройте и запустите тест:
Если вы создаете тест стилей
-
Введите название теста. На вкладке Вариант 1 добавьте CSS-код для альтернативного варианта страницы:
Если нужно добавить другие тестовые варианты, нажмите
. Чтобы переименовать или удалить вариант, нажмите
и выберите нужную команду из списка.
-
В поле Предпросмотр варианта введите адрес тестируемой страницы и нажмите Посмотреть.
-
Чтобы сохранить и запустить тест, нажмите Создать и запустить. Если вы хотите сохранить тест, не запуская его, нажмите Создать новый тест – в этом случае тест можно будет запустить позже из общего списка.
Если вы создаете программируемый тест
Следуйте одной из инструкций:
Просмотр и управление¶
При входе в раздел А/Б тесты автоматически открывается список всех тестов.
Тесты разделены на 2 категории:
- Запущенные тесты;
- Тесты в архиве.
Рядом с заголовком категории отображается количество тестов.
В табличной части каждому тесту соответствует одна строка.
Для тестов отображается следующая информация:
- Название теста – наименование созданного теста;
- Тип теста – один из двух типов теста: CSS или Программируемый;
- Дата начала – дата и время начала теста с точностью до секунды;
- Дата окончания – дата и время окончания/остановки теста с точностью до секунды;
- Продолжительность – продолжительность теста в секундах, минутах, днях или др.;
- Количество визитов – число посещений сайта с тестируемым интерфейсом.
Тесты на вкладке Запущенные тесты можно:
- Запустить, если это тест CSS, с помощью кнопки Запустить тест;
- Остановить с помощью кнопки Остановить;
- Возобновить с помощью кнопки Продолжить;
- Переместить в архив запущенный тест с помощью кнопки Архив;
- Отредактировать, если это тест CSS, с помощью кнопки
.
Тесты на вкладке Тесты в архиве можно:
- Восстановить с помощью кнопки Восстановить – в списке активных тестов он появится после перехода на соответствующую вкладку;
- Отредактировать, если это тест CSS, с помощью кнопки
.
Отредактировать запущенный или завершенный тест невозможно. Но вы можете создать копию этого теста, нажав кнопку Клонировать на открывшейся странице настроек теста. В скопированный тест можно вносить любые изменения.
Внимание!
Клонированный тест будет сохранен только в виде Теста стилей.
Результаты тестирования¶
В качестве показателя эффективности сплит-тестирования в Roistat используется прибыль.
Выводы о результатах сплит-тестирования часто основываются на конверсии. Это необъективно, так как заявки не всегда конвертируются в продажи.
Для просмотра результатов теста необходимо в Списке тестов нажать на его название:
На странице результатов теста отобразится общая информация о нем:
- Название теста, его тип и состояние;
- Период – продолжительность теста в секундах, минутах, днях или др., а также начальная и конечная/текущая даты;
- Визиты для этого теста – количество посещений сайта с тестируемым интерфейсом за весь период.
Результаты проведения тестирования отображаются ниже в виде таблицы.
Внимание!
Если с момента начала тестирования еще не было зафиксировано ни одного визита, таблица не будет загружена.
Результаты проведения теста представляют собой статистику по сделкам, которые сгруппированы в таблице по тестируемым вариантам интерфейса. Например, в данном случае тестируются исходный вариант, Вариант 1, интерфейс с голубым оформлением и красным оформлением:
Подробная статистика отобразится, если вы развернете список. Данные внутри каждого варианта теста сгруппированы точно так же, как и в основном отчете в разделе Аналитика:
Для просмотра деталей сделок нужно навести курсор на вариант интерфейса и кликнуть на четвертый по счету значок (Показать список сделок):
В таблице отображены следующие бизнес-показатели:
- Визиты;
- Конверсия в заявки;
- Заявки;
- Конверсия в продажи;
- Продажи;
- Выручка;
- Средний чек;
- Расходы;
- CPO;
- ROI;
- Польза варианта (в рублях);
- CBA;
- CBA+.
При наведении на название показателя появляется всплывающая подсказка, напоминающая, что означает данный термин:
У вас есть возможность управлять отображением результатов в таблице:
-
Выбирать период, за который вы хотите просмотреть значения показателей. Для этого нажмите нужную кнопку над таблицей: календарь, Сегодня, Вчера, Неделя, Месяц, 3 месяца:
-
Выбирать те тестируемые варианты, рекламные каналы, кампании, ключевые слова и сделки, по которым вы хотите увидеть общую статистику. Для этого установите флажки напротив нужных позиций и посмотрите на строку Итог/Среднее. По умолчанию отображается общая статистика по всему тесту, хотя флажки и не установлены:
Данные можно упорядочить по любому из показателей, нажав на его название. По умолчанию они упорядочены по заявкам в порядке убывания.
Ключевыми считаются два показателя, выражающие вероятность некоторого варианта победить остальные:
- CBA - это вероятность, основанная на конверсии из визитов в заявки. Используется, если цикл продаж оказывается большим, например, от визита на сайт до продажи проходит несколько месяцев;
- CBA+ - это вероятность, основанная на прибыли. Используется в большинстве случаев, так как показатель основан на прибыли и показывает, какой из вариантов заработал больше денег.
Если разрыв между показателем-лидером и остальными оказывается очень велик, это значит, что результатов теста собрано достаточно, а вероятность, что лидирующий вариант не победит, мала. Это и является сигналом того, что тест пора останавливать: у вас есть вариант, который гарантированно победит и принесет большую прибыль.
Внимание!
Если на тестируемые страницы нет визитов в течение 48 часов, то тест для этих страниц останавливается автоматически.
Внимание!
Количество визитов на странице сплит-тестов начнет отображаться только после того, как на сайте будет более 10 уникальных визитов.