Перейти к содержанию

Настройка и проведение тестов

Настройка сплит-теста

  1. В главном меню Roistat выберите пункт А/Б тесты:

    1.png

  2. Выберите, какой тип теста вы хотите создать:

    2.png

  3. Настройте и запустите тест:

Если вы создаете тест стилей
  1. Введите название теста. На вкладке Вариант 1 добавьте CSS-код для альтернативного варианта страницы:

    3.png

    Если нужно добавить другие тестовые варианты, нажмите 4.png. Чтобы переименовать или удалить вариант, нажмите 5.png и выберите нужную команду из списка.

  2. В поле Предпросмотр варианта введите адрес тестируемой страницы и нажмите Посмотреть.

  3. Чтобы сохранить и запустить тест, нажмите Создать и запустить. Если вы хотите сохранить тест, не запуская его, нажмите Создать новый тест – в этом случае тест можно будет запустить позже из общего списка.

Подробнее о тесте стилей

Если вы создаете программируемый тест

Следуйте одной из инструкций:

Программируемый тест на PHP
Программируемый тест на Python

Просмотр и управление

При входе в раздел А/Б тесты автоматически открывается список всех тестов.

Тесты разделены на 2 категории:

  • Запущенные тесты;
  • Тесты в архиве.

Рядом с заголовком категории отображается количество тестов.

4.png

В табличной части каждому тесту соответствует одна строка.

Для тестов отображается следующая информация:

  • Название теста – наименование созданного теста;
  • Тип теста – один из двух типов теста: CSS или Программируемый;
  • Дата начала – дата и время начала теста с точностью до секунды;
  • Дата окончания – дата и время окончания/остановки теста с точностью до секунды;
  • Продолжительность – продолжительность теста в секундах, минутах, днях или др.;
  • Количество визитов – число посещений сайта с тестируемым интерфейсом.

Тесты на вкладке Запущенные тесты можно:

  • Запустить, если это тест CSS, с помощью кнопки Запустить тест;
  • Остановить с помощью кнопки Остановить;
  • Возобновить с помощью кнопки Продолжить;
  • Переместить в архив запущенный тест с помощью кнопки Архив;
  • Отредактировать, если это тест CSS, с помощью кнопки 2.png.

5.png

Тесты на вкладке Тесты в архиве можно:

  • Восстановить с помощью кнопки Восстановить – в списке активных тестов он появится после перехода на соответствующую вкладку;
  • Отредактировать, если это тест CSS, с помощью кнопки 4.png.

6.png

Отредактировать запущенный или завершенный тест невозможно. Но вы можете создать копию этого теста, нажав кнопку Клонировать на открывшейся странице настроек теста. В скопированный тест можно вносить любые изменения.

7.png

Внимание!

Клонированный  тест будет сохранен только в виде Теста стилей.

Результаты тестирования

В качестве показателя эффективности сплит-тестирования в Roistat используется прибыль.

Выводы о результатах сплит-тестирования часто основываются на конверсии. Это необъективно, так как заявки не всегда конвертируются в продажи. 

Для просмотра результатов теста необходимо в Списке тестов нажать на его название:

8.png

На странице результатов теста отобразится общая информация о нем:

9.png

  • Название теста, его тип и состояние;
  • Период – продолжительность теста в секундах, минутах, днях или др., а также начальная и конечная/текущая даты;
  • Визиты для этого теста – количество посещений сайта с тестируемым интерфейсом за весь период.

Результаты проведения тестирования отображаются ниже в виде таблицы.

Внимание!

Если с момента начала тестирования еще не было зафиксировано ни одного визита, таблица не будет загружена.

Результаты проведения теста представляют собой статистику по сделкам, которые сгруппированы в таблице по тестируемым вариантам интерфейса. Например, в данном случае тестируются исходный вариант, Вариант 1, интерфейс с голубым оформлением и красным оформлением:

9.png

Подробная статистика отобразится, если вы развернете список. Данные внутри каждого варианта теста сгруппированы точно так же, как и в основном отчете в разделе Аналитика:

10.png

Для просмотра деталей сделок нужно навести курсор на вариант интерфейса и кликнуть на четвертый по счету значок (Показать список сделок):

11.png

В таблице отображены следующие бизнес-показатели:

  • Визиты;
  • Конверсия в заявки;
  • Заявки;
  • Конверсия в продажи;
  • Продажи;
  • Выручка;
  • Средний чек;
  • Расходы;
  • CPO;
  • ROI;
  • Польза варианта (в рублях);
  • CBA;
  • CBA+.

При наведении на название показателя появляется всплывающая подсказка, напоминающая, что означает данный термин:

12.png

У вас есть возможность управлять отображением результатов в таблице:

  1. Выбирать период, за который вы хотите просмотреть значения показателей. Для этого нажмите нужную кнопку над таблицей: календарь, Сегодня, Вчера, Неделя, Месяц, 3 месяца:

    13.png

  2. Выбирать те тестируемые варианты, рекламные каналы, кампании, ключевые слова и сделки, по которым вы хотите увидеть общую статистику. Для этого установите флажки напротив нужных позиций и посмотрите на строку Итог/Среднее. По умолчанию отображается общая статистика по всему тесту, хотя флажки и не установлены:

    14.png

Данные можно упорядочить по любому из показателей, нажав на его название. По умолчанию они упорядочены по заявкам в порядке убывания.

Ключевыми считаются два показателя, выражающие вероятность некоторого варианта победить остальные:

  • CBA - это вероятность, основанная на конверсии из визитов в заявки. Используется, если цикл продаж оказывается большим, например, от визита на сайт до продажи проходит несколько месяцев;
  • CBA+ - это вероятность, основанная на прибыли. Используется в большинстве случаев, так как показатель основан на прибыли и показывает, какой из вариантов заработал больше денег.

Если разрыв между показателем-лидером и остальными оказывается очень велик, это значит, что результатов теста собрано достаточно, а вероятность, что лидирующий вариант не победит, мала. Это и является сигналом того, что тест пора останавливать: у вас есть вариант, который гарантированно победит и принесет большую прибыль.

Внимание!

Если на тестируемые страницы нет визитов в течение 48 часов, то тест для этих страниц останавливается автоматически.

Внимание!

Количество визитов на странице сплит-тестов начнет отображаться только после того, как на сайте будет более 10 уникальных визитов.