Эксперимент
Краткое содержание
Эксперимент — это A/B-тест с контрольным и несколькими тестовыми вариантами.
Создать эксперимент
Для создания эксперимента используйте раздел «Поведенческая аналитика» → Эксперименты → Создать эксперимент. Подробнее о расположении раздела можно узнать по ссылке.
Настройки эксперимента
Включают настройки слоя, бакета, флага и вариантов. В таблице описаны:
- Контрольный вариант — исходная версия ресурса без изменений.
- Тестовый вариант — версия с внесенными изменениями.
Флаги для вариантов не обязательны.
Целевые события
Целевое событие — действие с бизнес-ценностью, например, клик на кнопку «Оплатить». Конверсия — доля пользователей, совершивших целевое действие, рассчитывается при нажатии Рассчитать.
Статус эксперимента
Возможные статусы:
- Черновик — настройки можно изменить.
- Запущен — группы пользователей видят назначенные флаги.
- На паузе — изменения остаются активными 6 часов.
- Завершён — бакеты переходят в категорию «свободные».
Свойства эксперимента
- Один пользователь участвует только в одном варианте одного слоя.
- Лимит бакетов на слой — 120 шт. После завершения эксперимента бакеты освобождаются.
Эксперимент — это A/B-тест с контрольным и несколькими возможными тестовыми вариантами.
Создать эксперимент
Раздел «Поведенческая аналитика» — Эксперименты — Создать эксперимент
Настройки эксперимента
| Вариант | Описание |
|---|---|
| Контрольный | Изначальная версия ресурса без тестируемых изменений. Флаги необязательны |
| Тестовый | Тестируемая версия ресурса с изменениями. Флаги необязательны |
Бакеты вариантов подсчитаны в таблице
Целевые события
Целевое событие — это событие, которое имеет особую бизнес-ценность. Например, клики на кнопку «Оплатить» при переходе на страницу услуги в рамках конкретной рекламной кампании.
Конверсия в настройках целевого события — доля уникальных пользователей, совершивших целевое действие. Значение актуализируется по клику на Рассчитать.
Статус эксперимента
После запуска эксперимента нельзя поменять его настройки.
| Статус | Что происходит |
|---|---|
| Черновик | Создаётся черновик эксперимента, влияния на интерфейс нет, настройки можно изменить |
| Запущен | Тест проводится. Группы посетителей видят назначенные им флаги (версии сайта) |
| На паузе | Посетитель видит изменённый интерфейс 6 часов с момента получения эксперимента. Пока эксперимент на паузе, он не получит другие эксперименты этого слоя |
| Завершён | Все бакеты, которые использовались в эксперименте, переходят в категорию «свободные», посетители распределяются заново |
Свойства эксперимента
- Один посетитель участвует только в одном тестовом варианте одного слоя
- Лимит бакетов на слой: 120 шт.
Всего в экспериментах одного слоя можно использовать 120 бакетов. Когда они закончатся, эксперименты в этом слое проводить не получится. Бакеты освободятся только после завершения эксперимента.