Эксперимент
Краткое содержание
Эксперимент — это A/B-тест с контрольным и несколькими тестовыми вариантами.
Создать эксперимент
Раздел «Поведенческая аналитика» — Эксперименты — Создать эксперимент.
Настройки эксперимента
- Ссылки на разделы: Слой, Бакет, Флаг.
- В таблице указаны контрольный и тестовый варианты с описанием.
Целевые события
- Целевое событие — событие с бизнес-ценностью (например, клик на кнопку «Оплатить»).
- Конверсия — доля уникальных пользователей, совершивших целевое действие.
Статус эксперимента
| Статус | Что происходит |
|---|---|
| Черновик | Настройки можно изменить, влияния на интерфейс нет |
| Запущен | Пользователи видят назначенные флаги |
| На паузе | Интерфейс изменён 6 часов, новые эксперименты слоя не активируются |
| Завершён | Бакеты переходят в категорию «свободные», распределение пользователей обновляется |
Свойства эксперимента
- Один пользователь участвует только в одном тестовом варианте одного слоя.
- Лимит бакетов на слой: 120 шт. (после завершения эксперимента бакеты освобождаются).
Эксперимент — это A/B-тест с контрольным и несколькими возможными тестовыми вариантами.
Создать эксперимент
Раздел «Поведенческая аналитика» — Эксперименты — Создать эксперимент
Настройки эксперимента
| Вариант | Описание |
|---|---|
| Контрольный | Изначальная версия ресурса без тестируемых изменений. Флаги необязательны |
| Тестовый | Тестируемая версия ресурса с изменениями. Флаги необязательны |
Бакеты вариантов подсчитаны в таблице
Целевые события
Целевое событие — это событие, которое имеет особую бизнес-ценность. Например, клики на кнопку «Оплатить» при переходе на страницу услуги в рамках конкретной рекламной кампании.
Конверсия в настройках целевого события — доля уникальных пользователей, совершивших целевое действие. Значение актуализируется по клику на Рассчитать.
Статус эксперимента
После запуска эксперимента нельзя поменять его настройки.
| Статус | Что происходит |
|---|---|
| Черновик | Создаётся черновик эксперимента, влияния на интерфейс нет, настройки можно изменить |
| Запущен | Тест проводится. Группы посетителей видят назначенные им флаги (версии сайта) |
| На паузе | Посетитель видит изменённый интерфейс 6 часов с момента получения эксперимента. Пока эксперимент на паузе, он не получит другие эксперименты этого слоя |
| Завершён | Все бакеты, которые использовались в эксперименте, переходят в категорию «свободные», посетители распределяются заново |
Свойства эксперимента
- Один посетитель участвует только в одном тестовом варианте одного слоя
- Лимит бакетов на слой: 120 шт.
Всего в экспериментах одного слоя можно использовать 120 бакетов. Когда они закончатся, эксперименты в этом слое проводить не получится. Бакеты освободятся только после завершения эксперимента.