A/B-тестування віджетів
A/B-тестування (або спліт-тестування) — це метод дослідження взаємодії з користувачем. Під час тесту ви можете розподілити аудиторію між різними варіантами віджета або кнопки виклику та визначити, який із них працює краще.
В eSputnik A/B-тестування доступно для таких типів віджетів:
- Форми підписки
- Інформери
- Кнопки виклику
- Вікове обмеження
Тест може включати віджети різних типів.
A/B-тестування не можна запускати для віджетів, які:
- Містять помилки
- Мають незбережені зміни
- Беруть участь в іншому A/B-тестуванні
Щоб відкрити екран A/B-тестів, перейдіть до розділу Сайт → Віджети та виберіть A/B-тести на лівій бічній панелі. Якщо у вас ще немає тестів, відкриється початкова сторінка A/B-тестів.

Керування A/B-тестами
Для створення нового тесту натисніть кнопку Новий тест.

Щоб запустити A/B-тест, вам потрібно принаймні 2 віджети. Якщо їх немає, натискання кнопки Новий віджет відкриває меню створення віджета.
Виберіть тип віджета і дотримуйтесь інструкцій з налаштувань.

Після створення віджетів можна переходити до тестування.
В eSputnik можна протестувати:
- 2 віджети
- 2 віджети, коли один з них прив’язаний до кнопки виклику
- 2 пари віджетів та кнопок виклику
У наступних розділах описано, як створити й запустити кожен із цих типів тестів.
На сторінці A/B-тестів запущені тести позначено значком відтворення у стовпці Статус, а завершені — значком галочки.

Стовпчик Впевненість показує надійність результатів тесту у відсотках. Результати тесту вважаються надійними, якщо рівень впевненості перевищує 90%. У цьому випадку значення впевненості відображається зеленим кольором.
Як інтерпретувати впевненістьВпевненість вимірює, наскільки ймовірно, що спостережувана різниця між віджетом A і віджетом B є реальною, а не випадковою — чим вища впевненість, тим більше можна довіряти, що лідируючий варіант справді кращий, а не просто випадково опинився попереду. Вона природно зростає з накопиченням трафіку й конверсій, тому:
- Впевненість нижча за 90%: вважайте результат неостаточним — дайте тесту продовжити роботу, а не оголошуйте переможця. Це часто трапляється на початку тесту або коли обидва варіанти працюють дуже схоже (невелика різниця потребує більше даних, щоб стати статистично надійною).
- Впевненість вища за 90%: різниця навряд чи випадкова, і можна діяти на основі результату (наприклад, скориставшись варіантом Зупинити та скасувати публікування того, що програв).
Фіксованого мінімального розміру вибірки немає — це залежить від обсягу вашого трафіку і від того, наскільки велика різниця в ефективності між варіантами. Якщо впевненість залишається низькою після достатньо тривалого тестування, подумайте, чи варіанти взагалі відрізняються настільки, щоб дати вимірюваний ефект.
Зупинка запущеного тесту
- Виберіть тест зі списку зі статусом В процесі, розгорніть меню та виберіть один із варіантів зупинки:
- Зупинити. Зупинити тест і залишити віджети опублікованими.
- Зупинити та скасувати публікування гіршого. Зупинити тест і скасувати публікування віджета з гіршими результатами, якщо впевненість нижча за 90%.
- Зупинити та скасувати публікування того, що програв. Зупинити тест і скасувати публікування віджета з гіршими результатами, якщо впевненість вища за 90%.
- Зупинити та скасувати публікування обох. Зупинити тест і скасувати публікування обох віджетів, якщо впевненість становить 0%.

- Підтвердіть зупинку тесту.

Зупинені тести змінюють свій статус на Завершений.
Видалення тесту
- Виберіть тест зі списку, натисніть значок три крапки та натисніть Видалити.

- Підтвердіть видалення тесту.

Тест назавжди видаляється зі списку A/B-тестів. Віджети, які брали участь у видаленому тесті, залишаються в акаунті.
Перегляд результатів тесту
Щоб відкрити сторінку статистики, натисніть назву тесту в стовпці Ім’я.
Перемикайтеся між вкладками Всі, Десктоп та Мобільний, щоб переглянути відповідні деталі тестування.

Для попереднього перегляду віджета наведіть на нього курсор у стовпці Віджети. Віджет відображається в нижньому правому куті екрана.
Щоб перейти до параметрів віджета, натисніть його назву.

Щоб переглянути віджет і правила його виклику в новому вікні, натисніть значок Попередній перегляд віджета (око) у правій частині рядка.

У вікні попереднього перегляду можна перемикатися між десктопною та мобільною версіями за допомогою відповідних значків у верхньому лівому куті.
Для переходу до параметрів віджета натисніть кнопку Відкрити.

Створення A/B-тесту для двох варіантів віджета
Ви можете запустити A/B-тест, щоб порівняти ефективність 2 віджетів.
- У вікні A/B-тестів натисніть кнопку Новий тест.

- У вікні Новий тест введіть ім’я тесту (обов’язково) та опис тесту (необов’язково).

- Натисніть Вибрати віджет A та виберіть віджет зі списку.

ПриміткаВіджет можна знайти за допомогою рядка пошуку у верхній частині вікна Вибрати віджет:
- Для пошуку за назвою введіть назву віджета або її частину та натисніть значок пошуку чи клавішу Enter.
- Для пошуку за ID введіть
id:, пробіл та ID віджета, а потім натисніть значок пошуку чи клавішу Enter. Наприклад:id: 8230.

- Натисніть Вибрати віджет B і виберіть його зі списку.

- Введіть значення в полі Розподіл трафіка для одного з віджетів.

ПриміткаЗначення розподілу трафіку визначає розподіл показів для віджетів A і B. Значення за замовчуванням становить 50% для кожного віджета. Це означає, що кількість показів обох віджетів рівномірно розподіляється між усіма відвідувачами сайту чи сторінки. Мінімальне значення — 1, максимальне — 99.
- Натисніть Запустити тест.
Якщо віджети не опубліковано, відкриється діалогове вікно Почати тестування. Виберіть Опублікувати обидва віджети і почати тест та натисніть Запустити тест.

Тест відобразиться у загальному списку A/B-тестів зі статусом В процесі.

Запуск A/B-тесту для двох віджетів, один з яких прив’язаний до кнопки виклику
Якщо для одного з ваших віджетів у налаштуваннях виклику увімкнено опцію По кліку на кнопку виклику, ви можете запустити A/B-тест для 2 віджетів, приєднаних до кнопки виклику.
Коли відвідувач сторінки натискає кнопку виклику під час тестування, вона показує або віджет A, або віджет B, залежно від застосованих значень розподілу трафіку.
ПриміткаДля такого тесту опцію По кліку на кнопку виклику має бути ввімкнено лише для одного віджета.
- На лівій бічній панелі виберіть A/B-тести та натисніть кнопку Новий тест.

- У вікні Новий тест введіть ім’я тесту (обов’язково) та опис тесту (необов’язково).
- Натисніть Вибрати віджет A і виберіть віджет зі списку. Для цього віджета має бути ввімкнено параметр виклику По кліку на кнопку виклику.
ПриміткаВіджет можна знайти за назвою або ID за допомогою рядка пошуку. Для пошуку за ID використовуйте формат
id: 8230.
- Натисніть Вибрати віджет B і виберіть віджет зі списку. Для цього віджета не має бути ввімкнено параметр виклику По кліку на кнопку виклику.

ПриміткаЩоб замінити віджет, наведіть на нього курсор, натисніть значок Замінити віджет і виберіть інший віджет зі списку.
- Введіть значення в полі Розподіл трафіка для одного з віджетів.
- Натисніть Запустити тест.
Якщо віджети не опубліковано, відкриється діалогове вікно Почати тестування. Виберіть Опублікувати обидва віджети і почати тест та натисніть Запустити тест.
Запуск A/B-тесту двох віджетів, прив’язаних до двох кнопок виклику
Якщо для обох віджетів у налаштуваннях виклику ввімкнено опцію По кліку на кнопку виклику, ви можете запустити A/B-тест для 2 віджетів, приєднаних до 2 різних кнопок виклику.
Відвідувач сторінки побачить одну з кнопок виклику та пов’язаний з нею віджет залежно від застосованих значень розподілу трафіку.
У цьому випадку автоматично запускаються 2 різні тести:
- Тест для кнопок виклику.
- Тест для віджетів.
Статистика збирається окремо для кожного тесту.
- На лівій бічній панелі виберіть A/B-тести та натисніть кнопку Новий тест.
- У вікні Новий тест введіть ім’я тесту (обов’язково) та опис тесту (необов’язково).
- Натисніть Вибрати віджет A і виберіть віджет зі списку. Для цього віджета має бути ввімкнено параметр виклику По кліку на кнопку виклику.
ПриміткаВіджет можна знайти за допомогою рядка пошуку. Також можна відфільтрувати список за періодом або скористатися перемикачем За оновленням.
- Натисніть Вибрати віджет B і виберіть віджет зі списку. Для цього віджета має бути ввімкнено параметр виклику По кліку на кнопку виклику.
ПриміткаЩоб замінити віджет, наведіть на нього курсор, натисніть значок Замінити віджет і виберіть інший віджет зі списку.

- Введіть значення в полі Розподіл трафіка для одного з віджетів.
- Натисніть Запустити тест.
Якщо віджети не опубліковано, відкриється діалогове вікно Почати тестування. Виберіть Опублікувати обидва віджети і почати тест та натисніть Запустити тест.
У списку на екрані A/B-тестів з’являться два тести: один для віджетів, інший — для кнопок виклику.

Updated about 2 hours ago