Як використовувати A/B-тестування в агрегації

Застосовуйте A/B-тестування, щоб приймати зважені рішення щодо налаштування джерел оголошень в агрегації і, відповідно, збільшити прибутки.

Зміст

• Як працює A/B-тестування
• Як налаштувати A/B-тестування
• Практичні поради

Як працює A/B-тестування

За допомогою A/B-тестування можна оцінити 2 варіанти груп агрегації і порівняти їх результати. Створіть варіант наявної групи агрегації, щоб порівняти його ефективність з оригіналом. Під час тестування користувачі додатку розподіляються між наявною та альтернативною групами агрегації, що дає змогу порівняти їх ефективність.

Щоб змінити групу агрегації, налаштовану для варіанта Б:

• додавайте або вилучайте джерела оголошень, щоб оцінити їх вплив на групу агрегації;
• використовуйте різну послідовність у каскаді, змінюючи вручну ставки еСРМ джерел оголошень;
• вмикайте або вимикайте оптимізацію джерел оголошень у каскаді;
• коригуйте кількість викликів джерела оголошень.

Натисніть, щоб переглянути приклад тесту

Тестування виконується протягом 90 днів, проте ви можете будь-коли його зупинити. На основі результатів тестування можна вирішити: користуватися початковими (варіант А) чи альтернативними (варіант В) налаштуваннями групи агрегації.

Як налаштувати A/B-тестування

Виконайте такі дії:

1. Увійдіть в обліковий запис AdMob на сторінці https://admob.google.com.
2. На бічній панелі натисніть Агрегація.
3. Наведіть курсор на групу агрегації, для якої потрібно створити A/B-тестування, і натисніть значок . Виберіть Налаштуйте A/B-тестування. 
4. Введіть назву тестування.
5. За допомогою повзунка налаштуйте розподіл користувачів. Це дасть змогу визначити відсоток користувачів додатка, яких було віднесено до варіанта В підчас A/B-тестування. Можна віднести від 1% до 50% трафіку користувачів додатка до варіанта В. Усіх інших користувачів буде віднесено до варіанта А (вихідного). 
   Примітка. Якщо ви вже налаштували розподіл користувачів і почали тестування, внести зміни не вдасться.
6. Якщо ви вже провели A/B-тестування для групи агрегації, то можете скористатися спадним меню "Варіант В", щоб скопіювати й повторно запустити налаштування варіанта В із попереднього тесту.
7. Змініть конфігурацію джерела оголошень у варіанті В. Для цього виконайте наведені нижче дії.
   • Додайте або вилучіть джерела оголошень, щоб оцінити їх вплив на групу агрегації.
   • Установіть мінімальну ефективну ціну за тисячу показів, щоб провести A/B-тестування для різних значень.
   • Змініть послідовність у каскаді, скоригувавши ставку еСРМ вручну.
   • Увімкніть або вимкніть оптимізацію джерел оголошень у каскаді.
   • Скоригуйте кількість викликів джерела оголошень.
8. Якщо для варіантів А та Б використовується те саме джерело оголошень, радимо застосовувати унікальне зіставлення рекламних блоків. Наприклад, застосовуйте зіставлення, яке ще не використовується у варіанті А. Так ви зможете отримувати точні звіти.
   • Натисніть Змінити в стовпці Зіставлення рекламних блоків. Здебільшого ваш обліковий запис отримує дані зіставлення з рекламної мережі. 
   • Докладніше про додавання джерел оголошень у каскаді й джерел оголошень із призначенням ставок.
9. Натисніть Зберегти.
10. Натисніть Почати тестування. 
    Розпочавши A/B-тестування, ви вже не зможете змінити групу агрегації, зокрема варіант А або Б, доки тестування не припиниться чи не завершиться. Будь-які зміни під час виконання експерименту можуть впливати на його результати, тому ви не зможете редагувати рекламні блоки, націлювання на місцеположення тощо.
11. У вікні підтвердження натисніть Почати – тестування запуститься протягом кількох хвилин.

За умовчанням тестування виконується протягом 90 днів, але ви можете завершити його раніше на основі наявних даних. Докладніше про те, як аналізувати результати A/B-тестування й вживати відповідних заходів.

Практичні поради

• Вибирайте рекламні блоки з трафіком, достатнім для визначення результату тестування. Тест має отримати принаймні 10 000 запитів оголошень, щоб система AdMob могла визначити результат.
• Щоразу змінюйте лише одне налаштування, щоб будь-яку різницю в ефективності можна було точніше пов’язати з внесеною зміною.
• Виконуйте тестування протягом принаймні двох тижнів. Що більше даних ви отримаєте, то з більшою впевненістю зможете визначити ефективніший варіант.
• Радимо використовувати різне зіставлення для варіантів А та Б. Так ви отримуватимете точні дані тестування та звітів для джерел оголошень у каскаді.