А/B тести для App Store та Google Play

Якщо вас цікавить A/B тести у додатках для Google Play та App Store - то ця стаття саме для вас. Тут ми розглянемо такі питання:

• Що таке A/B тестування
• Кому необхідно проводити А/В тести
• Планування та процес A/B тестів
• Аналіз та висновки, виходячи з результатів A/B тестів

A/B-тестування - це спосіб позбутися здогадів, пробуючи різні версії в природному середовищі протягом короткого періоду часу, щоб побачити, яка з них працює найкраще, а потім використовуючи найкращу версію в довгостроковій перспективі.

Що таке A/B тестування

Дуже часто серед фахівців з оптимізації та маркетингу можна зустріти рекомендацію - необхідно тестувати, перевірте А/В тестами. Саме час розібратися, що це таке і навіщо використовувати їх у своїй стратегії ASO оптимізації та просування. Якщо текстова частина оптимізації додатку відповідає за - знайти застосунок або гру в магазині за релевантними пошуковими запитами, то візуальна оптимізація відповідає за цільову дію, що по суті є основним завданням маркетингу мобільних ігор і додатків. Саме візуальні елементи відповідають за конверсію, тобто встановлення додатків. Далі в гру вже входить сама якість застосунку, його інтерфейс, продуманість і здатність вирішити проблеми користувача, але зараз ми не про це.

Тестування допомагає нам дізнатися про точні уподобання користувачів. В результаті цього процесу ми будемо мати точні дані (а не тільки наші припущення), скільки користувачів встановило ту чи іншу версію метаданих нашої гри або додатку. І коли ми вже згадали метадані, варто уточнити, що саме може бути об'єктом А/В тестування:

• текстові поля (короткий та повний опис у Google Play)
• іконка
• скріншоти (крім оформлення можна протестувати і фокусні написи)
• промо-відео

Якщо ми звернемося до теорії, то A/B-тестування - це спліт-тестування, яке відноситься до рандомізованого процесу експериментування у двох версіях варіанта. Тепер давайте спробуємо перекласти це більш зрозумілою мовою.

A/B-тестування для ASO - це тестування двох (або більше) варіантів елемента на сторінці вашого додатку (наприклад, альтернативних версій скріншотів або іконки), щоб визначити, який з них найбільше приваблює відвідувачів. Користувачі, які можуть брати участь у A/B-тестах:

• Відвідувачі, які знаходять ваш додаток на вкладках «Сьогодні», «Ігри» та «Додатки» .
• Відвідувачі, які бачать ваш додаток у при пошуку за ключовим словом, за яким вона ранжується.
• Всі відвідувачі, які так чи інакше потрапляють на сторінку вашого додатку.

Чому A/B-тестування є важливим у процесі ASO оптимізації?

A/B-тестування дозволяє приймати рішення на основі даних, щоб визначити стратегію ASO, яка призведе до збільшення коефіцієнта конверсії вашого застосунку.

Більш того, A/B-тестування — це можливість поспостерігати за тим, як поводиться трафік, який ви отримуєте. Це допоможе вам краще зрозуміти очікування вашого цільового сегменту ринку, щоб ви могли відповідним чином налаштувати сторінку свого додатку. Варіант, який показав себе гірше за вихідну версію, може сказати вам, що не подобається вашій аудиторії. Це цінна інформація, яку можна використовувати у будь-яких ваших майбутніх маркетингових зусиллях – рекламі, підготовці промо-відео і навіть у подальших ітераціях текстової оптимізації.

Кому необхідно проводити А/В тести?

Оскільки цей процес є невід'ємною частиною успішної стратегії просування, він може проводитися:

• командою маркетингу
• розробником
• ASO спеціалістом.

Будь-яка частина команди з розвитку та просування додатку може стати ініціатором тестування, залежно від розподілу обов'язків та дільниць відповідальності.

Причина тестування завжди одна - вас не влаштовує конверсія, і ви хочете це виправити.

Планування та процес A/B тестів

Підготовка до А/В тестування це майже половина вирішення проблеми. Грамотно проведені тести допоможуть виявити проблему, а чим точніше ви її визначите, тим менше коштів і часу витратите на її виправлення. Нижче наведено основні кроки з підготовки та проведення А/В тестів мобільних ігор та додатків:

1. Підготовка гіпотези. Чому в даний момент додаток демонструє низьку конверсію? Визначення можливих проблем і є базою для ваших гіпотез, які перевірятимуться тестуванням. Джерелом даних можуть бути ваша думка, думка команди, інформація від користувачів (відгуки послужити вам і тут).
2. Далі ви визначаєте елементи, які тестуватимете - чи це буде нова іконка, скріншоти, фокусні написи або додавання промо-відео на сторінку додатку.
3. Заплануйте точкові зміни цих елементів, але досить помітні для користувачів. Звичайно, враховуйте такий показник, як відвідуваність вашої сторінки додатків. За низької відвідуваності точність тестів бажатиме кращого.

Отже, що є підготовлені гіпотези для А/В тестів?

Найголовніше визначити що тестуватиметься і в яких випадках. Якщо в один тест ви проведете безліч змін - нова іконка, оновлені скріншоти і короткий опис, то як ви врешті-решт зрозумієте, які зміни призвели до підвищення конверсії? Отже 1 гіпотеза – 1 елемент.

Основні складові А/В тестів:

Елемент тестування - іконка, скріншоти, відео, текстові поля.

Гіпотези - змінили колірну схему іконки, або оновили фокусні написи, або використовували нові скріншоти з інтерфейсу користувача.

Таким чином в результаті тестування у вас буде чітке розуміння, які зміни викликають позитивну, а які негативну реакцію користувачів.

Користувачі – основні учасники тестування. Ви можете налаштувати різні групи користувачів, які стануть учасниками тесту.

Тривалість – тривалість тестів залежить від обсягу трафіку, який отримує ваш додаток.

Процес А/В тесту в Google Play

Місце проведення – Google Play Console, Store Listing Experiments.

Тести для Android дуже зручно проводити в самій консолі, вибравши із запропонованого списку - зверніть увагу, що Google Play не можна протестувати Назву додатку. Можна порівняти до 3 варіантів із вихідною версією. Ви можете одночасно запускати лише один експеримент зі сторінкою для кожного додатку та до п'яти експериментів, якщо ви додали локалізовані графічні ресурси певними мовами. Кількість експериментів необмежена.

Процес А/В тесту в App Store

Апдейти від Apple дозволяють нам проводити експерименти без використання сторонніх сервісів.

Місце проведення - App Store Connect, Product Page Optimization

Кількість експериментів обмежена 3 продуктовими сторінками додатку. Можна вибрати локалізації, оскільки за промовчанням будуть вибрані всі локалізації. Тривалість тестів становитиме 90 днів, але його можна зупинити вручну.

Зверніть увагу, що тестові метадані сторінки додатку повинні пройти рев'ю стора, перед стартом тесту.

Аналіз результатів A/B тестів

A/B-тестування в ASO оптимізації має кінцеву мету - покращити:

1. Коефіцієнт конверсії
2. Видимість додатку

Зокрема, застосовуючи цей ітеративний процес до нашої стратегії ASO, ми можемо визначити, який із цих елементів призведе до покращення показників:

• Іконка
• Скріншоти
• Попередній перегляд відео
• Заголовок
• Підзаголовок або короткий опис

Обов'язково враховуйте:

• Об'єкти, цілі та гіпотези повинні бути встановлені до проведення тесту, щоб мати більш повну та точну картину експерименту.
• Розмір вибірки користувача повинен бути рівним для двох версій.

Підсумком A/B тестування стає чіткий відбір і комбінація елементів текстової та візуальної оптимізації, що призводить до збільшення конверсії. Не нехтуйте тестами, оскільки саме конверсія цікавить нас з погляду ефективності ASO оптимізації.

Нагадаємо вам про основні помилки при проведенні експерименту:

1. Занадто короткий період тестування – з практичного досвіду вже відомо, що експеримент має тривати щонайменше 7 днів. При цьому намагайтеся, щоб у цей період потрапили і вихідні та будні, а от періоду свят краще уникнути – для чистоти експерименту.
2. Екстраполяція результатів А/В тестів одного магазину додатків на інший. Як у випадку і оптимізацією, це може бути невдалим рішенням - поведінка користувача в різних сторах також різне.
3. Вплив інших чинників результати тестів. Якщо у вас на момент одного експерименту проходитиме платне просування, а під час іншого - ні, то й результати будуть сумнівно корисними. Пам'ятайте про рівні значення трафіку для всіх експериментів.

Загалом це все, що вам потрібно знати про проведення A/B тестів. Консолі розробників в обох магазинах надають вам всі можливості для цього, головне дотримуйтесь основних правил і не допускайте помилок. Якщо в якийсь момент ви сумніваєтеся в необхідності проведення експериментів, то подивіться на ваші показники індексації та конверсії. Якщо користувачі легко можуть знайти ваш додаток по різному пулу релевантних запитів і ви знаходитесь вгорі пошукової видачі, але установки не відбувається - це перший дзвінок для роботи з візуальними елементами, і тоді цей короткий гайд саме для вас.

Оптимізуйте та експериментуйте💙💛