От «орущих мужиков» к графике игры: кейс A/B-тестирования иконок Towerlands
Из этого кейса вы узнаете, как провести A/B-тест игрового приложения и выбрать лучшую иконку. Мы дадим полезные советы и покажем варианты иконок, которые дали наибольшую и наименьшую конверсию для игры Towerlands.
Меня зовут Константин Шабанов, я руковожу ASO и User Acquisition в Black Bears. За 9 лет на рынке мы привлекли в свои игры более 10 млн пользователей. Я расскажу о процессе A/B-тестирования иконок для игрового приложения. Этим кейсом я поделился на вебинаре про основы ASO от ASOdesk.
Статья поможет найти новые идеи иконок для игры. Вы узнаете инсайты, которые сделают ваши A/B-тесты эффективнее.
В Towerlands игроки должны отстоять замок, используя боевую башню. Мы запустили игру в Google Play и App Store в 2020 году. Она много раз получала фичеринг в разных странах.
A/B-тестирование иконок приложения в период soft launch
Перед глобальным релизом приложение должно пройти период soft launch — запуск в тех странах, где пользователи ведут себя также, как на целевых рынках. В первый раз игра вышла в Канаде, Австралии, Индонезии и на Филиппинах.
Иконка значительно влияет на конверсию в установку. Нам было важно выбрать самый эффективный вариант, поэтому мы провели A/B-тестирование. Мы проводили тесты на Android-платформе, применяя внутренние эксперименты Google. В работу брали только те иконки, которые показывали однозначный положительный результат в зелёной зоне.
Тесты проводились во всех странах soft launch. В первом эксперименте мы тестировали 4 иконки. Две из них показывают варианты башни из игры в 3D и 2D.
На третьей иконке мы обыграли популярную концепцию с «орущим мужиком». Подобные креативы до сих пор используют Clash of Clans и Game of War.
Четвёртый вариант сделан на основе анализа конкурентов. Похожие приложения часто изображают на иконке защитников башни. Именно эта иконка выиграла первый тест.
Её эффективность была намного выше, чем рисунок башни в 3D. Так мы убедились, что адаптация идей конкурентов для своего приложения часто даёт хорошие результаты.
Советуем использовать Keyword Chart в ASOdesk, чтобы проанализировать идеи конкурентов. Таблица показывает иконки других приложений, которые ранжируются по тем же поисковым запросам. Так вы определите общие тенденции в оформлении иконок конкурентов.
Мы продолжили тестировать гипотезы, сделали дневную и ночную версию и изобразили на иконке героя игры.
Также протестировали плоское изображение в flat-стиле. Такой вариант сильно отличается цветом. Контраст фона и картинки должен был выделиться в поисковой выдаче. Гипотеза оказалась верной и иконка выиграла.
Мы продолжили тестировать варианты иконок с башней.
А также внесли изменения в креативы, которые давали хорошую конверсию в процессе тестирования.
Эти идеи не показали однозначно положительный результат. Мы остановились на иконке в flat-стиле, поскольку она оказалась эффективной при тестировании во всех странах soft launch.
A/B-тестирование иконок приложения в США
После глобального запуска началось тестирование иконок для разных стран. Поговорим о США, так как результаты в этой стране были самыми интересными.
Мы продолжили экспериментировать с плоским изображением и попробовали яркие цвета. Победила первая иконка.
Затем сравнили победившую иконку с ещё одним вариантом, на который мы возлагали надежды. Но эта иконка проиграла и оказалась неэффективной.
Чтобы выделить лучший вариант из победивших, мы провели В/A-тест. С большим отрывом в эффективности победила более тёмная иконка (справа).
Далее стали экспериментировать с фоном и добавили красные элементы на иконки. Выиграла первоначальная иконка, которую мы осветлили и сделали ярче (номер 4).
Интересные результаты показал вариант с синим фоном и белым замком. Её конверсия была значительно выше, чем у остальных креативов. Эта иконка долго была на странице нашей игры.
Также хотелось попробовать варианты с персонажами игры. Мы отошли от концепции «орущего мужика», поскольку она показала плохие результаты на soft launch. Вместо этого сделали варианты с другими героями игры.
Паладин на третьей иконке оказался наиболее эффективным. Мы остановились на этом варианте, и добавили его на страницы в магазинах приложений.
7 советов по A/B-тестированию
1. Не прекращайте тестировать. Всегда ищите новые варианты, поскольку пользователи устают от одинаковых креативов. Конверсия может значительно вырасти, если вы просто поставите новую иконку, вместо старой.
2. Большого роста эффективности можно добиться даже за счёт незначительного изменения цвета, яркости и элементов.
3. Пользователи ведут себя по-разному даже в странах с похожей культурой. Конверсия иконки во многом зависит от локалии. Поэтому запускайте отдельное тестирование для каждой страны, чтобы получить объективные результаты.
4. Перепроверяйте свои результаты B/A-тестированием. Так вы поймёте, какая из выигравших иконок наиболее эффективна. Чтобы избежать ложных выводов, применяйте калькулятор статистической значимости.
5. Идеи конкурентов могут оказаться выигрышными и для вашего приложения, поэтому проводите анализ и находите лучшие креативы других приложений. Но помните, что иконка должна быть заметна в поиске и отражать ваш игровой процесс. В статье ASOdesk вы найдёте тренды визуальной оптимизации игр 2021.
6. Простые иконки с яркими контрастами показывают хорошие результаты. В играх редко используются минималистичные иконки, вы можете увидеть много креативов со сложной графикой в поиске. Поэтому плоское изображение на нейтральном цвете может привлечь внимание пользователя и показать отличные результаты.
7. «Орущие мужики» на иконке могут оказаться плохим решением. Популярные креативы надоедают пользователю и начинают работать хуже. Ищите тот уникальный вариант, который даст наиболее высокую конверсию вашему приложению.