Приступаем к A/B-тестированию мобильных приложений? Вот идеи, которые вы можете попробовать немедленно

Если вы хотите начать экспериментировать со своими мобильными приложениями, вам нужна эта статья. Цель состоит в том, чтобы познакомить вас с созданием гипотез, тестированием вариантов, измерением и внедрением изменений к концу этой статьи. Следовательно, идеи и рассмотренные примеры просты и легко реализуемы.

Типы экспериментов с мобильными приложениями, которые вы можете попробовать

Давайте рассмотрим четыре основных эксперимента, которые существенно влияют на взаимодействие с пользователем в приложении, и покажем на реальных примерах, как вы можете опробовать их в VWO.

1. Поисковые эксперименты

Пользователи с меньшей продолжительностью концентрации внимания легко отвлекаются и могут не предпринимать никаких действий, если препятствий слишком много. Учитывая ограниченное пространство экрана на мобильных устройствах, нецелесообразно включать обширное меню или различные фильтры для облегчения навигации в приложении. Таким образом, включение и оптимизация функций поиска становится необходимым для улучшения видимости продукта или функции и обеспечения надлежащей демонстрации мобильных приложений.

Метрики для отслеживания

Предполагая, что вы уже рассматриваете возможность оптимизации поиска приложений, вот несколько показателей, за которыми следует внимательно следить:

• Скорость выхода из поиска
• Количество пользователей, выбравших элемент, показанный в поиске
• Количество поисковых запросов без результатов

Эти показатели можно легко определить в VWO. Информация, полученная из этих данных, даст вам четкое представление о том, где в настоящее время находится поисковая эффективность вашего приложения, а где она отстает.

Углубитесь в понимание пользователей с помощью качественного исследования поведения

Чтобы сделать ваши наблюдения более глубокими, полезно дополнить количественные данные качественными исследованиями. Тепловые карты широко используются (и любимы) для этого, и на то есть веская причина. Допустим, вы видите снижение количества кликов по результатам поиска. Причин может быть несколько:

• Результаты поиска не релевантны
• Порядок результатов не персонализирован
• Количество элементов, отображаемых после поиска, слишком мало

Предстоящий продукт VWO Mobile Insights позволяет легко использовать записи сеансов и тепловые карты или карты прокрутки, чтобы глубже изучить поведение пользователей и определить, что необходимо оптимизировать. С помощью VWO Mobile Insights вы можете найти ответы на такие вопросы, как:

• Как посетители используют функцию поиска? (например, для поиска категорий по сравнению с указанными конкретными продуктами)
• Влияет ли автозаполнение на конверсию?
• Эффективен ли просмотр их истории поиска для увеличения продаж ранее купленных товаров?
• Что вызывает трения в их опыте поиска?

Примеры, которые вы можете попробовать

Вы можете формулировать и проверять гипотезы с помощью A/B-тестов, основанных на ваших наблюдениях.

Если вам интересно, с чего начать, вот несколько примеров из реальной жизни, к которым вы можете обратиться для вдохновения.

Пример 1. Результаты поиска по категориям

Некоторые из лучших реализаций поиска приложений находятся на сайтах социальных сетей, таких как Instagram и YouTube. Когда вы начнете вводить текст в строке поиска Instagram, вы увидите результаты, упорядоченные по категориям, таким как учетные записи, аудио, теги, места и т. д. Instagram и YouTube показывают историю поиска, предоставляя пользователям доступ одним щелчком мыши, чтобы повторить свои предыдущие поисковые фразы.

Пример 2. Результаты поиска с предложениями продуктов

GOAT, американская платформа электронной коммерции, внедрила впечатляющую функцию поиска, которая позволяет пользователям быстро находить то, что им нужно. Когда вы нажимаете значок поиска на нижней панели навигации, он показывает вам несколько категорий продуктов для просмотра и заполняет страницу элементами выбранной категории. Когда вы щелкаете строку поиска и начинаете вводить что-то, вы можете увидеть предложения продуктов с соответствующим текстом и изображениями.

Тесты, которые можно разработать

Итак, допустим, вы хотите повысить рейтинг кликов для результатов поиска. Вот две гипотезы, которые вы можете проверить на основе приведенных выше примеров для достижения указанной цели.

Тест 1 Идея
Гипотеза 1. Группировка результатов поиска по разным категориям, таким как люди, места и группы, повысит вовлеченность пользователей.

Элемент управления: результаты поиска отображаются в виде списка продуктов.

Вариант: результаты поиска отображаются вместе с фильтрами «группировать по».

Тест 2 Идея
Гипотеза 2. Отображение изображений вместе с результатами поиска улучшит рейтинг кликов для предлагаемых продуктов.

Элемент управления: результаты, показывающие предложения продуктов, содержащие только текст.

Вариант: результаты, показывающие предложения продуктов, содержащие как текст, так и изображения.

Вы можете быстро реализовать такие тесты на платформе мобильного A/B-тестирования VWO всего за несколько шагов. Ниже приведен видеоролик, демонстрирующий этапы создания теста на основе гипотезы 1, например, для приложения Android, созданного с использованием Java. VWO также поддерживает такие фреймворки, как Flutter, Cordova и React-Native.

За кулисами VWO

VWO предоставляет облегченные SDK для iOS, Android и всех популярных внутренних языков . Добавление SDK мобильного приложения — это одноразовый процесс интеграции, после которого VWO генерирует ключи API, которые можно использовать для инициализации приложений как для iOS, так и для Android. Вы можете обратиться к этому подробному руководству, если вам нужно подробное объяснение шагов.

Итак, вы создали варианты, добавили цели конверсии и запустили тестирование мобильного приложения. Следующим важным шагом является анализ и извлечение информации из результатов тестирования. Механизм VWO SmartStats , основанный на байесовской статистике, выполняет тяжелую работу по вычислению и представлению точных результатов тестирования в виде простых для использования отчетов, которые можно анализировать для получения практических выводов. Отчеты VWO являются исчерпывающими и позволяют фильтровать результаты по дате и сегментам посетителей и даже сравнивать эффективность нескольких целей в тесте.

2. Навигационные эксперименты

Навигация — одна из самых сложных вещей для создания, потому что она включает в себя множество сложностей, таких как группировка, дизайн и простота обнаружения функций. Эксперты рекомендуют «Tree Test», чтобы помочь установить базовый уровень того, насколько «находимые» вещи в вашем приложении. Это закрытый тест, проводимый среди пользователей, чтобы узнать, как быстро они смогут найти что-то в приложении. Эта статья поможет вам начать работу с древовидными тестами, а также послужит важным первым шагом к разработке экспериментов для улучшения навигации.

Метрики для отслеживания

Как и в случае с экспериментами по улучшению поиска, вот несколько показателей, которые вы должны отслеживать.

• Уровень находимости предметов
• Время, затраченное на поиск функции или продукта
• Количество раз, когда пользователи сделали это правильно с первого клика
• Изменчивость в поиске времени

Сочетая производительность этих показателей с данными качественных исследований, вы можете определить эффективную стратегию улучшения навигации вашего приложения.

Примеры, которые вы можете попробовать

Пример 1 – Карточная навигация

Если вы ищете вдохновение для навигации, одно из моих любимых — Calm, приложение для медитации. Их планировка напоминает серию дверей, каждая из которых служит точкой входа. Карточки далее разделены на категории, такие как «Психическое здоровье», «Рекомендуемые коллекции», «Быстро и просто» и так далее. Меню-гамбургер могло бы быть альтернативой этому стилю навигации, но его использование сократилось из-за его низкой обнаруживаемости, что снижает количество кликов пользователей. Напротив, карточная навигация все больше набирает обороты благодаря своему удобному дизайну.

Пример 2. Простая навигация по тегам

Google Maps — еще одно приложение с удобной навигацией. После того, как вы введете местоположение, вы увидите такие параметры, как направления, совместное использование и сохранение местоположения в виде легко заметных кнопок фильтра. Кроме того, вы также найдете часто используемые объекты в качестве кнопок фильтра, которые помогут вам исследовать рестораны, торговые центры, банкоматы и парки рядом с введенным местоположением. Навигация по Картам Google проста и помогает людям максимально эффективно использовать приложение.

Тесты, которые можно разработать

Повышение рейтинга кликов продуктов из навигации обычно является основной целью владельцев электронной коммерции, пытающихся улучшить навигацию в своих приложениях. Если это то, что вы пытаетесь сделать, вот две гипотезы для проверки:

Тест 1 Идея

Гипотеза 1. Замена гамбургер-меню навигационными плитками на основе карт повысит коэффициент конверсии.

Управление: меню гамбургера отображает различные категории продуктов для пользователей.

Вариант: Категории товаров показаны в формате карты.

Тест 2 Идея

Гипотеза 2: Отображение кнопок фильтров для повседневного использования приведет к тому, что пользователи будут быстрее находить нужную информацию и чаще ее использовать.

Элемент управления: панель поиска функций остается в верхней части приложения без кнопок фильтра.
Вариант: панель поиска находится вверху, а кнопки фильтров для повседневного использования — вверху и внизу экрана.

Если вы хотите запустить оба теста параллельно, вы можете сделать это с помощью VWO, не беспокоясь об искажении данных. VWO имеет возможность запускать взаимоисключающие тесты в мобильных приложениях. Это гарантирует, что пользователь мобильного приложения, участвующий в одной кампании, не будет участвовать в другой кампании, входящей во взаимоисключающую группу. Этого можно добиться, добавив несколько кампаний во взаимоисключающую группу , чтобы посетители не пересекались ни с одной из кампаний. Создание взаимоисключающей группы на VWO гарантирует, что ваше мобильное приложение обеспечивает единообразие и что на результаты одной кампании не влияет другая, приписывая конверсии правильной кампании.

3. Онбординговые эксперименты

Процесс регистрации в приложении подвержен самым большим изменениям, поскольку он развивается вместе с вашими продуктами, категориями, аудиторией, целями и другими факторами. В то время как опыт онбординга сильно зависит от того, что делает ваш продукт, у всех хороших есть несколько общих черт. Они:

• Восстановите ценностное предложение приложения
• Ознакомьте пользователей с функциями и преимуществами
• Поощряйте успешное внедрение приложения
• Сведите к минимуму время, затрачиваемое клиентами на получение желаемой ценности от использования вашего приложения.

Итак, если вы хотите улучшить опыт оптимизации вашего приложения, было бы неплохо сначала найти ответы на некоторые соответствующие вопросы:

• Процесс адаптации нашего приложения слишком длительный?
• Когда люди осознают ценность процесса адаптации?
• Какие шаги в процессе адаптации должны быть необязательными?
• Ищут ли пользователи адаптационную помощь и поддержку?

Метрики для отслеживания

Для эффективной поддержки ваших целей и обсуждения важно полагаться на данные и позволять им управлять вашей дорожной картой тестирования. Отслеживание основных показателей, подобных перечисленным ниже, может быть полезным:

• Скорость завершения адаптации
• Время окупаемости (время между адаптацией и получением первой ценности от вашего приложения)
• Коэффициент активации отражает то, как новые пользователи воспринимают ваше приложение.
• Количество обращений в службу поддержки, созданных за определенный период

Примеры, которые вы можете попробовать

Давайте обсудим несколько примеров, которые могут вдохновить вас на тестирование и улучшение процесса онбординга вашего приложения.

Пример 1. Несколько вариантов входа в процессе адаптации

Вы задаетесь вопросом, должны ли вы предлагать электронную почту, вход через социальные сети или и то, и другое во время регистрации пользователя? Every Plate, американская платформа доставки еды, позволяет пользователям выбирать любой из двух вариантов входа в систему.

Пример 2. Многоэтапный процесс адаптации

Сколько шагов вы должны включить в процесс адаптации вашего приложения? Посмотрите, как Duolingo преуспела в этом, доказав, что хорошо продуманный многоэтапный процесс адаптации может быть успешным без потери интереса пользователя. Приложение для изучения языка отображает серию экранов, задающих пользователям несколько (но актуальных) вопросов во время адаптации, чтобы улучшить их опыт обучения.

Тесты, которые можно разработать

Хотите узнать, сколько людей завершили процесс адаптации или сколько обращений в службу поддержки было отправлено? Вы можете отслеживать эти цели, опробовав следующие идеи тестирования.

Тест 1 Идея

Гипотеза 1. Предоставление логинов через социальные сети вместе с электронной почтой может привести к лучшей конверсии на шаге 1.

Управление: Просто логин по электронной почте/телефону

Вариант: Вход по электронной почте + Google + Facebook

Тест 2 Идея

Гипотеза 2. Отображение индикатора выполнения во время адаптации подтолкнет пользователей к завершению процесса адаптации.

Контроль: многоэтапный процесс адаптации, представленный без индикатора выполнения.

Вариант: многоэтапный процесс адаптации с индикатором выполнения в верхней части каждого экрана адаптации.

С помощью такого инструмента, как VWO, вы можете настроить целевую аудиторию для своих тестов на основе различных параметров, таких как технология, тип посетителя, время и т. д. Вы можете выбрать сегмент таргетинга из галереи сегментов или создать собственный.

В контексте предыдущего тестового примера предположим, что исследование пользователей показывает, что пользователи не хотят вводить свой адрес электронной почты и пароль и предпочитают более гибкие варианты входа в систему. Основываясь на этом исследовании, вы можете сначала настроить таргетинг на пользователей на медленном рынке, скажем, в Мексике, чтобы увидеть, вызовет ли предложение вариантов входа через социальные сети положительный отклик и увеличится ли количество пользователей, прошедших первый шаг адаптации. Для этого вы можете перейти к пользовательским сегментам, добавить условия и выбрать соответствующий атрибут (Страна) и значение (Мексика).

Кроме того, вы можете использовать операторы «И/ИЛИ» для более точного выбора аудитории. Например, предположим, что ваше учебное приложение предназначено в первую очередь для профессионалов среднего звена в Мексике. В этом случае вы можете выбрать параметр пользовательской переменной и ввести «Возраст» в поле имени и возрастную группу (например, 35–45) в поле значения. Затем вы можете выбрать скобку с обеих сторон и выбрать операцию «И». В качестве альтернативы, если вы хотите отслеживать эффективность любой из групп, вы можете использовать оператор «ИЛИ» при выборе аудитории.

Вот короткая статья о пользовательских сегментах, если вы хотите узнать больше.

4. Ценовые эксперименты

Предложение скидок или купонов необходимо для увеличения продаж и привлечения клиентов в ваше приложение. Но как вы можете быть уверены, что ваша ценовая стратегия помогает вашему бизнесу расти?

Слишком высокие цены могут оттолкнуть клиентов, а слишком низкие — означать потерю дохода.

Метрики для отслеживания

Чтобы определить, эффективны ли ваши цены, проанализируйте следующие показатели, связанные с доходом для вашего приложения:

• Пожизненная ценность — доход, полученный на пользователя с момента установки им вашего приложения.
• Частота покупок — среднее количество покупок, которые ваши пользователи совершают за определенный период времени.
• Цена за установку — цены, уплачиваемые за привлечение новых пользователей с помощью платной рекламы.

Эти показатели можно настроить в VWO. Если вы считаете, что цифры не соответствуют вашим ожиданиям, возможно, пришло время рассмотреть тарифные планы A/B-тестирования. Это может помочь вам максимизировать доход, не рискуя убытками.

Примеры, которые вы можете попробовать

Пример 1. Предоставление подписчикам годовой цены со скидкой

Strava, популярное фитнес-приложение, требует от своих пользователей ежемесячной или годовой абонентской платы за доступ к расширенным функциям. Клиенты могут выбирать между ежемесячным или ежегодным циклом выставления счетов, причем в последнем случае указывается потенциальная экономия. Эта скидка может побудить пользователей выбрать годовой план.

Пример 2. Отображение динамического ценообразования с ограничением по времени

Берегись! — популярная игра, в которой игроки подносят мобильное устройство ко лбу и пытаются угадать слово или фразу, появляющуюся на экране, на основе подсказок своих друзей. Обратите внимание, как исходная цена перечеркнута, и отображается ограничение по времени, чтобы создать ощущение срочности и побудить пользователей действовать быстро.

Вы можете создавать эффективные тесты приложений на основе этих методов отображения цен.

Тесты, которые можно разработать

Допустим, вы хотите увеличить количество транзакций/платных подписок в своем приложении. Ниже приведены тестовые идеи, с которыми вы можете поэкспериментировать.

Тест 1 Идея

Гипотеза 1: демонстрация потенциальной экономии на плане подписки побудит пользователей выбрать более длительный план.

Управление: ежемесячный план подписки и годовой план подписки.

Вариант: месячная и годовая подписка дает потенциальную экономию для обоих упомянутых планов.

Тест 2 Идея

Гипотеза 2. Психологические тактики, такие как срочность и вычеркивание первоначальной цены, могут увеличить количество пользователей, выбирающих это предложение со скидкой.

Элемент управления: Простой баннер со скидкой, на котором написана новая цена.

Вариант: яркий баннер со скидкой, на котором исходная цена зачеркнута, отображается цена со скидкой и таймер, показывающий доступность предложения.

Давайте рассмотрим более продвинутый подход, называемый многоруким бандитом (MAB), для одного из экспериментов, которые мы обсуждали ранее, например, для теста на скидку, вдохновленного примером Heads Up. В отличие от A/B-тестов, которые мы обсуждали ранее, метод многорукого бандита немного сложнее и включает в себя другую методологию.

Предположим, у вас есть ограниченное по времени предложение со скидкой с несколькими вариантами, которые нужно протестировать, и вам необходимо как можно быстрее определить наиболее эффективный вариант, чтобы свести к минимуму упущенную выгоду. В отличие от A/B-тестов, направленных на определение наилучшего варианта, MAB фокусируется на более быстром получении лучшего варианта. Когда окно оптимизации невелико, MAB больше подходит для минимизации упущенной возможности в ценообразовании, скидках, подписках и т. д. В таких случаях посетители, которые обслуживаются вторым лучшим вариантом и не конвертируются, представляют собой упущенные возможности для получения дохода, поскольку они могут иметь конвертируются, если они были частью выигрышного варианта. Вы можете узнать больше о MAB на VWO здесь.

Ускорьте успех своего приложения с потрясающими идеями тестирования!

Мы надеемся, что идеи A/B-тестирования, обсуждаемые в этой статье, оказались вам полезными. Однако великие идеи приносят пользу только в том случае, если они правильно реализованы. Итак, если вы ищете платформу, которая предлагает комплексные функции, такие как легкие SDK для Android/iOS, круглосуточную техническую поддержку для нескольких языков, возможность выбирать индивидуальную аудиторию для тестов и предоставлять надежные отчеты в режиме реального времени. , Тестирование мобильных приложений VWO должно быть вашим лучшим выбором. Кроме того, с приближением полной версии Mobile Insights вы можете получить более глубокое понимание поведения пользователей, улучшить показатели конверсии и, что наиболее важно, улучшить общее взаимодействие с пользователем вашего приложения. Запросите бесплатную демонстрацию, чтобы увидеть, как VWO улучшает взаимодействие пользователей с вашим мобильным приложением.