Introdução ao teste A/B de aplicativos móveis? Aqui estão as ideias que você pode experimentar imediatamente

Se você deseja começar a experimentar seus aplicativos móveis, este é o artigo de que você precisa. O objetivo é familiarizá-lo com a criação de hipóteses, testes de variações e medição e implementação de mudanças até o final deste artigo. Assim, as ideias e os exemplos discutidos são simples e fáceis de implementar.

Tipos de experimentos de aplicativos para dispositivos móveis que você pode experimentar

Vejamos os quatro principais experimentos que afetam significativamente a experiência do usuário do aplicativo e mostramos, usando exemplos do mundo real, como você pode experimentá-los no VWO.

1. Experimentos de pesquisa

Os usuários com períodos de atenção mais curtos são facilmente distraídos e podem não agir se houver muitos obstáculos. Dado o espaço de tela limitado em dispositivos móveis, não é prático incluir um menu extenso ou uma variedade de filtros para auxiliar a navegação dentro do aplicativo. Portanto, incorporar e otimizar a funcionalidade de pesquisa torna-se necessário para melhorar a visibilidade do produto ou recurso e garantir a apresentação adequada para aplicativos móveis.

Métricas para rastrear

Supondo que você já esteja pensando em otimizar sua pesquisa de aplicativos, aqui estão algumas métricas para ficar de olho:

• Pesquisar taxa de saída
• Nº de usuários selecionando o item mostrado na pesquisa
• Número de pesquisas sem resultados

Essas métricas podem ser definidas facilmente no VWO. Os insights extraídos desses dados fornecerão uma compreensão clara de onde está o desempenho de pesquisa do seu aplicativo atualmente e onde ele está atrasado.

Mergulhe profundamente nas percepções do usuário com pesquisa qualitativa de comportamento

Para fornecer mais profundidade às suas observações, complementar dados quantitativos com pesquisa qualitativa pode ser valioso. Heatmaps são amplamente usados ​​(e amados) para isso, e por um bom motivo. Digamos que você veja uma queda no número de cliques nos resultados da pesquisa. Pode haver alguns motivos para isso:

• Os resultados da pesquisa não são relevantes
• A ordem dos resultados não é personalizada
• O número de itens exibidos após a pesquisa é muito baixo

O próximo produto Mobile Insights da VWO facilita o aproveitamento de gravações de sessão e mapas de calor ou mapas de rolagem para aprofundar o comportamento do usuário e identificar o que precisa ser otimizado. Com o VWO Mobile Insights, você pode encontrar respostas para perguntas como:

• Como os visitantes estão usando a função de pesquisa? (por exemplo, para procurar categorias versus produtos específicos apontados)
• O preenchimento automático está afetando a conversão?
• Mostrar o histórico de pesquisa deles é eficaz para melhorar as vendas de itens comprados anteriormente?
• O que está causando atrito em sua experiência de pesquisa?

Exemplos que você pode tentar

Você pode formular e validar hipóteses por meio de testes A/B com base em suas observações.

Se você está se perguntando por onde começar, aqui estão alguns exemplos do mundo real aos quais você pode se inspirar.

Exemplo 1 – Resultados da pesquisa por categoria

Algumas das melhores implementações de pesquisa de aplicativos estão em sites de mídia social como Instagram e YouTube. Quando você começar a digitar na barra de pesquisa do Instagram, verá os resultados organizados em categorias como contas, áudio, tags, lugares etc. O Instagram e o YouTube mostram o histórico de pesquisa, dando aos usuários acesso com um clique para repetir as frases de pesquisa anteriores.

Exemplo 2 – Resultados de busca com sugestões de produtos

GOAT, uma plataforma americana de comércio eletrônico, implementou um recurso de pesquisa impressionante que permite aos usuários encontrar rapidamente o que precisam. Quando você clica no ícone de pesquisa na barra de navegação inferior, ele mostra algumas categorias de produtos para navegar e preenche a página com itens da categoria escolhida. Quando você clica na barra de pesquisa e começa a digitar algo, pode ver sugestões de produtos com textos e imagens correspondentes.

Testes que podem ser concebidos

Então, digamos que você queira melhorar a taxa de cliques de seus resultados de pesquisa. Aqui estão duas hipóteses que você pode testar com base nos exemplos acima para atingir o referido objetivo.

Teste 1 Ideia
Hipótese 1: agrupar os resultados da pesquisa em diferentes categorias, como pessoas, lugares e grupos, melhorará o envolvimento do usuário.

Controle: os resultados da pesquisa são exibidos como uma lista de produtos.

Variante: resultados de pesquisa exibidos junto com filtros 'agrupar por'.

Teste 2 Ideia
Hipótese 2: Mostrar imagens junto com os resultados da pesquisa melhorará a taxa de cliques para sugestões de produtos.

Controle: Resultados mostrando sugestões de produtos que possuem apenas texto.

Variante: resultados que mostram sugestões de produtos com texto e imagens.

Você pode implementar rapidamente esses testes na plataforma de teste A/B móvel da VWO em apenas algumas etapas. Abaixo está um vídeo demonstrando as etapas envolvidas na criação de um teste baseado na hipótese 1 para um aplicativo Android construído usando Java, por exemplo. O VWO também oferece suporte a estruturas como Flutter, Cordova e React-Native.

Nos bastidores do VWO

O VWO fornece SDKs leves para iOS, Android e todas as linguagens de back-end populares . Adicionar o SDK de aplicativo móvel é um processo de integração único, após o qual o VWO gera chaves de API que você pode usar para inicialização de aplicativo para aplicativos iOS e Android. Você pode consultar este guia completo se precisar de uma explicação detalhada das etapas.

Você criou variações, adicionou metas de conversão e lançou um teste de aplicativo móvel. A próxima etapa crucial é analisar e extrair informações dos resultados do teste. O mecanismo SmartStats da VWO, baseado em estatísticas bayesianas, faz o trabalho pesado para calcular e apresentar resultados de teste precisos como relatórios fáceis de consumir que você pode analisar para obter insights acionáveis. Os relatórios do VWO são abrangentes e permitem que você filtre os resultados por data e segmentos de visitantes e até mesmo compare o desempenho de várias metas em um teste.

2. Experimentos de navegação

A navegação está entre as coisas mais difíceis de construir porque envolve múltiplas complexidades, como agrupamento, design e facilidade de descoberta de recursos. Os especialistas recomendam o “Teste de árvore” para ajudar a definir uma linha de base para o quão “encontráveis” as coisas são em seu aplicativo. É um teste fechado realizado entre os usuários para ver a rapidez com que eles podem encontrar algo dentro do aplicativo. Este artigo é uma ótima peça para você começar nos testes de árvore e também serve como um primeiro passo significativo para projetar experimentos para melhorar a navegação.

Métricas para rastrear

Assim como fizemos com os experimentos para melhorar a pesquisa, aqui estão algumas métricas que você deve acompanhar

• Taxa de localização de itens
• O tempo necessário para encontrar um recurso ou produto
• Número de vezes que os usuários acertaram no primeiro clique
• Variabilidade em encontrar tempo

Ao combinar o desempenho dessas métricas com insights de pesquisa qualitativa, você pode determinar uma estratégia eficaz para aprimorar a navegação do seu aplicativo.

Exemplos que você pode tentar

Exemplo 1 – Navegação de cartão

Se você está procurando inspirações de navegação, um dos meus favoritos é o Calm, um aplicativo de meditação. Seu layout se assemelha a uma série de portas, cada uma servindo como ponto de entrada. Os cartões são ainda segmentados em categorias como 'Mental Fitness', 'Coleções recomendadas', 'Rápido e fácil' e assim por diante. O menu hambúrguer poderia ser uma alternativa a esse estilo de navegação, mas seu uso tem diminuído devido à sua baixa capacidade de descoberta, diminuindo os cliques do usuário. Pelo contrário, a navegação em estilo de cartão está ganhando cada vez mais força por seu design amigável.

Exemplo 2 – Navegação de tags simples

O Google Maps é outro aplicativo com navegação amigável. Depois de inserir um local, você vê opções como direções, compartilhar e salvar o local na forma de botões de filtro facilmente perceptíveis. Além disso, você também encontra instalações comumente usadas como botões de filtro, ajudando a explorar restaurantes, shoppings, caixas eletrônicos e parques próximos ao local inserido. A navegação do Google Maps é simples e ajuda as pessoas a aproveitar ao máximo o aplicativo.

Testes que podem ser concebidos

Melhorar a taxa de cliques de produtos a partir da navegação geralmente é o principal objetivo dos proprietários de comércio eletrônico que tentam melhorar a experiência de navegação em aplicativos. Se é isso que você também está tentando fazer, aqui estão duas hipóteses para testar:

Teste 1 Ideia

Hipótese 1: Substituir o menu de hambúrguer por blocos de navegação baseados em cartões aumentará as taxas de conversão.

Controle: O menu de hambúrguer exibe diferentes categorias de produtos para os usuários explorarem.

Variante: categorias de produtos mostradas em um formato de layout de cartão.

Teste 2 Ideia

Hipótese 2: Mostrar botões de filtro para casos de uso diário fará com que os usuários encontrem as informações relevantes mais rapidamente e as usem com mais frequência.

Controle: A barra de pesquisa de recursos fica na parte superior do aplicativo sem botões de filtro.
Variante: a barra de pesquisa está na parte superior, com botões de filtro para casos de uso diário na parte superior e inferior da tela.

Se você deseja executar os dois testes em paralelo, pode fazê-lo com o VWO sem se preocupar com dados distorcidos. O VWO tem a capacidade de executar testes mutuamente exclusivos em aplicativos móveis. Isso garante que um usuário de aplicativo móvel que participa de uma campanha não participe de outra campanha que faça parte do grupo mutuamente exclusivo. Você pode fazer isso adicionando várias campanhas a um grupo mutuamente exclusivo para garantir que nenhum visitante se sobreponha em nenhuma das campanhas. Criar um grupo mutuamente exclusivo no VWO garante que seu aplicativo móvel forneça uma experiência consistente e que os resultados de uma campanha não sejam influenciados por outra, atribuindo as conversões à campanha certa.

3. Experiências de integração

A experiência de integração do aplicativo está sujeita à maioria das alterações à medida que evolui com seus produtos, categorias, público, metas e outros. Embora uma experiência de integração mude muito dependendo do que seu produto faz, todas as boas têm algumas coisas em comum. Eles:

• Restabeleça a proposta de valor do aplicativo
• Familiarize os usuários com os recursos e benefícios
• Incentive a adoção bem-sucedida do aplicativo
• Minimize o tempo gasto pelos clientes para obter o valor que desejam ao usar seu aplicativo

Portanto, se você deseja melhorar sua experiência de otimização de aplicativos, pode ser uma boa ideia encontrar respostas para algumas perguntas pertinentes primeiro:

• O processo de integração do nosso aplicativo é muito demorado?
• Quando as pessoas percebem valor durante o processo de onboarding?
• Quais etapas do processo de integração devem ser opcionais?
• Os usuários procuram ajuda e suporte para integração?

Métricas para rastrear

Para apoiar seus objetivos e discussões de forma eficaz, é essencial confiar nos dados e permitir que eles orientem seu roteiro de teste. Rastrear métricas básicas como as listadas abaixo pode ser útil:

• Taxa de conclusão de integração
• Time to value (tempo entre a integração e a obtenção do primeiro valor do seu aplicativo)
• A taxa de ativação reflete como os novos usuários percebem seu aplicativo
• Nº de tíquetes de suporte de integração gerados para um período específico

Exemplos que você pode tentar

Vamos discutir alguns exemplos que podem inspirá-lo a testar e melhorar o processo de integração do seu aplicativo.

Exemplo 1 – Várias opções de login no fluxo de integração

Você se pergunta se deve oferecer e-mail, login social ou ambos durante a integração do usuário? O Every Plate, uma plataforma de entrega de refeições com sede nos Estados Unidos, permite que os usuários escolham qualquer uma das duas opções de login.

Exemplo 2 – Fluxo de integração em várias etapas

Quantas etapas você deve incluir no processo de integração do seu aplicativo? Veja como o Duolingo se saiu bem - provando que um processo de integração bem elaborado em várias etapas pode ser bem-sucedido sem perder o interesse do usuário. O aplicativo de aprendizado de idiomas exibe uma série de telas que fazem várias perguntas (mas relevantes) aos usuários durante a integração para melhorar sua experiência de aprendizado.

Testes que podem ser concebidos

Você gostaria de saber quantas pessoas concluíram o processo de integração ou quantos tíquetes de suporte foram gerados? Você pode acompanhar essas metas experimentando as ideias de teste a seguir.

Teste 1 Ideia

Hipótese 1: Fornecer logins sociais junto com e-mail pode resultar em melhor conversão na etapa 1

Controle: Apenas login por e-mail/telefone

Variante: Login por e-mail + Google + Facebook

Teste 2 Ideia

Hipótese 2: Mostrar uma barra de progresso durante a integração estimulará os usuários a concluírem o processo de integração.

Controle: um processo de integração de várias etapas apresentado sem uma barra de progresso.

Variante: um processo de integração em várias etapas com uma barra de progresso na parte superior de cada tela de integração.

Com uma ferramenta como o VWO, você pode personalizar o público-alvo para seus testes com base em vários parâmetros, como tecnologia, tipo de visitante, horário etc. Você pode selecionar um segmento de segmentação na Galeria de segmentos ou criar um personalizado.

No contexto do exemplo de teste anterior, suponha que a pesquisa do usuário indique que os usuários são avessos a inserir seu e-mail e senha e preferem opções de login mais flexíveis. Com base nessa pesquisa, você pode primeiro segmentar usuários em um mercado lento, digamos o México, para ver se a oferta de opções de login social gera uma resposta positiva e aumenta o número de usuários que concluem a primeira etapa de integração. Para fazer isso, você pode ir para segmentos personalizados para adicionar condições e selecionar o atributo correspondente (País) e valor (México).

Além disso, você pode usar os operadores 'E/OU' para uma seleção de público mais precisa. Por exemplo, suponha que seu aplicativo de aprendizado tenha como alvo principalmente profissionais em meio de carreira no México. Nesse caso, você pode escolher a opção de variável personalizada e inserir 'Idade' no campo de nome e uma faixa etária (como 35-45) no campo de valor. Então, você pode selecionar o colchete em ambos os lados e escolher a operação 'E'. Como alternativa, se quiser acompanhar o desempenho de qualquer um dos grupos, você pode usar o operador 'OR' na seleção de público.

Aqui está um pequeno artigo sobre segmentos personalizados se você quiser saber mais.

4. Experimentos de preços

Oferecer descontos ou cupons são necessários para impulsionar as vendas e atrair clientes para o seu app. Mas como você pode ter certeza de que sua estratégia de preços está ajudando sua empresa a crescer?

Definir preços muito altos pode afastar os clientes, enquanto defini-los muito baixos pode significar perda de receita.

Métricas para rastrear

Para determinar se seu preço é eficaz, analise as seguintes métricas relacionadas à receita de seu aplicativo:

• Valor vitalício – receita gerada por usuário a partir do momento em que ele instalou seu aplicativo
• Frequência de compra – O número médio de compras que seus usuários fazem em um determinado momento.
• Custo por instalação – preços pagos para adquirir novos usuários de anúncios pagos.

Essas métricas podem ser configuradas no VWO. Se você acredita que os números não estão de acordo com suas expectativas, talvez seja hora de considerar os planos de preços de teste A/B. Isso pode ajudá-lo a maximizar a receita sem arriscar perdas.

Exemplos que você pode tentar

Exemplo 1 – Oferecendo um preço anual com desconto para assinantes

O Strava, um popular aplicativo de fitness, exige que seus usuários paguem taxas de assinatura mensal ou anual para acessar seus recursos avançados. Os clientes podem escolher entre ciclos de cobrança mensais ou anuais, com o potencial de economia mencionado para o último. Esse desconto pode incentivar os usuários a optar pelo plano anual.

Exemplo 2 – Exibição de preços dinâmicos com limite de tempo

Atenção! é um jogo popular em que os jogadores seguram um dispositivo móvel na testa e tentam adivinhar a palavra ou frase que aparece na tela com base nas pistas de seus amigos. Observe como o preço original é riscado e um limite de tempo é exibido para criar um senso de urgência e incentivar os usuários a agir rapidamente.

Você pode criar testes de aplicativo eficazes com base nesses métodos de exibição de preços.

Testes que podem ser concebidos

Digamos que você queira aumentar o número de transações/assinaturas pagas em seu aplicativo. A seguir estão as ideias de teste que você pode experimentar.

Teste 1 Ideia

Hipótese 1: Mostrar economia potencial para um plano de assinatura incentivará os usuários a optar pelo mais longo.

Controle: Plano de assinatura mensal e plano de assinatura anual.

Variação: assinaturas mensais e anuais têm economia potencial para ambos os planos mencionados.

Teste 2 Ideia

Hipótese 2: Táticas psicológicas como urgência e eliminação do preço original podem aumentar o número de usuários que optam por esta oferta de desconto.

Controle: Um banner de desconto simples com um novo preço escrito.

Variação: um banner de desconto vibrante com o preço original riscado, o preço com desconto exibido e um cronômetro indicando a disponibilidade da oferta.

Vamos explorar uma abordagem mais avançada chamada bandido multi-armado (MAB) para um dos experimentos que discutimos anteriormente, como o teste de desconto inspirado no exemplo Atenção. Ao contrário dos testes A/B que discutimos anteriormente, a abordagem do bandido multi-armado é um pouco mais complexa e envolve uma metodologia diferente.

Suponha que você tenha uma oferta de desconto sensível ao tempo com várias variações para testar e precise identificar a variação de melhor desempenho o mais rápido possível para minimizar a perda de oportunidade. Ao contrário dos testes A/B focados em determinar a melhor variação, o MAB se concentra em obter a melhor variação mais rapidamente. Quando a janela de otimização é pequena, o MAB é mais adequado para minimizar a perda de oportunidade em preços, descontos, assinaturas, etc. Nesses casos, os visitantes que recebem a segunda melhor variação e não convertem constituem oportunidades de receita perdidas, pois podem ter convertidos se fizessem parte da variação vencedora. Você pode aprender mais sobre o MAB no VWO aqui.

Acelere o sucesso do seu aplicativo com ideias de teste incríveis!

Esperamos que você tenha achado as ideias de teste A/B discutidas neste artigo úteis. No entanto, grandes ideias só são benéficas quando implementadas corretamente. Portanto, se você estiver procurando por uma plataforma que ofereça funcionalidades abrangentes, como SDKs Android/iOS leves, suporte técnico 24 horas por dia, 7 dias por semana para vários idiomas, capacidade de selecionar públicos personalizados para testes e fornecer relatórios confiáveis ​​em tempo real , VWO Mobile App Testing deve ser sua melhor escolha. Além disso, com o lançamento completo do Mobile Insights se aproximando rapidamente, você pode obter uma compreensão mais aprofundada do comportamento do usuário, melhorar as métricas de conversão e, o mais importante, aprimorar a experiência geral do usuário em seu aplicativo. Solicite uma demonstração gratuita para ver como o VWO melhora a jornada dos usuários do seu aplicativo móvel.