Manual VS. Automatizado: qual é a maneira certa de testar seu aplicativo

Ao lançar um aplicativo, você deve ter 100% de certeza de que ele funcionará sem problemas. E, claro, deve atender às expectativas de seus usuários também! Caso contrário, seu projeto pode falhar, o que não é o resultado desejado, certo? Portanto, você precisa prestar a devida atenção aos testes de garantia de qualidade (QA) do aplicativo.

Mas qual é a abordagem certa para testar sua plataforma? Quais técnicas selecionar? Vale a pena verificar o desempenho do produto manualmente ou usar a automação? Ou talvez escolher as duas opções ao mesmo tempo?

Em garantia de qualidade (QA), a automação de testes é uma das maiores defensoras da velocidade. Mas, quando se trata de funcionalidade e primeiras impressões, não há substituto para o teste manual. O fato é que, mesmo que o software de teste automatizado se torne mais refinado, o teste manual de aplicativos móveis ainda desempenha um papel importante no envio de aplicativos de qualidade.

Ambas as categorias de testes de aplicativos móveis têm vantagens e desvantagens distintas, mas é particularmente importante que as empresas de desenvolvimento de aplicativos móveis pratiquem testes manuais para oferecer uma experiência de usuário excepcional.


Clique em "Saiba mais" para impulsionar seus negócios de aplicativos e jogos com o serviço de promoção de aplicativos ASO World agora.

Noções básicas de teste de aplicativos para dispositivos móveis

Em termos mais amplos, existem duas abordagens para testar um aplicativo móvel. Você pode fazer com que humanos usem o aplicativo em diferentes situações para ver como ele responde, ou você pode fazer com que um aplicativo leve o software a lugares interessantes e procure os resultados esperados.

Este segundo termo é comumente referido como "automação de teste" ou, talvez, "teste automatizado". Pode ser mais preciso se referir a ele como "execução e avaliação automatizadas de testes" ou "verificação automatizada", mas os termos anteriores foram mantidos.

Ambas as abordagens podem ser válidas em diferentes circunstâncias, e essa validade pode mudar ao longo do tempo em diferentes momentos do ciclo de vida de um aplicativo. Na prática, a maioria das organizações usa uma mistura dos dois, talvez levando algumas das explorações humanas aos clientes.

O que são testes automatizados e manuais?

Garantir um software de alta qualidade é um processo complexo, que leva muito tempo e custa algum dinheiro. No entanto, essas despesas não podem ser evitadas (desde que você queira ter sucesso a longo prazo).

É importante elaborar uma estratégia de teste competente que permita obter o máximo efeito com o mínimo de esforço e entender se o site ou aplicativo atende aos requisitos definidos.

Testes manuais

O teste automatizado é o processo no qual testes pré-criados são executados em um aplicativo antes de ser lançado em produção. Os testes automatizados ajudam você a encontrar falhas em seu aplicativo mais rapidamente. A automação de teste pode ser usada para executar testes repetitivos, que precisam ser executados periodicamente e que podem ajudá-lo a encontrar bugs nos estágios iniciais.

Enquanto o objetivo do teste manual é testar a chamada “experiência do usuário”, o teste automatizado visa testar todas as funcionalidades que caracterizam um aplicativo.

Dezesseis anos depois que me disseram pela primeira vez que os testes em humanos “desapareceriam” e quase uma década depois de ouvir exploradores humanos pela primeira vez serem chamados de “dinossauros”, o teste manual continua sendo a abordagem de teste mais comum para aplicativos móveis e de desktop.

Por teste manual, quero dizer um humano realmente usando o aplicativo por meio do front-end. Há uma variedade de lugares em que este teste manual pode acontecer. A maioria dos programadores pelo menos simula um aplicativo, se não o coloca em um telefone, antes de passá-lo para outra pessoa testar. Algumas empresas empregam testadores para ir mais fundo, olhando além do caminho feliz ou em diferentes modelos de dispositivos.

Se o software for interno, a empresa pode fazer com que as pessoas que usarão o software realmente realizem o Teste de Aceitação do Usuário, que é mais focado em "posso fazer meu trabalho com este software". Algumas empresas liberam o software antecipadamente para testadores "beta", que podem ser funcionários, usando uma ferramenta como o Microsoft AppCenter.

Finalmente, empresas como Applause e Testio existem para pegar essa versão "beta" e fazer o crowdsourcing, fornecendo dezenas a milhares de olhos para ver o software, em uma variedade de configurações, em um curto período de tempo.

Independentemente de quem, como ou quando testar manualmente, você terá a real sensação de como é realmente usar o aplicativo. Testes manuais podem ver se os botões estão na posição correta, se são grandes o suficiente, se se sobrepõem, se as cores ficam bem juntas, etc.

No entanto, existem algumas ações que os computadores podem testar facilmente. Por exemplo, quando você digita nome de usuário e senha e envia, você deve ir para a tela que mostra seu nome e que você está logado, e deixar a senha errada deve gerar um texto de erro específico.

É menos provável que o desafio dos testes móveis seja qual dos dois paradigmas aceitar, mas quanto, quando e quem.

Por que preciso de testes manuais?

O teste manual fornece algum feedback sobre usabilidade e aparência junto com a funcionalidade. O testador desempenha o papel de um usuário experimentando tudo naquele aplicativo, realizando ações típicas que um usuário faria, para ver se ou quando o aplicativo trava. Com o teste manual, você geralmente recebe feedback sobre desempenho, drenagem da bateria ou superaquecimento com antecedência suficiente para corrigi-los antes do lançamento. O feedback geralmente é "gratuito" apenas porque o testador estava prestando atenção.

De quantos dispositivos preciso para testar?

Você pode tentar testar manualmente todos os dispositivos compatíveis com todas as versões de sistema operacional compatíveis. A última vez que verificamos, há três anos, havia mais de 24.000 dispositivos Android diferentes e paramos de contar. Realisticamente, a maioria das organizações testa com a versão mais recente suportada, uma versão anterior e a versão mais antiga suportada. Entre Android e iOS, tablet e telefone, a maioria das empresas de médio e grande porte com as quais trabalhamos acaba com um laboratório de teste de 10 a 20 dispositivos.

Teste automatizado

O que é teste automatizado?

Quando as pessoas usam a frase Teste automatizado, geralmente significam ter uma ferramenta, como Selenium ou Appium, conduzindo a interface do usuário do aplicativo, verificando os resultados esperados ao longo do caminho.

Essa verificação vem de uma série de comandos e pontos de inspeção, que podem ser armazenados em algo como uma planilha ou, mais provavelmente, em um programa de computador real.

Assim, os testes são pré-escritos; cada teste pode ser um programa de computador. Cada teste pode clicar ou digitar uma dúzia de vezes e ter mais uma dúzia de pontos de verificação. Uma vez que os testes existam, se o comportamento do aplicativo não mudou, os testes automatizados podem encontrar defeitos no aplicativo muito rapidamente, normalmente em poucos minutos após a confirmação do controle de versão.

A automação de testes pode ser usada para executar testes repetitivos, que não exigem discernimento humano, que precisam ser executados periodicamente e que podem ajudá-lo a encontrar bugs em estágios iniciais. Enquanto o objetivo do teste manual é testar a “experiência do usuário”, o teste automatizado visa testar todas as funcionalidades que caracterizam um aplicativo.

O teste automatizado clicará no botão que "parece errado" e está no lugar errado e não registrará um problema (a menos que você tenha pensado em verificar com antecedência) - é mais provável que encontre erros, resultados de pesquisa incorretos e assim por diante.

Por que preciso de testes automatizados?

À medida que o aplicativo cresce, o tempo para testá-lo também cresce. O teste automatizado reduz esse tempo para lançamentos frequentes. Isso torna o teste automatizado a chave para acelerar o processo de teste, diminuir o custo e reduzir radicalmente o tempo de feedback para erros graves de dias para minutos. A automação de testes permite:

Testar funcionalidades que são repetitivas e, portanto, propensas a erros se executadas manualmente; casos de teste que têm um resultado previsível;

Configure e execute facilmente cenários de teste complicados e tediosos

Mais importante: você pode testar em um número maior de dispositivos móveis simultaneamente, economizando tempo. Usando simuladores ou a nuvem você pode fazer isso sem comprar ou gerenciar os dispositivos!

De quantos casos de teste preciso para um conjunto básico de testes?

Isso variará muito no aplicativo e no tamanho do "caso de teste". Se os casos de teste são testes simples de dom para banco de dados que verificam uma operação lógica, uma função típica pode ter de quatro a dez testes e um aplicativo típico pode ter de quatro a dez recursos.

Se o aplicativo for codificado com duas linguagens de programação diferentes, uma para iOs e outra para Android, pode ser necessário dobrar isso, ou então escrever uma camada de abstração e ter um conjunto de cenários de negócios e duas implementações que variam de acordo com o sistema operacional.

Teste manual para aplicativos móveis

Benefícios do teste manual

• Testando a interface do usuário com precisão e rapidez
• Experimentar e testar o aplicativo como um usuário real para replicar a experiência final
• Identificando e reproduzindo facilmente os problemas relatados
• Lidando com problemas complicados e casos de uso
• Testando pequenas mudanças e projetos de forma mais rápida e econômica

Desvantagens do teste manual

• O erro humano afeta a precisão
• Os testes devem ser repetidos manualmente a cada vez
• Tarefas de teste tediosas são muito mais difíceis
• Grande cobertura requer muitos recursos, como número de testadores e acesso a uma ampla variedade de dispositivos

O teste manual em aplicativos móveis é usado para:

• Teste Exploratório: Como abordagem, o teste exploratório valoriza o testador como parte integrante do processo de teste. Isso precisa de um testador manual para se beneficiar de sua percepção, criatividade e conhecimento.
• Teste ad-hoc: Por definição, ad-hoc é um tipo de teste informal. Tem como objetivo quebrar o sistema, portanto, não pode ser realizado de forma planejada. Ele precisa de um testador para se comportar de forma irregular para tentar quebrar o sistema.
• Teste de usabilidade: O testador manual pode ter uma ideia da experiência do usuário final. Usar o aplicativo como ele foi projetado para ser usado ajudará a determinar a facilidade de uso do aplicativo e a entrada humana é fundamental para isso.

Testes automatizados para aplicativos móveis

Benefícios dos testes automatizados

• Realização de testes tediosos e exigentes mais rapidamente
• Testando muitos dispositivos
• Testes automatizados podem ser usados ​​repetidamente
• Resultados rápidos, eficientes e precisos
• Vários testes automatizados podem ser feitos ao mesmo tempo
• Para grandes aplicativos móveis, os testes automatizados são mais econômicos

Desvantagens dos testes automatizados

• Nenhum insight sobre a experiência do usuário do ponto de vista visual
• O custo para colocar os testes automatizados em funcionamento é alto devido ao código necessário
• Desperdício em situações de menor escala
• Ainda há algum erro humano, pois o teste de automação é programado por um humano e requer seu próprio teste
• Precisa de configurações e códigos específicos para cada aplicativo móvel

O teste automatizado em aplicativos móveis é usado para:

• Teste de regressão: Um dos maiores pontos fortes do teste automatizado é a capacidade de ter um script de teste pronto para ser executado a qualquer momento. Uma das melhores maneiras de utilizar testes automatizados é com pequenas mudanças constantes quando você quer ter certeza de que elas não terão nenhum efeito negativo.
• Teste de desempenho: Ao contrário do teste de usabilidade, o desempenho é mais um jogo de números. Testar o quão rápido, responsivo e estável é um aplicativo em diferentes dispositivos ou sob diferentes condições é algo que os testes automatizados prosperam na execução. A escala e a precisão dos resultados tornam os testes automatizados essenciais para testes de desempenho.
• Testes repetidos: Após um custo inicial de codificação e configuração de um script de teste, a longo prazo os testes automatizados tornam-se muito econômicos. Ser capaz de repetir testes sem custos extras de recursos do testador torna muito mais fácil testar e obter resultados.