Pierwsze kroki z testami A/B aplikacji mobilnych? Oto pomysły, które możesz wypróbować od razu

Jeśli chcesz zacząć eksperymentować z aplikacjami mobilnymi, ten artykuł jest dla Ciebie. Celem jest zapoznanie Cię z tworzeniem hipotez, testowaniem wariantów oraz mierzeniem i wdrażaniem zmian do końca tego artykułu. Dlatego omówione pomysły i przykłady są proste i łatwe do wdrożenia.

Rodzaje eksperymentów z aplikacjami mobilnymi, które możesz wypróbować

Przyjrzyjmy się czterem najważniejszym eksperymentom, które znacząco wpływają na wrażenia użytkownika aplikacji i pokażmy, na przykładach z prawdziwego świata, jak można je wypróbować w VWO.

1. Eksperymenty wyszukiwania

Użytkownicy o krótszych okresach uwagi łatwo się rozpraszają i mogą nie podejmować działań, jeśli jest zbyt wiele przeszkód. Biorąc pod uwagę ograniczoną przestrzeń ekranu na urządzeniach mobilnych, niepraktyczne jest dołączanie rozbudowanego menu lub różnych filtrów ułatwiających nawigację w aplikacji. Dlatego włączenie i optymalizacja funkcji wyszukiwania staje się konieczne, aby poprawić widoczność produktu lub funkcji i zapewnić odpowiednią prezentację aplikacji mobilnych.

Metryki do śledzenia

Zakładając, że zastanawiasz się już nad optymalizacją wyszukiwania aplikacji, oto kilka wskaźników, na które warto zwrócić uwagę:

• Współczynnik wyjść z wyszukiwania
• Liczba użytkowników wybierających element pokazany w wyszukiwaniu
• Liczba wyszukiwań bez wyników

Metryki te można łatwo zdefiniować w VWO. Statystyki wyciągnięte z tych danych pozwolą Ci dokładnie zrozumieć, na jakim poziomie jest obecnie wydajność Twojej aplikacji w wyszukiwaniu, a gdzie jest słaba.

Zagłęb się w spostrzeżenia użytkowników dzięki jakościowym badaniom zachowań

Aby pogłębić swoje obserwacje, cenne może okazać się uzupełnienie danych ilościowych badaniami jakościowymi. Mapy popularności są szeroko stosowane (i uwielbiane) do tego celu i nie bez powodu. Załóżmy, że widzisz spadek liczby kliknięć w wynikach wyszukiwania. Może być kilka powodów:

• Wyniki wyszukiwania nie są istotne
• Kolejność wyników nie jest spersonalizowana
• Liczba elementów wyświetlanych po wyszukiwaniu jest zbyt mała

Nadchodzący produkt VWO Mobile Insights ułatwia wykorzystanie nagrań sesji i map cieplnych lub map przewijania, aby zagłębić się w zachowanie użytkowników i określić, co należy zoptymalizować. Dzięki VWO Mobile Insights możesz znaleźć odpowiedzi na pytania takie jak:

• W jaki sposób odwiedzający korzystają z funkcji wyszukiwania? (np. wyszukanie kategorii a wskazanie konkretnych produktów)
• Czy autouzupełnianie wpływa na konwersję?
• Czy przeglądanie historii wyszukiwania skutecznie zwiększa sprzedaż wcześniej zakupionych produktów?
• Co powoduje tarcia w ich doświadczeniach związanych z wyszukiwaniem?

Przykłady, które możesz wypróbować

Możesz formułować i weryfikować hipotezy za pomocą testów A/B na podstawie swoich obserwacji.

Jeśli zastanawiasz się, od czego zacząć, oto kilka rzeczywistych przykładów, do których możesz się odnieść w poszukiwaniu inspiracji.

Przykład 1 – Wyniki wyszukiwania według kategorii

Niektóre z najlepszych implementacji wyszukiwania aplikacji znajdują się w serwisach społecznościowych, takich jak Instagram i YouTube. Gdy zaczniesz pisać na pasku wyszukiwania na Instagramie, zobaczysz wyniki uporządkowane według kategorii, takich jak konta, audio, tagi, miejsca itp. Instagram i YouTube pokazują historię wyszukiwania, dając użytkownikom dostęp jednym kliknięciem do ponownego wprowadzenia poprzednich wyszukiwanych fraz.

Przykład 2 – Wyniki wyszukiwania z sugestiami produktów

GOAT, amerykańska platforma handlu elektronicznego, wdrożyła imponującą funkcję wyszukiwania, która umożliwia użytkownikom szybkie znalezienie tego, czego potrzebują. Kliknięcie ikony wyszukiwania na dolnym pasku nawigacyjnym pokazuje kilka kategorii produktów do przeglądania i wypełnia stronę pozycjami z wybranej kategorii. Gdy klikniesz pasek wyszukiwania i zaczniesz coś wpisywać, zobaczysz propozycje produktów wraz z odpowiednim tekstem i obrazami.

Testy, które można wymyślić

Załóżmy więc, że chcesz poprawić współczynnik klikalności wyników wyszukiwania. Oto dwie hipotezy, które możesz przetestować na podstawie powyższych przykładów, aby osiągnąć wspomniany cel.

Przetestuj 1 pomysł
Hipoteza 1: Grupowanie wyników wyszukiwania według różnych kategorii, takich jak ludzie, miejsca i grupy, poprawi zaangażowanie użytkowników.

Kontrola: Wyniki wyszukiwania są wyświetlane jako lista produktów.

Wariant: wyniki wyszukiwania wyświetlane wraz z filtrami „grupuj według”.

Test 2 Pomysł
Hipoteza 2: Wyświetlanie obrazów wraz z wynikami wyszukiwania poprawi współczynnik klikalności sugestii produktów.

Kontrola: wyniki przedstawiające sugestie produktów zawierające tylko tekst.

Wariant: wyniki przedstawiające sugestie produktów zawierające zarówno tekst, jak i obrazy.

Możesz szybko wdrożyć takie testy na mobilnej platformie testowej A/B VWO w zaledwie kilku krokach. Poniżej znajduje się film pokazujący etapy tworzenia testu opartego na hipotezie 1 dla aplikacji na Androida zbudowanej na przykład przy użyciu języka Java. VWO obsługuje również frameworki takie jak Flutter, Cordova i React-Native.

Za kulisami VWO

VWO zapewnia lekkie zestawy SDK dla systemów iOS, Android i wszystkich popularnych języków zaplecza . Dodanie pakietu SDK aplikacji mobilnej to jednorazowy proces integracji, po którym VWO generuje klucze API, których można użyć do inicjalizacji aplikacji zarówno dla aplikacji na iOS, jak i na Androida. Możesz zapoznać się z tym obszernym przewodnikiem, jeśli potrzebujesz szczegółowego wyjaśnienia kroków.

Utworzyłeś więc odmiany, dodałeś cele konwersji i uruchomiłeś test aplikacji mobilnej. Następnym kluczowym krokiem jest analiza i wydobycie spostrzeżeń z wyników testów. Silnik SmartStats firmy VWO, oparty na statystykach bayesowskich, wykonuje ciężkie obliczenia i przedstawia precyzyjne wyniki testów w postaci łatwych do wykorzystania raportów, które można analizować w celu uzyskania użytecznych spostrzeżeń. Raporty VWO są wszechstronne i pozwalają filtrować wyniki według dat i segmentów odwiedzających, a nawet porównywać skuteczność wielu celów w teście.

2. Eksperymenty nawigacyjne

Nawigacja jest jedną z najtrudniejszych rzeczy do zbudowania, ponieważ obejmuje wiele złożoności, takich jak grupowanie, projektowanie i łatwość odkrywania funkcji. Eksperci zalecają „Test drzewa”, aby pomóc ustalić punkt odniesienia dla tego, jak „możliwe do znalezienia” są rzeczy w Twojej aplikacji. Jest to zamknięty test przeprowadzany wśród użytkowników, aby zobaczyć, jak szybko mogą znaleźć coś w aplikacji. Ten artykuł jest świetnym wstępem do testów drzewa, a także stanowi ważny pierwszy krok w kierunku projektowania eksperymentów poprawiających nawigację.

Metryki do śledzenia

Podobnie jak w przypadku eksperymentów mających na celu ulepszenie wyszukiwania, oto kilka danych, na które musisz uważać

• Współczynnik znajdowania przedmiotów
• Czas potrzebny na znalezienie funkcji lub produktu
• Liczba przypadków, w których użytkownicy zrobili to dobrze po pierwszym kliknięciu
• Zmienność w znajdowaniu czasu

Łącząc wydajność tych wskaźników z wynikami badań jakościowych, możesz określić skuteczną strategię ulepszania nawigacji w aplikacji.

Przykłady, które możesz wypróbować

Przykład 1 – Nawigacja po karcie

Jeśli szukasz inspiracji do nawigacji, jedną z moich ulubionych jest Calm, aplikacja do medytacji. Ich układ przypomina szereg drzwi, z których każde służy jako punkt wejścia. Karty są dalej podzielone na kategorie, takie jak „Sprawność umysłowa”, „Polecane kolekcje”, „Szybkie i łatwe” i tak dalej. Menu hamburgerów może być alternatywą dla tego stylu nawigacji, ale jego użycie spadło ze względu na niską wykrywalność, co zmniejsza liczbę kliknięć użytkowników. Wręcz przeciwnie, nawigacja w stylu karty zyskuje coraz większą popularność dzięki przyjaznemu dla użytkownika projektowi.

Przykład 2 – Prosta nawigacja po tagach

Mapy Google to kolejna aplikacja z przyjazną dla użytkownika nawigacją. Po wprowadzeniu lokalizacji zobaczysz opcje, takie jak wskazówki dojazdu, udostępnij i zapisz lokalizację w postaci łatwo zauważalnych przycisków filtrowania. Ponadto znajdziesz również często używane obiekty jako przyciski filtrowania, które pomogą Ci przeglądać restauracje, centra handlowe, bankomaty i parki w pobliżu wprowadzonej lokalizacji. Nawigacja w Mapach Google jest prosta i pomaga użytkownikom w pełni wykorzystać możliwości aplikacji.

Testy, które można wymyślić

Poprawa współczynnika klikalności produktów z nawigacji jest zwykle głównym celem właścicieli eCommerce próbujących poprawić komfort nawigacji po aplikacji. Jeśli to właśnie próbujesz zrobić, oto dwie hipotezy do przetestowania:

Przetestuj 1 Pomysł

Hipoteza 1: Zastąpienie menu hamburgera kafelkami nawigacyjnymi opartymi na kartach zwiększy współczynniki konwersji.

Kontrola: Menu hamburgerów wyświetla różne kategorie produktów, które użytkownicy mogą przeglądać.

Wariant: kategorie produktów pokazane w formacie karty.

Test 2 Pomysł

Hipoteza 2: Wyświetlanie przycisków filtrów do codziennych zastosowań spowoduje, że użytkownicy szybciej znajdą odpowiednie informacje i będą z nich częściej korzystać.

Kontrola: pasek wyszukiwania funkcji pozostaje u góry aplikacji bez przycisków filtrowania.
Wariant: pasek wyszukiwania znajduje się u góry, a przyciski filtrów do codziennych zastosowań znajdują się u góry i u dołu ekranu.

Jeśli chcesz przeprowadzić oba testy równolegle, możesz to zrobić za pomocą VWO, nie martwiąc się o przekrzywione dane. VWO ma możliwość przeprowadzania wzajemnie wykluczających się testów aplikacji mobilnych. Dzięki temu użytkownik aplikacji mobilnej biorący udział w jednej kampanii nie bierze udziału w innej kampanii należącej do wzajemnie wykluczającej się grupy. Możesz to osiągnąć, dodając wiele kampanii do wzajemnie wykluczających się grup , aby upewnić się, że użytkownicy w żadnej z kampanii nie będą się pokrywać. Stworzenie wzajemnie wykluczającej się grupy na VWO gwarantuje, że Twoja aplikacja mobilna zapewnia spójne wrażenia i że na wyniki jednej kampanii nie mają wpływu inne, przypisując konwersje do właściwej kampanii.

3. Eksperymenty wprowadzające

Doświadczenie związane z wdrażaniem aplikacji podlega większości zmian w miarę ewolucji wraz z Twoimi produktami, kategoriami, odbiorcami, celami i innymi. Podczas gdy doświadczenie związane z wdrażaniem zmienia się znacznie w zależności od tego, co robi Twój produkt, wszystkie dobre mają kilka wspólnych cech. Oni:

• Przywróć propozycję wartości aplikacji
• Zapoznaj użytkowników z funkcjami i korzyściami
• Zachęcaj do pomyślnego przyjęcia aplikacji
• Zminimalizuj czas potrzebny klientom na uzyskanie pożądanej wartości z korzystania z Twojej aplikacji

Jeśli więc chcesz ulepszyć optymalizację aplikacji, dobrym pomysłem może być najpierw znalezienie odpowiedzi na kilka istotnych pytań:

• Czy proces wdrażania naszej aplikacji jest zbyt długi?
• Kiedy ludzie dostrzegają wartość podczas procesu onboardingu?
• Które etapy procesu onboardingu powinny być opcjonalne?
• Czy użytkownicy szukają pomocy i wsparcia przy wdrażaniu?

Metryki do śledzenia

Aby skutecznie wspierać swoje cele i dyskusje, niezbędne jest poleganie na danych i pozwolenie im na kierowanie planem testowania. Pomocne może być śledzenie podstawowych danych, takich jak te wymienione poniżej:

• Wskaźnik ukończenia onboardingu
• Czas do uzyskania wartości (czas między wdrożeniem a uzyskaniem pierwszej wartości z aplikacji)
• Współczynnik aktywacji odzwierciedla sposób, w jaki nowi użytkownicy postrzegają Twoją aplikację
• Liczba biletów wsparcia onboardingu wygenerowanych dla określonego okresu

Przykłady, które możesz wypróbować

Omówmy kilka przykładów, które mogą zainspirować Cię do przetestowania i udoskonalenia procesu wdrażania aplikacji.

Przykład 1 — Wiele opcji logowania w przepływie wdrażania

Zastanawiasz się, czy podczas dołączania użytkownika powinieneś oferować e-mail, login społecznościowy, czy jedno i drugie? Every Plate, amerykańska platforma dostarczania posiłków, pozwala użytkownikom wybrać jedną z dwóch opcji logowania.

Przykład 2 – Wieloetapowy proces wdrażania

Ile kroków należy uwzględnić w procesie wdrażania aplikacji? Zobacz, jak sobie z tym poradziło Duolingo – udowadniając, że dobrze przygotowany, wieloetapowy proces wdrażania może zakończyć się sukcesem bez utraty zainteresowania użytkownika. Aplikacja do nauki języków wyświetla serię ekranów, zadając użytkownikom kilka (ale istotnych) pytań podczas wdrażania, aby poprawić ich doświadczenie w nauce.

Testy, które można wymyślić

Czy chcesz wiedzieć, ile osób zakończyło proces onboardingu lub ile zgłoszeń do pomocy technicznej zostało zgłoszonych? Możesz śledzić te cele, wypróbowując poniższe pomysły na testy.

Przetestuj 1 pomysł

Hipoteza 1: Podanie loginów społecznościowych wraz z e-mailem może skutkować lepszą konwersją w kroku 1

Kontrola: wystarczy zalogować się przez e-mail/telefon

Wariant: login e-mail + Google + Facebook

Test 2 Pomysł

Hipoteza 2: Wyświetlanie paska postępu podczas dołączania zachęci użytkowników do ukończenia procesu dołączania.

Kontrola: Wieloetapowy proces wdrażania przedstawiony bez paska postępu.

Wariant: Wieloetapowy proces wdrażania z paskiem postępu u góry każdego ekranu wprowadzania.

Za pomocą narzędzia takiego jak VWO możesz dostosować grupę docelową do swoich testów w oparciu o różne parametry, takie jak technologia, typ odwiedzających, czas itp. Możesz wybrać segment kierowania z Galerii segmentów lub utworzyć niestandardowy.

W kontekście poprzedniego przykładu testowego załóżmy, że badania użytkowników wskazują, że użytkownicy niechętnie wpisują swój adres e-mail i hasło oraz preferują bardziej elastyczne opcje logowania. Na podstawie tych badań można najpierw skierować reklamy do użytkowników na powolnym rynku, na przykład w Meksyku, aby sprawdzić, czy oferowanie opcji logowania społecznościowego generuje pozytywne reakcje i zwiększa liczbę użytkowników, którzy przechodzą pierwszy etap wdrażania. Aby to osiągnąć, możesz przejść do segmentów niestandardowych, dodać warunki i wybrać odpowiedni atrybut (Kraj) i wartość (Meksyk).

Ponadto możesz użyć operatorów „AND/OR” w celu dokładniejszego wyboru odbiorców. Załóżmy na przykład, że Twoja aplikacja edukacyjna jest skierowana głównie do profesjonalistów w średnim wieku w Meksyku. W takim przypadku możesz wybrać opcję zmiennej niestandardowej i wpisać „Wiek” w polu nazwy oraz grupę wiekową (np. 35-45) w polu wartości. Następnie możesz wybrać wspornik po obu stronach i wybrać operację „I”. Alternatywnie, jeśli chcesz śledzić wyniki którejkolwiek z grup, możesz użyć operatora „OR” przy wyborze odbiorców.

Oto krótki artykuł na temat segmentów niestandardowych, jeśli chcesz dowiedzieć się więcej.

4. Eksperymenty cenowe

Oferowanie rabatów lub kuponów jest niezbędne do zwiększenia sprzedaży i przyciągnięcia klientów do Twojej aplikacji. Ale skąd możesz mieć pewność, że Twoja strategia cenowa pomaga w rozwoju Twojej firmy?

Ustalenie zbyt wysokich cen może odstraszyć klientów, a zbyt niskie może oznaczać utratę przychodów.

Metryki do śledzenia

Aby określić, czy Twoje ceny są skuteczne, przeanalizuj następujące wskaźniki związane z przychodami z Twojej aplikacji:

• Wartość w całym okresie eksploatacji — przychody generowane na użytkownika od momentu zainstalowania przez niego Twojej aplikacji
• Częstotliwość zakupów – Średnia liczba zakupów dokonywanych przez użytkowników w danym czasie.
• Cost per install – ceny płacone za pozyskanie nowych użytkowników z płatnych reklam.

Metryki te można skonfigurować w VWO. Jeśli uważasz, że liczby nie spełniają Twoich oczekiwań, być może nadszedł czas, aby rozważyć plany cenowe testów A/B. Może to pomóc zmaksymalizować przychody bez ryzyka strat.

Przykłady, które możesz wypróbować

Przykład 1 — udzielanie abonentom rocznej zniżki

Strava, popularna aplikacja fitness, wymaga od użytkowników płacenia miesięcznych lub rocznych opłat abonamentowych, aby uzyskać dostęp do jej zaawansowanych funkcji. Klienci mogą wybierać między miesięcznymi lub rocznymi cyklami rozliczeniowymi, z potencjalnymi oszczędnościami wspomnianymi w przypadku tych drugich. Ta zniżka może zachęcić użytkowników do wybrania planu rocznego.

Przykład 2 – Wyświetlanie cen dynamicznych z ograniczeniem czasowym

Heads-up! to popularna gra, w której gracze przykładają urządzenie mobilne do czoła i próbują odgadnąć słowo lub frazę pojawiającą się na ekranie na podstawie wskazówek znajomych. Zwróć uwagę, jak pierwotna cena jest przekreślona i wyświetlany jest limit czasu, aby stworzyć poczucie pilności i zachęcić użytkowników do szybkiego działania.

Możesz tworzyć skuteczne testy aplikacji w oparciu o te metody wyświetlania cen.

Testy, które można wymyślić

Załóżmy, że chcesz zwiększyć liczbę transakcji/płatnych subskrypcji w swojej aplikacji. Poniżej przedstawiono pomysły na testy, z którymi możesz eksperymentować.

Przetestuj 1 Pomysł

Hipoteza 1: Pokazanie potencjalnych oszczędności na abonamencie zachęci użytkowników do wybrania dłuższego planu.

Kontrola: Miesięczny plan abonamentowy i roczny plan abonamentowy.

Odmiana: miesięczne i roczne subskrypcje dają potencjalne oszczędności w przypadku obu wymienionych planów.

Test 2 Pomysł

Hipoteza 2: Taktyki psychologiczne, takie jak pośpiech i skreślenie pierwotnej ceny, mogą zwiększyć liczbę użytkowników decydujących się na tę ofertę rabatową.

Kontrola: Prosty baner ze zniżką z wypisaną nową ceną.

Odmiana: żywy baner ze zniżką z przekreśloną ceną pierwotną, wyświetloną ceną ze zniżką i zegarem wskazującym dostępność oferty.

Przyjrzyjmy się bardziej zaawansowanemu podejściu zwanemu wielorękim bandytą (MAB) w jednym z eksperymentów, o których mówiliśmy wcześniej, takim jak test rabatu inspirowany przykładem Heads Up. W przeciwieństwie do testów A/B, o których mówiliśmy wcześniej, podejście wielorękiego bandyty jest nieco bardziej złożone i obejmuje inną metodologię.

Załóżmy, że masz ograniczoną czasowo ofertę rabatową z wieloma wariantami do przetestowania i musisz jak najszybciej zidentyfikować najskuteczniejszą odmianę, aby zminimalizować utratę szansy sprzedaży. W przeciwieństwie do testów A/B skupiających się na określeniu najlepszej odmiany, MAB koncentruje się na szybszym dotarciu do lepszej odmiany. Gdy okno optymalizacji jest małe, MAB jest bardziej odpowiedni do minimalizowania utraty możliwości w zakresie cen, rabatów, subskrypcji itp. W takich przypadkach odwiedzający, którzy otrzymują drugą najlepszą odmianę i nie dokonują konwersji, stanowią utracone możliwości uzyskania przychodów, ponieważ mogli przekonwertowane, jeśli były częścią zwycięskiej odmiany. Możesz dowiedzieć się więcej o MAB na VWO tutaj.

Przyspiesz sukces swojej aplikacji dzięki niesamowitym pomysłom na testowanie!

Mamy nadzieję, że pomysły na testy A/B omówione w tym artykule okazały się pomocne. Jednak świetne pomysły przynoszą korzyści tylko wtedy, gdy są prawidłowo wdrażane. Jeśli więc szukasz platformy, która oferuje wszechstronne funkcje, takie jak lekkie pakiety SDK dla systemu Android/iOS, całodobową pomoc techniczną w wielu językach, możliwość wyboru niestandardowych odbiorców do testów oraz zapewnia niezawodne raporty w czasie rzeczywistym , Testowanie aplikacji mobilnych VWO powinno być Twoim najlepszym wyborem. Co więcej, wraz ze zbliżającym się pełnym wydaniem Mobile Insights, możesz lepiej zrozumieć zachowania użytkowników, poprawić wskaźniki konwersji i, co najważniejsze, poprawić ogólne wrażenia użytkownika z Twojej aplikacji. Poproś o bezpłatną wersję demonstracyjną, aby zobaczyć, jak VWO usprawnia podróż użytkowników Twojej aplikacji mobilnej.