Erste Schritte mit A/B-Tests für mobile Apps? Hier sind Ideen, die Sie sofort ausprobieren können

Wenn Sie anfangen möchten, mit Ihren mobilen Apps zu experimentieren, ist dies der Artikel, den Sie brauchen. Ziel ist es, Sie am Ende dieses Artikels mit dem Erstellen von Hypothesen, dem Testen von Variationen sowie dem Messen und Implementieren von Änderungen vertraut zu machen. Daher sind die Ideen und die diskutierten Beispiele einfach und leicht umzusetzen.

Arten von Experimenten mit mobilen Apps, die Sie ausprobieren können

Schauen wir uns die vier wichtigsten Experimente an, die sich erheblich auf die Benutzererfahrung von Apps auswirken, und zeigen anhand von Beispielen aus der Praxis, wie Sie sie in VWO ausprobieren können.

1. Suchexperimente

Benutzer mit kürzeren Aufmerksamkeitsspannen werden leicht abgelenkt und handeln möglicherweise nicht, wenn es zu viele Hindernisse gibt. Angesichts des begrenzten Bildschirmplatzes auf Mobilgeräten ist es nicht praktikabel, ein umfangreiches Menü oder eine Vielzahl von Filtern einzufügen, um die Navigation innerhalb der App zu erleichtern. Daher ist es notwendig, Suchfunktionen zu integrieren und zu optimieren, um die Sichtbarkeit von Produkten oder Funktionen zu verbessern und eine angemessene Präsentation mobiler Apps sicherzustellen.

Zu verfolgende Metriken

Angenommen, Sie erwägen bereits, Ihre App-Suche zu optimieren, hier sind einige Metriken, die Sie genau im Auge behalten sollten:

• Ausstiegsrate suchen
• Anzahl der Benutzer, die das in der Suche angezeigte Element ausgewählt haben
• Anzahl der Suchen ohne Ergebnisse

Diese Metriken können einfach in VWO definiert werden. Erkenntnisse aus diesen Daten geben Ihnen ein klares Verständnis dafür, wo die Suchleistung Ihrer App derzeit steht und wo sie hinterherhinkt.

Vertiefen Sie sich mit qualitativer Verhaltensforschung in Nutzereinblicke

Um Ihren Beobachtungen mehr Tiefe zu verleihen, kann es sich als wertvoll erweisen, quantitative Daten durch qualitative Forschung zu ergänzen. Heatmaps werden dafür häufig verwendet (und geliebt), und das aus gutem Grund. Angenommen, Sie sehen einen Rückgang bei der Anzahl der Klicks auf die Suchergebnisse. Dafür kann es mehrere Gründe geben:

• Die Suchergebnisse sind nicht relevant
• Die Reihenfolge der Ergebnisse ist nicht personalisiert
• Die Anzahl der nach der Suche angezeigten Artikel ist zu gering

Das kommende Mobile Insights-Produkt von VWO macht es einfach, Sitzungsaufzeichnungen und Heatmaps oder Scroll-Maps zu nutzen, um tiefer in das Benutzerverhalten einzutauchen und zu identifizieren, was optimiert werden muss. Mit VWO Mobile Insights finden Sie Antworten auf Fragen wie:

• Wie nutzen Besucher die Suchfunktion? (z. B. um nach Kategorien oder bestimmten Produkten zu suchen)
• Beeinflusst die automatische Vervollständigung die Conversion?
• Ist es effektiv, den Suchverlauf aufzudecken, um die Verkäufe für zuvor gekaufte Artikel zu verbessern?
• Was verursacht Reibung in ihrem Sucherlebnis?

Beispiele, die Sie ausprobieren können

Anhand Ihrer Beobachtungen können Sie durch A/B-Tests Hypothesen formulieren und validieren.

Wenn Sie sich fragen, wo Sie anfangen sollen, finden Sie hier einige Beispiele aus der Praxis, auf die Sie sich inspirieren lassen können.

Beispiel 1 – Suchergebnisse nach Kategorie

Einige der besten Implementierungen der App-Suche befinden sich auf Social-Media-Websites wie Instagram und YouTube. Wenn Sie mit der Eingabe in die Instagram-Suchleiste beginnen, sehen Sie Ergebnisse, die in Kategorien wie Konten, Audio, Tags, Orte usw. organisiert sind. Instagram und YouTube zeigen den Suchverlauf an, sodass Benutzer mit einem Klick darauf zugreifen können, um ihre vorherigen Suchphrasen erneut zu versuchen.

Beispiel 2 – Suchergebnisse mit Produktvorschlägen

GOAT, eine amerikanische E-Commerce-Plattform, hat eine beeindruckende Suchfunktion implementiert, die es Benutzern ermöglicht, schnell zu finden, was sie brauchen. Wenn Sie auf das Suchsymbol in der unteren Navigationsleiste klicken, werden Ihnen einige Produktkategorien angezeigt, die Sie durchsuchen können, und die Seite wird mit Artikeln unter der ausgewählten Kategorie gefüllt. Wenn Sie auf die Suchleiste klicken und mit der Eingabe beginnen, werden Produktvorschläge mit entsprechendem Text und Bildern angezeigt.

Tests, die entwickelt werden können

Angenommen, Sie möchten die Klickrate für Ihre Suchergebnisse verbessern. Hier sind zwei Hypothesen, die Sie anhand der obigen Beispiele testen können, um das genannte Ziel zu erreichen.

Test 1 Idee
Hypothese 1: Die Gruppierung von Suchergebnissen in verschiedene Kategorien wie Personen, Orte und Gruppen verbessert die Benutzerinteraktion.

Steuerung: Suchergebnisse werden als Produktliste angezeigt.

Variante: Suchergebnisse werden zusammen mit „Gruppieren nach“-Filtern angezeigt.

Test 2 Idee
Hypothese 2: Das Anzeigen von Bildern zusammen mit Suchergebnissen verbessert die Klickrate für Produktvorschläge.

Kontrolle: Ergebnisse mit Produktvorschlägen, die nur Text enthalten.

Variante: Ergebnisse mit Produktvorschlägen, die sowohl Text als auch Bilder enthalten.

Auf der Mobile A/B-Testplattform von VWO können Sie solche Tests in wenigen Schritten schnell implementieren. Unten sehen Sie ein Video, das die Schritte zum Erstellen eines Tests basierend auf Hypothese 1 für eine Android-Anwendung zeigt, die beispielsweise mit Java erstellt wurde. VWO unterstützt auch Frameworks wie Flutter, Cordova und React-Native.

Hinter den Kulissen von VWO

VWO bietet leichtgewichtige SDKs für iOS, Android und alle gängigen Backend-Sprachen . Das Hinzufügen des Mobile App SDK ist ein einmaliger Integrationsprozess, nach dem VWO API-Schlüssel generiert, die Sie für die App-Initialisierung sowohl für iOS- als auch für Android-Apps verwenden können. Sie können auf diese umfassende Anleitung zurückgreifen, wenn Sie eine detaillierte Erklärung der Schritte benötigen.

Sie haben also Variationen erstellt, Conversion-Ziele hinzugefügt und einen Test für mobile Apps gestartet. Der nächste entscheidende Schritt ist die Analyse und Gewinnung von Erkenntnissen aus den Testergebnissen. Die SmartStats-Engine von VWO, die auf Bayes'scher Statistik basiert, erledigt die schwere Arbeit, um präzise Testergebnisse zu berechnen und als einfach zu verwendende Berichte zu präsentieren, die Sie analysieren können, um umsetzbare Erkenntnisse zu gewinnen. Die Berichte von VWO sind umfassend und ermöglichen es Ihnen, Ergebnisse nach Datum und Besuchersegmenten zu filtern und sogar die Leistung mehrerer Ziele in einem Test zu vergleichen.

2. Navigationsexperimente

Die Navigation gehört zu den am schwierigsten zu erstellenden Dingen, da sie mehrere Komplexitäten wie Gruppierung, Design und einfache Erkennung von Funktionen umfasst. Experten empfehlen „Tree Test“, um eine Grundlinie dafür festzulegen, wie „auffindbar“ Dinge in Ihrer App sind. Es ist ein geschlossener Test, der unter Benutzern durchgeführt wird, um zu sehen, wie schnell sie etwas in der App finden können. Dieser Artikel ist ein großartiger Artikel, um Ihnen den Einstieg in Baumtests zu erleichtern, und dient auch als wichtiger erster Schritt zum Entwerfen von Experimenten zur Verbesserung der Navigation.

Zu verfolgende Metriken

Genau wie wir es bei Experimenten zur Verbesserung der Suche getan haben, sind hier einige Metriken, die Sie im Auge behalten müssen

• Artikelauffindbarkeitsrate
• Die Zeit, die benötigt wird, um eine Funktion oder ein Produkt zu finden
• Wie oft haben Benutzer es beim ersten Klick richtig gemacht
• Variabilität bei der Zeitfindung

Indem Sie die Leistung dieser Metriken mit qualitativen Forschungserkenntnissen kombinieren, können Sie eine effektive Strategie zur Verbesserung der Navigation Ihrer App festlegen.

Beispiele, die Sie ausprobieren können

Beispiel 1 – Kartennavigation

Wenn Sie nach Navigationsinspirationen suchen, ist einer meiner Favoriten Calm, eine Meditations-App. Ihr Layout ähnelt einer Reihe von Türen, die jeweils als Einstiegspunkt dienen. Die Karten sind weiter in Kategorien wie „Mentale Fitness“, „Empfohlene Sammlungen“, „Schnell und einfach“ usw. unterteilt. Das Hamburger-Menü könnte eine Alternative zu diesem Navigationsstil sein, aber seine Verwendung ist aufgrund seiner geringen Auffindbarkeit und sinkenden Benutzerklicks zurückgegangen. Im Gegenteil, die Navigation im Kartenstil gewinnt aufgrund ihres benutzerfreundlichen Designs zunehmend an Bedeutung.

Beispiel 2 – Einfache Tag-Navigation

Google Maps ist eine weitere App mit benutzerfreundlicher Navigation. Sobald Sie einen Standort eingegeben haben, sehen Sie Optionen wie Wegbeschreibungen, Teilen und Speichern des Standorts in Form von leicht erkennbaren Filterschaltflächen. Darüber hinaus finden Sie häufig verwendete Einrichtungen als Filterschaltflächen, mit denen Sie Restaurants, Einkaufszentren, Geldautomaten und Parks in der Nähe des eingegebenen Standorts erkunden können. Die Google Maps-Navigation ist einfach und hilft Nutzern, das Beste aus der App herauszuholen.

Tests, die entwickelt werden können

Die Verbesserung der Klickrate von Produkten aus der Navigation ist normalerweise das Hauptziel von E-Commerce-Eigentümern, die versuchen, ihre App-Navigationserfahrung zu verbessern. Wenn Sie das auch versuchen, sind hier zwei Hypothesen zum Testen:

Test 1 Idee

Hypothese 1: Das Ersetzen des Hamburger-Menüs durch kartenbasierte Navigationskacheln erhöht die Konversionsraten.

Steuerung: Das Hamburger-Menü zeigt verschiedene Produktkategorien an, die Benutzer erkunden können.

Variante: Produktkategorien werden im Kartenlayoutformat angezeigt.

Test 2 Idee

Hypothese 2: Das Anzeigen von Filterschaltflächen für alltägliche Anwendungsfälle führt dazu, dass Benutzer die relevanten Informationen schneller finden und häufiger verwenden.

Steuerung: Die Feature-Suchleiste bleibt ohne Filterschaltflächen oben in der App.
Variante: Die Suchleiste befindet sich oben, Filterschaltflächen für alltägliche Anwendungsfälle befinden sich oben und unten auf dem Bildschirm.

Wenn Sie beide Tests parallel ausführen möchten, können Sie dies mit VWO tun, ohne sich Gedanken über verzerrte Daten machen zu müssen. VWO ist in der Lage, sich gegenseitig ausschließende Tests auf mobilen Apps durchzuführen. Dadurch wird sichergestellt, dass ein Benutzer einer mobilen App, der an einer Kampagne teilnimmt, nicht an einer anderen Kampagne teilnimmt, die Teil der sich gegenseitig ausschließenden Gruppe ist. Sie können dies erreichen, indem Sie mehrere Kampagnen zu einer sich gegenseitig ausschließenden Gruppe hinzufügen, um sicherzustellen, dass sich keine Besucher über eine der Kampagnen hinweg überschneiden. Das Erstellen einer sich gegenseitig ausschließenden Gruppe auf VWO garantiert, dass Ihre mobile App ein konsistentes Erlebnis bietet und dass die Ergebnisse einer Kampagne nicht durch eine andere beeinflusst werden, indem Conversions der richtigen Kampagne zugeordnet werden.

3. Onboarding-Experimente

Das App-Onboarding-Erlebnis unterliegt den meisten Änderungen, da es sich mit Ihren Produkten, Kategorien, Zielgruppen, Zielen und anderen weiterentwickelt. Während sich ein Onboarding-Erlebnis stark ändert, je nachdem, was Ihr Produkt tut, haben alle guten ein paar Dinge gemeinsam. Sie:

• Stellen Sie das Wertversprechen der App wieder her
• Machen Sie die Benutzer mit den Funktionen und Vorteilen vertraut
• Fördern Sie die erfolgreiche Annahme der App
• Minimieren Sie die Zeit, die Kunden benötigen, um den gewünschten Wert aus der Nutzung Ihrer App zu ziehen

Wenn Sie also Ihre App-Optimierungserfahrung verbessern möchten, ist es möglicherweise eine gute Idee, zuerst Antworten auf einige relevante Fragen zu finden:

• Ist unser App-Onboarding-Prozess zu langwierig?
• Wann erkennen Menschen den Wert während des Onboarding-Prozesses?
• Welche Schritte im Onboarding-Prozess sollten optional sein?
• Suchen Benutzer nach Onboarding-Hilfe und Support?

Zu verfolgende Metriken

Um Ihre Ziele und Diskussionen effektiv zu unterstützen, ist es unerlässlich, sich auf Daten zu verlassen und ihnen zu erlauben, Ihre Test-Roadmap zu steuern. Es kann hilfreich sein, grundlegende Metriken wie die unten aufgeführten zu verfolgen:

• Onboarding-Abschlussrate
• Time-to-Value (Zeit zwischen dem Onboarding und dem Erhalt des ersten Nutzens aus Ihrer App)
• Die Aktivierungsrate spiegelt wider, wie neue Benutzer Ihre App wahrnehmen
• Anzahl der Onboarding-Support-Tickets, die für einen bestimmten Zeitraum generiert wurden

Beispiele, die Sie ausprobieren können

Lassen Sie uns einige Beispiele besprechen, die Sie dazu inspirieren können, Ihren App-Onboarding-Prozess zu testen und zu verbessern.

Beispiel 1 – Mehrere Anmeldeoptionen im Onboarding-Flow

Fragen Sie sich, ob Sie während des Benutzer-Onboardings E-Mail, Social Login oder beides anbieten sollten? Every Plate, eine in den USA ansässige Plattform für die Lieferung von Mahlzeiten, lässt Benutzer eine der beiden Optionen für die Anmeldung wählen.

Beispiel 2 – Mehrstufiger Onboarding-Flow

Wie viele Schritte sollten Sie in Ihren App-Onboarding-Prozess aufnehmen? Sehen Sie, wie Duolingo es geschafft hat – und beweist, dass ein gut ausgearbeiteter mehrstufiger Onboarding-Prozess erfolgreich sein kann, ohne das Interesse des Benutzers zu verlieren. Die Sprachlern-App zeigt eine Reihe von Bildschirmen an, auf denen den Benutzern während des Onboardings mehrere (aber relevante) Fragen gestellt werden, um ihre Lernerfahrung zu verbessern.

Tests, die entwickelt werden können

Möchten Sie wissen, wie viele Personen den Onboarding-Prozess abgeschlossen haben oder wie viele Support-Tickets erstellt wurden? Sie können diese Ziele verfolgen, indem Sie die folgenden Testideen ausprobieren.

Test 1 Idee

Hypothese 1: Die Bereitstellung von Social Logins zusammen mit E-Mail kann zu einer besseren Konversion in Schritt 1 führen

Kontrolle: Einfach per E-Mail/Telefon einloggen

Variante: E-Mail-Login + Google + Facebook

Test 2 Idee

Hypothese 2: Das Anzeigen eines Fortschrittsbalkens während des Onboardings wird Benutzer dazu anregen, den Onboarding-Prozess abzuschließen.

Kontrolle: Ein mehrstufiger Onboarding-Prozess ohne Fortschrittsbalken.

Variante: Ein mehrstufiger Onboarding-Prozess mit einem Fortschrittsbalken oben auf jedem Onboarding-Bildschirm.

Mit einem Tool wie VWO können Sie die Zielgruppe für Ihre Tests basierend auf verschiedenen Parametern wie Technologie, Besuchertyp, Zeit usw. anpassen. Sie können ein Targeting-Segment aus der Segment-Galerie auswählen oder ein benutzerdefiniertes Segment erstellen.

Nehmen wir im Zusammenhang mit dem vorherigen Testbeispiel an, dass die Benutzerforschung zeigt, dass Benutzer ihre E-Mail-Adresse und ihr Passwort nicht eingeben möchten und flexiblere Anmeldeoptionen bevorzugen. Basierend auf dieser Recherche könnten Sie zunächst Benutzer in einem langsamen Markt ansprechen, z. B. Mexiko, um zu sehen, ob das Angebot sozialer Anmeldeoptionen eine positive Reaktion hervorruft und die Anzahl der Benutzer erhöht, die den ersten Onboarding-Schritt abschließen. Um dies zu erreichen, können Sie zu benutzerdefinierten Segmenten gehen, um Bedingungen hinzuzufügen und das entsprechende Attribut (Land) und den Wert (Mexiko) auszuwählen.

Außerdem können Sie „UND/ODER“-Operatoren für eine präzisere Zielgruppenauswahl verwenden. Angenommen, Ihre Lernanwendung richtet sich hauptsächlich an Berufstätige in der Mitte ihrer Karriere in Mexiko. In diesem Fall können Sie die benutzerdefinierte Variablenoption auswählen und „Alter“ in das Namensfeld und eine Altersgruppe (z. B. 35–45) in das Wertfeld eingeben. Dann können Sie die Klammer auf beiden Seiten auswählen und die „Und“-Operation auswählen. Wenn Sie alternativ die Leistung einer der Gruppen verfolgen möchten, können Sie den „ODER“-Operator in der Zielgruppenauswahl verwenden.

Hier ist ein kurzer Artikel über benutzerdefinierte Segmente, wenn Sie mehr erfahren möchten.

4. Preisexperimente

Das Anbieten von Rabatten oder Coupons ist notwendig, um den Umsatz zu steigern und Kunden für Ihre App zu gewinnen. Aber wie können Sie sicher sein, dass Ihre Preisstrategie Ihrem Unternehmen zum Wachstum verhilft?

Zu hohe Preise können Kunden abschrecken, während zu niedrige Preise bedeuten, dass Ihnen Einnahmen entgehen.

Zu verfolgende Metriken

Um festzustellen, ob Ihre Preisgestaltung effektiv ist, analysieren Sie die folgenden umsatzbezogenen Messwerte für Ihre App:

• Lebenslanger Wert – Umsatz, der pro Benutzer ab dem Zeitpunkt generiert wird, an dem er Ihre App installiert hat
• Kaufhäufigkeit – Die durchschnittliche Anzahl der Einkäufe, die Ihre Benutzer in einer bestimmten Zeit tätigen.
• Kosten pro Installation – Preise, die gezahlt werden, um neue Benutzer aus bezahlten Anzeigen zu gewinnen.

Diese Metriken können in VWO konfiguriert werden. Wenn Sie der Meinung sind, dass die Zahlen nicht Ihren Erwartungen entsprechen, ist es möglicherweise an der Zeit, Preispläne für A/B-Tests in Betracht zu ziehen. Auf diese Weise können Sie Ihren Umsatz maximieren, ohne Verluste zu riskieren.

Beispiele, die Sie ausprobieren können

Beispiel 1 – Gewährung eines ermäßigten Jahrespreises für Abonnenten

Strava, eine beliebte Fitness-App, verlangt von seinen Benutzern die Zahlung monatlicher oder jährlicher Abonnementgebühren, um auf die erweiterten Funktionen zugreifen zu können. Kunden können zwischen monatlichen oder jährlichen Abrechnungszyklen wählen, wobei für Letzteres die potenziellen Einsparungen erwähnt werden. Dieser Rabatt kann Benutzer dazu anregen, sich für den Jahresplan zu entscheiden.

Beispiel 2 – Anzeige dynamischer Preise mit zeitlicher Begrenzung

Kopf hoch! ist ein beliebtes Spiel, bei dem Spieler ein mobiles Gerät an die Stirn halten und versuchen, das Wort oder den Satz, der auf dem Bildschirm erscheint, anhand der Hinweise ihrer Freunde zu erraten. Beachten Sie, wie der ursprüngliche Preis durchgestrichen ist und ein Zeitlimit angezeigt wird, um ein Gefühl der Dringlichkeit zu erzeugen und die Benutzer zu ermutigen, schnell zu handeln.

Auf der Grundlage dieser Preisanzeigemethoden können Sie effektive App-Tests erstellen.

Tests, die entwickelt werden können

Angenommen, Sie möchten die Anzahl der Transaktionen/bezahlten Abonnements in Ihrer App erhöhen. Im Folgenden finden Sie Testideen, mit denen Sie experimentieren können.

Test 1 Idee

Hypothese 1: Das Aufzeigen potenzieller Einsparungen für einen Abonnementplan wird Benutzer dazu ermutigen, sich für den längeren zu entscheiden.

Kontrolle: Monatlicher Abonnementplan und jährlicher Abonnementplan.

Variation: Monatliche und jährliche Abonnements haben potenzielle Einsparungen für beide genannten Pläne.

Test 2 Idee

Hypothese 2: Psychologische Taktiken wie Dringlichkeit und das Streichen des Originalpreises können die Zahl der Nutzer erhöhen, die sich für dieses Rabattangebot entscheiden.

Steuerung: Ein einfaches Rabattbanner mit einem neuen ausgeschriebenen Preis.

Variation: Ein lebendiges Rabattbanner mit durchgestrichenem Originalpreis, angezeigtem reduziertem Preis und einem Timer, der die Verfügbarkeit des Angebots anzeigt.

Lassen Sie uns einen fortgeschritteneren Ansatz namens Multi-Armed Bandit (MAB) für eines der zuvor besprochenen Experimente untersuchen, z. B. den vom Heads-Up-Beispiel inspirierten Discount-Test. Im Gegensatz zu den zuvor besprochenen A/B-Tests ist der Multi-Armed-Bandit- Ansatz etwas komplexer und beinhaltet eine andere Methodik.

Angenommen, Sie haben ein zeitkritisches Rabattangebot mit mehreren zu testenden Varianten und müssen so schnell wie möglich die leistungsstärkste Variante identifizieren, um den Verlust von Gelegenheiten zu minimieren. Im Gegensatz zu A/B-Tests, die sich darauf konzentrieren, die beste Variante zu ermitteln, konzentriert sich MAB darauf, schneller zur besseren Variante zu gelangen. Wenn das Optimierungsfenster klein ist, ist MAB besser geeignet, um Gelegenheitsverluste bei Preisen, Rabatten, Abonnements usw. zu minimieren. In solchen Fällen stellen Besucher, denen die zweitbeste Variante angeboten wird und die nicht konvertieren, entgangene Einnahmemöglichkeiten dar, da dies möglicherweise der Fall ist konvertiert, wenn sie Teil der Gewinnvariante waren. Hier erfahren Sie mehr über MAB auf VWO.

Beschleunigen Sie Ihren App-Erfolg mit großartigen Testideen!

Wir hoffen, dass Sie die in diesem Artikel besprochenen Ideen für A/B-Tests hilfreich fanden. Gute Ideen bringen jedoch nur dann Vorteile, wenn sie richtig umgesetzt werden. Wenn Sie also nach einer Plattform suchen, die umfassende Funktionen wie leichtgewichtige Android/iOS-SDKs, technischen Support rund um die Uhr für mehrere Sprachen, die Möglichkeit, benutzerdefinierte Zielgruppen für Tests auszuwählen, und zuverlässige Berichte in Echtzeit bietet , VWO Mobile App Testing sollte Ihre erste Wahl sein. Da die vollständige Veröffentlichung von Mobile Insights schnell näher rückt, können Sie außerdem ein tieferes Verständnis des Benutzerverhaltens erlangen, die Konversionsmetriken verbessern und vor allem die allgemeine Benutzererfahrung Ihrer App verbessern. Fordern Sie eine kostenlose Demo an, um zu sehen, wie VWO die Reise Ihrer mobilen App-Benutzer verbessert.