Memulai Pengujian A/B Aplikasi Seluler? Inilah Ide Yang Bisa Segera Anda Coba

Jika Anda ingin mulai bereksperimen dengan aplikasi seluler Anda, inilah artikel yang Anda butuhkan. Tujuannya adalah untuk membiasakan Anda membuat hipotesis, menguji variasi, dan mengukur serta menerapkan perubahan di akhir artikel ini. Oleh karena itu, ide dan contoh yang dibahas sederhana dan mudah diterapkan.

Jenis eksperimen aplikasi seluler yang dapat Anda coba

Mari kita lihat empat eksperimen teratas yang memengaruhi pengalaman pengguna aplikasi secara signifikan dan tunjukkan, menggunakan contoh dunia nyata, bagaimana Anda dapat mencobanya di VWO.

1. Eksperimen pencarian

Pengguna dengan rentang perhatian yang lebih pendek mudah teralihkan dan mungkin tidak mengambil tindakan jika terlalu banyak hambatan. Mengingat ruang layar yang terbatas pada perangkat seluler, tidak praktis untuk menyertakan menu yang luas atau berbagai filter untuk membantu navigasi dalam aplikasi. Oleh karena itu, menggabungkan dan mengoptimalkan fungsi pencarian menjadi penting untuk meningkatkan visibilitas produk atau fitur dan memastikan tampilan yang tepat untuk aplikasi seluler.

Metrik untuk dilacak

Dengan asumsi Anda telah mempertimbangkan untuk mengoptimalkan penelusuran aplikasi, berikut adalah beberapa metrik yang perlu diperhatikan:

• Tingkat keluar pencarian
• Jumlah pengguna yang memilih item yang ditampilkan dalam pencarian
• Jumlah pencarian tanpa hasil

Metrik ini dapat didefinisikan dengan mudah di VWO. Wawasan yang diambil dari data ini akan memberi Anda pemahaman yang jelas tentang posisi kinerja penelusuran aplikasi Anda saat ini dan di mana ketertinggalannya.

Pelajari lebih dalam wawasan pengguna dengan penelitian perilaku kualitatif

Untuk memberikan pengamatan yang lebih mendalam, melengkapi data kuantitatif dengan penelitian kualitatif terbukti bermanfaat. Peta panas banyak digunakan (dan disukai) untuk ini, dan untuk alasan yang bagus. Katakanlah Anda melihat penurunan jumlah klik pada hasil pencarian. Mungkin ada beberapa alasan mengapa:

• Hasil pencarian tidak relevan
• Urutan hasil tidak dipersonalisasi
• Jumlah item yang ditampilkan setelah pencarian terlalu rendah

Produk Mobile Insights VWO yang akan datang memudahkan untuk memanfaatkan rekaman sesi dan peta panas atau peta gulir untuk menggali lebih dalam tentang perilaku pengguna dan mengidentifikasi apa yang perlu dioptimalkan. Dengan VWO Mobile Insights, Anda dapat menemukan jawaban atas pertanyaan seperti:

• Bagaimana pengunjung menggunakan fungsi pencarian? (misalnya, untuk mencari kategori vs. produk spesifik yang ditunjuk)
• Apakah pelengkapan otomatis memengaruhi konversi?
• Apakah menampilkan riwayat pencarian mereka efektif dalam meningkatkan penjualan barang yang dibeli sebelumnya?
• Apa yang menyebabkan gesekan dalam pengalaman pencarian mereka?

Contoh yang bisa Anda coba

Anda dapat merumuskan dan memvalidasi hipotesis melalui pengujian A/B berdasarkan pengamatan Anda.

Jika Anda bertanya-tanya harus mulai dari mana, berikut adalah beberapa contoh dunia nyata yang dapat Anda rujuk sebagai inspirasi.

Contoh 1 – Hasil pencarian berdasarkan kategori

Beberapa penerapan pencarian aplikasi terbaik ada di situs media sosial seperti Instagram dan YouTube. Saat Anda mulai mengetik di bilah pencarian Instagram, Anda akan melihat hasil yang diatur dalam kategori seperti akun, audio, tag, tempat, dll. Instagram dan YouTube menampilkan riwayat pencarian, memberi pengguna akses sekali klik untuk mencoba kembali frasa pencarian sebelumnya.

Contoh 2 – Hasil pencarian dengan saran produk

GOAT, platform eCommerce Amerika, telah menerapkan fitur pencarian yang mengesankan yang memungkinkan pengguna menemukan apa yang mereka butuhkan dengan cepat. Ketika Anda mengklik ikon pencarian di bilah navigasi bawah, itu menunjukkan kepada Anda beberapa kategori produk untuk dijelajahi dan mengisi halaman dengan item di bawah kategori yang dipilih. Saat Anda mengklik bilah pencarian dan mulai mengetik sesuatu, Anda dapat melihat saran produk dengan teks dan gambar yang sesuai.

Tes yang bisa dirancang

Jadi, katakanlah Anda ingin meningkatkan rasio klik-tayang untuk hasil pencarian Anda. Berikut adalah dua hipotesis yang dapat Anda uji berdasarkan contoh di atas untuk memenuhi tujuan tersebut.

Tes 1 Ide
Hipotesis 1: Mengelompokkan hasil pencarian dalam berbagai kategori seperti orang, tempat, dan grup akan meningkatkan keterlibatan pengguna.

Kontrol: Hasil pencarian ditampilkan sebagai daftar produk.

Varian: Hasil pencarian ditampilkan bersama dengan filter 'kelompokkan menurut'.

Tes 2 Ide
Hipotesis 2: Menampilkan gambar bersama dengan hasil pencarian akan meningkatkan rasio klik-tayang untuk saran produk.

Kontrol: Hasil menunjukkan saran produk yang hanya berisi teks.

Varian: Hasil menunjukkan saran produk yang memiliki teks dan gambar.

Anda dapat dengan cepat mengimplementasikan pengujian tersebut pada platform pengujian A/B Seluler VWO hanya dalam beberapa langkah. Di bawah ini adalah video yang mendemonstrasikan langkah-langkah dalam membuat pengujian berdasarkan hipotesis 1 untuk aplikasi Android yang dibangun menggunakan Java, misalnya. VWO juga mendukung kerangka kerja seperti Flutter, Cordova, dan React-Native.

Di belakang layar di VWO

VWO menyediakan SDK ringan untuk iOS, Android, dan semua bahasa backend populer . Menambahkan SDK aplikasi seluler adalah proses integrasi satu kali, setelah itu VWO menghasilkan kunci API yang dapat Anda gunakan untuk inisialisasi aplikasi untuk aplikasi iOS dan Android. Anda dapat merujuk ke panduan komprehensif ini jika Anda memerlukan penjelasan rinci tentang langkah-langkahnya.

Jadi, Anda telah membuat variasi, menambahkan sasaran konversi, dan meluncurkan pengujian aplikasi seluler. Langkah penting berikutnya adalah menganalisis dan mengekstrak wawasan dari hasil tes. Mesin SmartStats VWO , berdasarkan statistik Bayesian, melakukan pekerjaan berat untuk menghitung dan menyajikan hasil pengujian yang akurat sebagai laporan yang mudah dikonsumsi yang dapat Anda analisis untuk menarik wawasan yang dapat ditindaklanjuti. Laporan VWO bersifat komprehensif dan memungkinkan Anda memfilter hasil menurut tanggal dan segmen pengunjung, bahkan membandingkan kinerja beberapa sasaran dalam sebuah pengujian.

2. Eksperimen navigasi

Navigasi adalah salah satu hal tersulit untuk dibuat karena melibatkan banyak kerumitan seperti pengelompokan, desain, dan kemudahan penemuan fitur. Para ahli merekomendasikan "Pengujian Pohon" untuk membantu menetapkan garis dasar tentang bagaimana hal-hal yang "dapat ditemukan" ada di aplikasi Anda. Ini adalah pengujian tertutup yang dilakukan di antara pengguna untuk melihat seberapa cepat mereka dapat menemukan sesuatu di dalam aplikasi. Artikel ini adalah bagian yang bagus untuk membantu Anda memulai Pengujian Pohon dan juga berfungsi sebagai langkah pertama yang signifikan dalam merancang eksperimen untuk meningkatkan navigasi.

Metrik untuk dilacak

Seperti yang kami lakukan dengan eksperimen untuk menyempurnakan penelusuran, berikut adalah beberapa metrik yang harus Anda pantau

• Tingkat kemampuan menemukan item
• Waktu yang diperlukan untuk menemukan fitur atau produk
• Tidak. kali pengguna melakukannya dengan benar pada klik pertama mereka
• Variabilitas dalam menemukan waktu

Dengan menggabungkan kinerja metrik ini dengan wawasan penelitian kualitatif, Anda dapat menentukan strategi yang efektif untuk menyempurnakan navigasi aplikasi Anda.

Contoh yang bisa Anda coba

Contoh 1 – Navigasi kartu

Jika Anda sedang mencari inspirasi navigasi, salah satu favorit saya adalah Calm, sebuah aplikasi meditasi. Tata letaknya menyerupai serangkaian pintu, masing-masing berfungsi sebagai titik masuk. Kartu selanjutnya disegmentasi ke dalam kategori seperti 'Kebugaran Mental', 'Koleksi yang Direkomendasikan', 'Cepat & Mudah', dan seterusnya. Menu hamburger bisa menjadi alternatif untuk gaya navigasi ini, tetapi penggunaannya telah menurun karena kemampuan penemuannya yang rendah, sehingga mengurangi klik pengguna. Sebaliknya, navigasi bergaya kartu semakin mendapatkan daya tarik karena desainnya yang ramah pengguna.

Contoh 2 – Navigasi tag sederhana

Google Maps adalah aplikasi lain yang memiliki navigasi yang ramah pengguna. Setelah Anda memasukkan lokasi, Anda akan melihat opsi seperti petunjuk arah, bagikan, dan simpan lokasi dalam bentuk tombol filter yang mudah terlihat. Selain itu, Anda juga menemukan fasilitas yang biasa digunakan sebagai tombol filter, membantu Anda menjelajahi restoran, pusat perbelanjaan, ATM, dan taman di dekat lokasi yang dimasuki. Navigasi Google Maps sederhana dan membantu orang mendapatkan hasil maksimal dari aplikasi.

Tes yang bisa dirancang

Meningkatkan rasio klik-tayang produk dari navigasi biasanya menjadi tujuan utama pemilik eCommerce yang mencoba meningkatkan pengalaman navigasi aplikasi mereka. Jika itu juga yang Anda coba lakukan, berikut adalah dua hipotesis untuk diuji:

Tes 1 Ide

Hipotesis 1: Mengganti menu hamburger dengan ubin navigasi berbasis kartu akan meningkatkan tingkat konversi.

Kontrol: Menu hamburger menampilkan berbagai kategori produk untuk dijelajahi pengguna.

Varian: Kategori produk ditampilkan dalam format tata letak kartu.

Tes 2 Ide

Hipotesis 2: Menampilkan tombol filter untuk kasus penggunaan sehari-hari akan membuat pengguna menemukan informasi yang relevan lebih cepat dan lebih sering menggunakannya.

Kontrol: Bilah pencarian fitur tetap berada di bagian atas aplikasi tanpa tombol filter.
Varian: Bilah pencarian ada di bagian atas, dengan tombol filter untuk kasus penggunaan sehari-hari ada di bagian atas dan bawah layar.

Jika Anda ingin menjalankan kedua pengujian secara paralel, Anda dapat melakukannya dengan VWO tanpa mengkhawatirkan data yang miring. VWO memiliki kemampuan untuk menjalankan pengujian yang saling eksklusif pada aplikasi seluler. Ini memastikan bahwa pengguna aplikasi seluler yang berpartisipasi dalam satu kampanye tidak berpartisipasi dalam kampanye lain yang merupakan bagian dari grup yang saling eksklusif. Anda dapat melakukannya dengan menambahkan beberapa kampanye ke grup yang saling eksklusif untuk memastikan tidak ada pengunjung yang tumpang tindih di salah satu kampanye. Membuat grup yang saling eksklusif di VWO menjamin bahwa aplikasi seluler Anda memberikan pengalaman yang konsisten dan hasil satu kampanye tidak dipengaruhi oleh yang lain, menghubungkan konversi ke kampanye yang tepat.

3. Eksperimen orientasi

Pengalaman orientasi aplikasi dapat mengalami sebagian besar perubahan seiring dengan perkembangan produk, kategori, audiens, sasaran, dan lainnya. Sementara pengalaman onboarding berubah sangat tergantung pada apa produk Anda, semua yang baik memiliki beberapa kesamaan. Mereka:

• Aktifkan kembali proposisi nilai aplikasi
• Membiasakan pengguna dengan fitur dan manfaat
• Dorong adopsi aplikasi yang berhasil
• Minimalkan waktu yang dibutuhkan pelanggan untuk memperoleh nilai yang mereka inginkan dari penggunaan aplikasi Anda

Jadi, jika Anda ingin meningkatkan pengalaman pengoptimalan aplikasi, sebaiknya temukan jawaban atas beberapa pertanyaan terkait terlebih dahulu:

• Apakah proses pengenalan aplikasi kami terlalu lama?
• Kapan orang menyadari nilai selama proses orientasi?
• Langkah mana dalam proses orientasi yang harus opsional?
• Apakah pengguna mencari bantuan dan dukungan orientasi?

Metrik untuk dilacak

Untuk mendukung sasaran dan diskusi Anda secara efektif, sangat penting untuk mengandalkan data dan memungkinkan mereka mengarahkan peta jalan pengujian Anda. Melacak metrik dasar seperti yang tercantum di bawah ini dapat membantu:

• Tingkat penyelesaian orientasi
• Waktu untuk menghargai (waktu antara aktivasi dan mendapatkan nilai pertama dari aplikasi Anda)
• Tingkat aktivasi mencerminkan bagaimana pengguna baru memandang aplikasi Anda
• Jumlah tiket dukungan orientasi yang dibuat untuk periode tertentu

Contoh yang bisa Anda coba

Mari kita bahas beberapa contoh yang dapat menginspirasi Anda untuk menguji dan meningkatkan proses orientasi aplikasi Anda.

Contoh 1 – Beberapa opsi masuk dalam alur orientasi

Apakah Anda bertanya-tanya apakah Anda harus menawarkan email, login sosial, atau keduanya selama orientasi pengguna? Setiap Piring, platform pengiriman makanan yang berbasis di AS, memungkinkan pengguna memilih salah satu dari dua opsi untuk masuk.

Contoh 2 – Alur orientasi multi-langkah

Berapa banyak langkah yang harus Anda sertakan dalam proses orientasi aplikasi? Lihat bagaimana Duolingo berhasil – membuktikan bahwa proses onboarding multi-langkah yang dibuat dengan baik dapat berhasil tanpa kehilangan minat pengguna. Aplikasi pembelajaran bahasa menampilkan serangkaian layar yang menanyakan beberapa pertanyaan (namun relevan) kepada pengguna selama orientasi untuk meningkatkan pengalaman belajar mereka.

Tes yang bisa dirancang

Apakah Anda ingin tahu berapa banyak orang yang telah menyelesaikan proses orientasi atau berapa banyak tiket dukungan yang telah terkumpul? Anda dapat melacak sasaran ini dengan mencoba ide pengujian berikut.

Tes 1 Ide

Hipotesis 1: Memberikan info masuk sosial bersama dengan email dapat menghasilkan konversi yang lebih baik di langkah 1

Kontrol: Cukup login email/telepon

Varian: Login email + Google + Facebook

Tes 2 Ide

Hipotesis 2: Menampilkan bilah kemajuan selama orientasi akan mendorong pengguna untuk menyelesaikan proses orientasi.

Kontrol: Proses orientasi multi-langkah yang disajikan tanpa bilah kemajuan.

Varian: Proses orientasi multi-langkah dengan bilah progres di bagian atas setiap layar orientasi.

Dengan alat seperti VWO, Anda dapat menyesuaikan audiens target untuk pengujian Anda berdasarkan berbagai parameter seperti teknologi, jenis pengunjung, waktu, dll. Anda dapat memilih segmen penargetan dari Galeri Segmen atau membuat segmen khusus.

Dalam konteks contoh pengujian sebelumnya, misalkan penelitian pengguna menunjukkan bahwa pengguna enggan memasukkan email dan kata sandi mereka dan lebih memilih opsi masuk yang lebih fleksibel. Berdasarkan penelitian ini, pertama-tama Anda dapat menargetkan pengguna di pasar yang lambat, katakanlah Meksiko, untuk melihat apakah menawarkan opsi login sosial menghasilkan respons positif dan meningkatkan jumlah pengguna yang menyelesaikan langkah orientasi pertama. Untuk melakukannya, Anda dapat membuka segmen khusus untuk menambahkan ketentuan dan memilih atribut yang sesuai (Negara) dan nilai (Meksiko).

Selanjutnya, Anda dapat menggunakan operator 'DAN/ATAU' untuk pemilihan audiens yang lebih tepat. Misalnya, aplikasi pembelajaran Anda terutama menargetkan profesional menengah di Meksiko. Dalam hal ini, Anda dapat memilih opsi variabel khusus dan memasukkan 'Usia' di bidang nama dan kelompok usia (seperti 35-45) di bidang nilai. Kemudian, Anda dapat memilih braket di kedua sisi dan memilih operasi 'Dan'. Alternatifnya, jika Anda ingin melacak performa salah satu grup, Anda dapat menggunakan operator 'ATAU' dalam pemilihan audiens.

Berikut artikel singkat tentang segmen khusus jika Anda ingin mempelajari lebih lanjut.

4. Eksperimen penetapan harga

Menawarkan diskon atau kupon diperlukan untuk meningkatkan penjualan dan menarik pelanggan ke aplikasi Anda. Tapi bagaimana Anda bisa yakin strategi penetapan harga Anda membantu pertumbuhan bisnis Anda?

Menetapkan harga terlalu tinggi dapat membuat pelanggan menjauh, sementara menetapkan harga terlalu rendah dapat berarti kehilangan pendapatan.

Metrik untuk dilacak

Untuk menentukan apakah penetapan harga Anda efektif, analisis metrik terkait pendapatan berikut untuk aplikasi Anda:

• Nilai umur – Pendapatan yang dihasilkan per pengguna sejak mereka memasang aplikasi Anda
• Frekuensi pembelian – Jumlah rata-rata pembelian yang dilakukan pengguna Anda dalam waktu tertentu.
• Biaya per pemasangan – harga yang dibayarkan untuk mendapatkan pengguna baru dari iklan berbayar.

Metrik ini dapat dikonfigurasi di VWO. Jika Anda yakin jumlahnya tidak sesuai dengan harapan Anda, mungkin sudah waktunya untuk mempertimbangkan rencana penetapan harga pengujian A/B. Melakukan hal itu dapat membantu Anda memaksimalkan pendapatan tanpa risiko kerugian.

Contoh yang bisa Anda coba

Contoh 1 – Memberikan potongan harga tahunan kepada pelanggan

Strava, aplikasi kebugaran populer, mengharuskan penggunanya membayar biaya berlangganan bulanan atau tahunan untuk mengakses fitur-fitur canggihnya. Pelanggan dapat memilih antara siklus penagihan bulanan atau tahunan, dengan potensi penghematan yang disebutkan untuk yang terakhir. Diskon ini dapat memberi insentif kepada pengguna untuk memilih paket tahunan.

Contoh 2 – Menampilkan harga dinamis dengan batas waktu

Perhatian! adalah gim populer yang pemainnya memegang perangkat seluler di dahi mereka dan mencoba menebak kata atau frasa yang muncul di layar berdasarkan petunjuk teman mereka. Perhatikan bagaimana harga asli dicoret, dan batas waktu ditampilkan untuk menciptakan rasa urgensi dan mendorong pengguna untuk bertindak cepat.

Anda dapat membuat pengujian aplikasi yang efektif berdasarkan metode tampilan harga ini.

Tes yang bisa dirancang

Katakanlah Anda ingin menambah jumlah transaksi/langganan berbayar di aplikasi Anda. Berikut ini adalah ide pengujian yang dapat Anda coba.

Tes 1 Ide

Hipotesis 1: Menampilkan potensi penghematan untuk paket berlangganan akan mendorong pengguna untuk memilih yang lebih lama.

Kontrol: Paket langganan bulanan dan paket langganan tahunan.

Variasi: Langganan bulanan dan tahunan memiliki potensi penghematan untuk kedua paket yang disebutkan.

Tes 2 Ide

Hipotesis 2: Taktik psikologis seperti urgensi dan mencoret harga asli dapat meningkatkan jumlah pengguna yang memilih penawaran diskon ini.

Kontrol: Spanduk diskon sederhana dengan harga baru tertulis.

Variasi: Spanduk diskon cerah dengan coretan harga asli, harga diskon ditampilkan, dan pengatur waktu yang menunjukkan ketersediaan penawaran.

Mari jelajahi pendekatan yang lebih canggih yang disebut multi-armed bandit (MAB) untuk salah satu eksperimen yang telah kita bahas sebelumnya, seperti uji diskon yang terinspirasi dari contoh Heads Up. Berbeda dengan pengujian A/B yang telah kita bahas sebelumnya, pendekatan multi-strategi bandit sedikit lebih rumit dan melibatkan metodologi yang berbeda.

Misalkan Anda memiliki penawaran diskon yang sensitif terhadap waktu dengan beberapa variasi untuk diuji, dan Anda perlu mengidentifikasi variasi dengan performa terbaik secepat mungkin untuk meminimalkan hilangnya peluang. Tidak seperti pengujian A/B yang berfokus pada penentuan variasi terbaik, MAB berfokus pada mendapatkan variasi yang lebih baik dengan lebih cepat. Ketika jendela pengoptimalan kecil, MAB lebih cocok untuk meminimalkan hilangnya peluang dalam penetapan harga, diskon, langganan, dll. Dalam kasus tersebut, pengunjung yang disajikan variasi terbaik kedua dan tidak berkonversi merupakan peluang pendapatan yang hilang karena mereka mungkin memiliki dikonversi jika mereka adalah bagian dari variasi pemenang. Anda dapat mempelajari lebih lanjut tentang MAB di VWO di sini.

Percepat kesuksesan aplikasi Anda dengan ide pengujian yang luar biasa!

Kami harap ide pengujian A/B yang dibahas dalam artikel ini bermanfaat bagi Anda. Namun, ide-ide hebat hanya bermanfaat jika diterapkan dengan benar. Jadi, jika Anda mencari platform yang menawarkan fungsionalitas komprehensif seperti Android/iOS SDK yang ringan, dukungan teknis 24*7 untuk berbagai bahasa, kemampuan untuk memilih audiens khusus untuk pengujian, dan memberi Anda laporan real-time yang andal , Pengujian Aplikasi Seluler VWO harus menjadi pilihan utama Anda. Selain itu, dengan rilis lengkap Wawasan Seluler yang semakin dekat, Anda dapat memperoleh pemahaman yang lebih mendalam tentang perilaku pengguna, meningkatkan metrik konversi, dan, yang paling penting, meningkatkan pengalaman pengguna secara keseluruhan dari aplikasi Anda. Minta demo gratis untuk melihat bagaimana VWO meningkatkan perjalanan pengguna aplikasi seluler Anda.