Cara Benar-benar Menang dalam Eksperimen (Bahkan Saat Anda Tidak Melakukannya) – Pendekatan dan Inspirasi

Untuk meningkatkan konversi dan mengikuti perilaku pelanggan yang terus berubah, perusahaan semakin merangkul budaya eksperimen untuk menghilangkan tebakan dari pengambilan keputusan mereka sebanyak mungkin.

Namun, setelah Anda menjalankan tes dengan hasil yang menang, agak sulit untuk memahami yang gagal.

Tetapi apakah semua eksperimen tentang kemenangan?

Jika Anda mengharapkan setiap pengujian Anda menghasilkan peningkatan pendapatan, Anda salah, teman.

Kenyataannya sangat jauh dari itu, dan Anda tidak bisa hanya berharap eksperimen menjadi tongkat ajaib yang memperbaiki semua metrik bisnis Anda dalam semalam.

Sebaliknya, eksperimen berfungsi sebagai proses yang membantu Anda menemukan jawaban atas pertanyaan Anda dan memvalidasi hipotesis Anda untuk membantu Anda mencapai sasaran bisnis strategis. Ini adalah latihan percobaan dan teror yang membutuhkan waktu dan konsistensi.

Jika Anda memahami ini, itu adalah setengah dari pertempuran yang dimenangkan di sana.

Jadi, bagaimana Anda bisa menang meski hasil tes Anda suram? Anda menang ketika Anda mengubah pendekatan Anda terhadap eksperimen dan harapan Anda darinya. Di bawah ini kami membahas metodologi yang dapat membantu Anda mulai memikirkan hal ini dan berfokus pada hasil yang penting.

Cara belajar dan meningkatkan dari hasil pengujian A/B

Peningkatan konversi tidak dapat dijamin setiap kali Anda menjalankan pengujian. Jadi, mengapa Anda repot-repot menjalankan tes? Menurut Anda mengapa raksasa global seperti Amazon, Netflix, dan Facebook menjalankan tes? Tidak setiap tes adalah pemenang bagi mereka juga. Tujuan akhir di balik pengujian adalah untuk melihat ide mana yang dapat membantu dan mana yang tidak dapat membantu meningkatkan pengalaman pengguna. Pengujian adalah bantuan dalam perjalanan Anda menuju inovasi pengalaman pengguna.

Ketika fokus Anda adalah pada kemenangan jangka panjang, Anda akan mendapatkan nugget pembelajaran yang hebat bahkan dari pengujian A/B yang tampaknya tidak begitu berhasil di atas kertas. Di bawah ini kami memberi tahu Anda beberapa langkah untuk menerapkan pendekatan eksperimen yang segar dan halus secara keseluruhan.

Brainstorming ide

Memotivasi semua orang di organisasi Anda untuk menyumbangkan ide pengujian tanpa tetap terbatas pada peran dan penunjukan tertentu. Anda bisa mendapatkan ide pengujian terbaik berikutnya dari seseorang yang tidak pernah Anda harapkan untuk berkontribusi.

Sudahkah beberapa tes kemenangan di kucing Anda? Bagikan hasilnya dengan pemangku kepentingan Anda. Tunjukkan pada mereka bagaimana mengoptimalkan formulir web meningkatkan langganan freemium sebesar 20% atau 30% misalnya. Atau jika Anda memiliki tes di mana Anda menguji secara berulang yang menghasilkan pemenang besar, bagikan bagaimana beberapa tes dapat menguji kesabaran namun sangat sepadan dengan hasil akhirnya.

Dengan begitu, Anda juga dapat memotivasi anggota tim Anda untuk tertarik pada eksperimen dan menjadikannya bagian integral dari pekerjaan mereka. Partisipasi tingkat massa ini diperlukan untuk melakukan pergeseran menuju budaya eksperimentasi.

VWO dapat membantu Anda dalam perjalanan ide ini. Bagaimana? Rencana VWO adalah kemampuan berguna yang membuat kolaborasi tim menjadi cakewalk. Ini menawarkan repositori terpusat di mana Anda dapat menambahkan semua catatan, pengamatan, wawasan, dan ide yang berkaitan dengan tes tertentu. Ini memfasilitasi cara terstruktur untuk membangun hipotesis yang didukung data di mana setiap anggota tim tetap mengetahui detail yang lebih halus terkait dengan semua pengujian.

Selain itu, Anda dapat merujuk ke daftar periksa kami kapan saja untuk melihat semua hal yang perlu dilakukan dengan benar guna mempertahankan kualitas eksperimen Anda. Semakin banyak kemahiran yang Anda tunjukkan dalam melakukan tes, semakin baik posisi Anda untuk memberi tahu orang-orang Anda untuk mengikutinya.

Perkuat hipotesis Anda

Eksperimen memvalidasi atau menyangkal hipotesis Anda. Bagaimana jika hipotesis Anda salah dan status quo Anda masih merupakan pemain yang kuat? Apakah ini bukan kemenangan? Anda adalah pengujian A/B yang jauh dari memvalidasi hipotesis di belakang kendali Anda dan mencegah pengiriman ide yang buruk.

Misalkan Anda menghapus kolom kode diskon dan kode promo dari halaman pembayaran untuk mengurangi gangguan bagi pengguna, dengan harapan membuat proses pembayaran menjadi lancar bagi mereka.

Namun bertentangan dengan ekspektasi Anda, Anda melihat dari data bahwa menghapus kolom ini mengakibatkan peningkatan penurunan dari halaman checkout. Ini akan mengarahkan Anda untuk percaya bahwa pengguna mungkin ingin memanfaatkan diskon dan oleh karena itu berharap untuk melihat elemen ini sepanjang perjalanan mereka di situs web.

Gunakan semua pengetahuan yang Anda peroleh tentang perilaku pelanggan di situs web Anda melalui pengujian A/B untuk menginformasikan proses pembuatan hipotesis Anda. Kembali ke contoh kami, melihat pengguna Anda berhenti untuk menelusuri kode diskon atau membandingkan produk di situs web pihak ketiga pada pengujian sebelumnya, Anda dapat membuat ide pengujian seputar menyediakan informasi tersebut di situs web untuk meningkatkan pembayaran dan penyelesaian pembelian.

Kuncinya terletak pada melihat eksperimen sebagai proses terintegrasi dan tidak memperlakukan setiap pengujian A/B sebagai silo.

Rencana VWO sangat berguna karena memungkinkan Anda mencatat pengamatan dari analisis perilaku pengguna, membuat hipotesis berdasarkan pengamatan tersebut, dan mengelola serta memprioritaskan gagasan pengujian. Dengan semua detail yang diperlukan di satu tempat, Anda dapat melacak semua hipotesis melalui tampilan kemajuan di dasbor hipotesis.

Pilih ukuran sampel yang tepat

Untuk mendapatkan hasil yang signifikan secara statistik dari pengujian A/B, Anda harus menjalankan pengujian ini pada laman yang mendapatkan lalu lintas yang cukup. Dengan ukuran sampel yang lebih kecil, Anda harus memberikan pengujian Anda banyak waktu untuk menjadi signifikan secara statistik.

Kami sarankan Anda menyelesaikan ini sebelum memulai kampanye pengujian Anda. Bagaimana cara melakukannya? Coba kalkulator pengujian A/B VWO. Gratis!

Selain itu, berdasarkan inferensi Bayesian, VWO SmartStats menyelamatkan Anda dari kerepotan karena membutuhkan ukuran sampel minimum untuk sebagian besar. Cukup masukkan jumlah pengunjung dan konversi untuk kontrol dan variasi untuk menghitung signifikansi.

Dapatkan hasil maksimal dari fitur dan kemampuan platform

Sering terlihat bahwa pemasar tidak memanfaatkan semua fitur di platform CRO mereka secara maksimal.

Misalnya, di VWO, Anda dapat menggunakan dimensi khusus untuk pemfilteran laporan setelah segmentasi. Hal ini memberi Anda wawasan yang lebih dalam tentang perilaku berbagai segmen pengguna dalam kampanye pengujian. Tetapi jika Anda tidak mengetahui kasus penggunaan dan tujuannya, Anda tidak akan dapat membuka keajaiban yang dapat diberikannya pada CRO KPI Anda.

Jika Anda memilih VWO, Anda juga harus tahu bahwa salah satu kemampuannya juga analisis perilaku pengunjung. Anda tidak boleh membatasi diri hanya untuk menguji; sebagai gantinya, Anda harus menjelajahi kemampuan VWO lainnya untuk menjadikan seluruh program pengoptimalan Anda lebih tinggi.

Mengevaluasi laporan

Bebaskan pikiran Anda untuk 'menang' saat mengevaluasi hasil pengujian A/B Anda. Anda harus melihat eksperimen sebagai perjalanan untuk menemukan dan mempelajari cara mengoptimalkan performa kampanye mendatang. Dan memperoleh pembelajaran hebat hanya menjadi mungkin jika Anda membaca atau mengevaluasi hasil eksperimen dengan cara yang benar.

Berikut adalah beberapa pertanyaan yang dapat Anda tanyakan pada diri sendiri setelah menjalankan tes:

• Bagaimana reaksi segmen pengguna yang berbeda terhadap variasi tersebut?
• Variasi mana yang bekerja paling baik untuk pengguna yang sudah ada atau yang baru?
• Bagaimana hipotesis ini berbeda dari yang sebelumnya?
• Sudahkah kita menemukan peluang pengujian lain untuk masa depan?

Jawaban atas pertanyaan ini harus memandu langkah Anda selanjutnya – apakah Anda ingin menjalankan pengujian berulang untuk mendapatkan lebih banyak data tingkat terperinci atau Anda perlu memberi ruang untuk ide baru dalam strategi pemasaran Anda yang lebih besar.

Dan jika Anda menggunakan VWO untuk pengujian A/B, mudah untuk menelusuri detailnya. Anda tidak hanya dapat melihat performa semua variasi dengan mempelajari metrik khusus untuk masing-masing variasi, tetapi Anda juga dapat membandingkan rasio konversinya menggunakan grafik. Meskipun pengujian A/B Anda gagal, Anda dapat menggunakan fitur dimensi khusus untuk melihat apakah hasil ini konsisten di semua segmen pengguna atau apakah ada segmen tertentu yang merespons pengujian dengan baik. Ini juga dapat menjadi dasar kampanye personalisasi Anda berikutnya – di mana Anda menargetkan segmen khusus ini dengan perubahan yang divalidasi oleh pengujian ini. Karena VWO adalah platform terintegrasi, semua temuan ini saling melengkapi dan semuanya dikelola melalui satu dasbor. Ikuti uji coba gratis semua termasuk untuk melihat ini beraksi.

Mari kita jelaskan cara kerja dimensi khusus dengan sebuah contoh.

Bayangkan, Anda ingin menyoroti merek teratas yang telah terdaftar dan mulai menjual sepatu kets unisex mereka di toko eCommerce Anda.

Anda yakin bahwa menambahkan korsel yang menampilkan sepatu kets uniseks dari merek ternama di beranda situs web Anda akan membangkitkan minat pengunjung pada koleksi ini dan bahkan mendorong mereka untuk membeli.

Akibatnya, Anda ingin menjalankan pengujian dan melacak klik pada tombol CTA 'Belanja Sekarang' di carousel.

Namun, Anda melihat pengujiannya tidak berjalan dengan baik karena mungkin gambar korsel tidak menarik, tombol radio di bagian bawah tidak menonjol, atau salinan CTA tidak persuasif – alasannya bisa apa saja.

Tapi kemudian Anda memutuskan untuk membagi laporan dan ingin mempelajari interaksi pengunjung dengan elemen pada tingkat granular. Sekarang Anda melihat variasi tampil lebih baik untuk wanita antara usia 22-28.

Berdasarkan pengamatan ini, Anda dapat memutuskan untuk mengirim buletin email yang dipersonalisasi yang menawarkan diskon atau kode promo kepada pengunjung wanita dari kelompok usia tersebut yang tampaknya tertarik dengan sepatu kets tersebut. Atau Anda dapat mempersonalisasi halaman arahan dengan carousel hanya untuk segmen pelanggan khusus ini.

Pepatah – Ketika satu pintu tertutup, yang lain terbuka – menjadi hidup dalam situasi seperti itu dengan bantuan dimensi kustom VWO.

Perusahaan yang mengadopsi pola pikir eksperimentasi dan berhasil

Pelajari bagaimana pendekatan 'jangan menyerah' Paperstone untuk pengujian meningkatkan pendapatan mereka

Perusahaan perlengkapan kantor yang berbasis di Inggris ini bersaing dengan banyak perusahaan dominan dan kecil yang menjual produk serupa. Paperstone menggunakan VWO untuk mengoptimalkan situs webnya dan memberikan pengalaman pengguna terbaik untuk tetap terdepan dalam persaingan.

Melalui survei pengguna, perusahaan menemukan bahwa pelanggan dan prospek mereka mengharapkan diskon besar-besaran. Namun mengingat sifat kompetitif bisnis ini, margin keuntungan sudah sangat tipis. Diskon massal hanya akan berfungsi jika nilai pesanan rata-rata meningkat.

Jadi, mereka mengajukan hipotesis bahwa menawarkan diskon pada produk tertentu dapat meningkatkan margin keuntungan dari situs web mereka.

Sementara kontrol tidak menunjukkan diskon besar-besaran, variasi menampilkan diskon pada pembelian massal produk-produk populer.

Meskipun diharapkan pita pembelian massal berwarna kuning cerah akan menarik perhatian pengguna, mereka sama sekali mengabaikannya. Kegagalan awal ini membuat Paperstone memikirkan kembali seluruh strategi pengujian diskon massalnya. Tetapi mereka akhirnya bergerak maju dengan iterasi lain di mana mereka memutuskan untuk menjalankan pengujian untuk waktu yang lebih lama, menguji lebih banyak pengunjung, untuk hasil yang signifikan secara statistik.

Menggunakan hipotesis yang sama, kali ini perusahaan menggunakan VWO untuk melacak pendapatan. Menariknya, variasi mengungguli kontrol, meningkatkan AOV sebesar 18,94%, AOV untuk penawaran diskon massal sebesar 5%, dan pendapatan sebesar 16,85%.

Strategi pengujian berulang POSist mengarahkan mereka untuk menemukan variasi pemenang terbaik dari yang terbaik

Sebagai platform manajemen restoran berbasis SaaS, tujuan POSist adalah meningkatkan jumlah pendaftaran demo gratis. Tim ingin mengontrol pengguna yang berpaling dari halaman beranda dan halaman kontak situs web karena kedua halaman ini memainkan peran kunci dalam corong konversi situs web mereka. Dengan alasan ini, POSist beralih ke VWO dan memulai perjalanan pengoptimalannya.

POSist menjalankan 2 pengujian beranda menggunakan VWO. Pada pengujian pertama, tim mengubah konten paro atas di beranda dengan menyertakan tajuk utama yang menarik dan mengurangi panjang gulir. Variasi tersebut meningkatkan kunjungan ke halaman kontak dengan rasio konversi 15,45%, peningkatan 16% dari kontrol 13,25%.

Untuk pengujian kedua, mereka menambahkan logo khusus, testimonial, dan bagian 'Mengapa POSist'. Selain itu, mereka membagi penawaran mereka – meningkatkan dan melakukan transisi – untuk prospek yang beralih ke aplikasi perangkat lunak point-of-sale (POS) dan pembeli pertama kali.

Mengambil pendekatan berulang untuk pengujian, POSist menguji variasi ini dengan variasi pemenang dari pengujian sebelumnya. Variasi baru meningkatkan kunjungan ke halaman kontak sebesar 5% hanya dalam satu minggu! Akibatnya, variasi beranda ini ditayangkan langsung di situs web mereka.

Setelah menyortir beranda mereka, tim mempelajari data kuantitatif dari Analitik Formulir VWO dan menyimpulkan bahwa mengurangi lebar formulir kontak dapat meningkatkan konversi pendaftaran. Variasi tersebut menghasilkan rasio konversi sebesar 11,26%, yang merupakan peningkatan sebesar 20% dari kontrol sebesar 9,37%.

Namun seperti yang mereka lakukan dengan halaman beranda, POSist membuat halaman kontak yang lebih berfokus pada konversi dan mengujinya dengan Variasi 1. Pengujian ini menghasilkan peningkatan konversi sebesar 7%, sedangkan dua pengujian halaman kontak meningkatkan rasio konversi sebesar 12% secara gabungan .

Dengan cara ini, perusahaan mendapatkan prospek 52% lebih banyak dalam sebulan! Ini menunjukkan bahwa pengujian berulang membantu Anda mengoptimalkan setiap celah kecil yang berkontribusi untuk meningkatkan pengalaman pengguna. Dan komitmen untuk pengujian berulang inilah yang memasukkan eksperimen ke dalam budaya organisasi.

Jangan berhenti tetapi putar rencana pengujian Anda

Semua kutipan 'tidak pernah menyerah' tentang kesuksesan yang kita baca saat tumbuh dewasa harus dipraktikkan dalam eksperimen sebanyak yang Anda lakukan dalam kehidupan nyata. Asalkan Anda ingin fokus pada kemenangan bisnis besar dalam jangka panjang. Oleh karena itu, memperoleh wawasan yang bermakna harus menjadi tujuan utama di balik setiap pengujian yang Anda jalankan, terlepas dari hasil yang dihasilkannya.

Tetapi untuk menapaki rute itu dengan percaya diri, pastikan Anda memiliki alat CRO yang andal. VWO adalah alat terbaik yang dapat membantu mendorong eksperimen dalam sistem nilai organisasi Anda dengan kemampuannya yang luar biasa namun mudah digunakan. Jadi, lain kali Anda menguji sebuah ide, nantikan untuk belajar dan membuat keputusan bisnis yang lebih cerdas. Selamat menguji!