移動應用的最佳 A/B 測試工具

已發表: 2017-02-21

ab-testing-mobile-apps

A/B 測試工具起源於網頁設計,其背後的概念很簡單。

例如,您有一個網站,其首頁旨在吸引訪問者購買商品。 銷售額沒有達到您希望的水平,因此您需要關注可能會提高轉化率的潛在變化。

假設您確定“購買”按鈕太小。 然後,您將製作具有更大按鈕的網頁變體。 當訪問者訪問您的站點時,他們將被隨機重定向到兩個版本之一:版本 A,即原始站點,或版本 B,其中包含新設計的按鈕。

一段時間後,您分析結果以查看效果更好的方法。 如果變體提高了銷量,那麼它將成為您的新主頁。

這是一個簡化的解釋,其中最重要的一點是 A/B 測試不僅僅與網頁有關。 它也是測試移動應用程序的完美工具——尤其是當應用程序的目的是作為移動店面工作時。

但是在移動設備上進行測試還有一個額外的挑戰——實際上是將更改推送給您的用戶。

在網絡上,這很容易:在服務器上進行更改,之後訪問的任何人都將獲得新內容。 但是,這如何在用戶下載並存在於他們的設備上的應用程序上發揮作用呢? 擁有資源的大公司可以構建硬件和軟件基礎架構,以立即推動應用程序內容的變化,但小企業該怎麼辦? 此外,當您談論應用程序中的多個頁面或應用程序的多個版本(具體取決於硬件)時,管理變體測試可能會很快失控。

[旁注:那些在家裡玩“有一個應用程序”的飲酒遊戲的人應該準備好喝掉你選擇的成人飲料,因為它會發生。]

A/B 測試只有在正確執行時才有效。 你是怎麼做到的? 好吧,即使在移動應用程序測試領域,也有一個應用程序可以做到這一點。 幾個,實際上。 看看這五種不同的應用程序工具幫助您充分利用移動渠道。

1.優化

clip_image002

任何 A/B 測試工具的核心都是能夠即時更改應用程序的 UI; 如果您不得不等待人們更新應用程序以部署變體,那麼測試將是一場噩夢。

當您想要立即對用戶界面進行美學更改時,這非常有用,可能是為了糾正錯誤或為外觀添加一些季節性風格(想想假期)。 Apptimize 將此稱為“實時更新”,它是將測試變體推送給特定用戶的引擎。

對於更複雜的任務,該應用程序可以讓您深入了解並開始調整或刪除整個代碼塊——但正是實時更新功能使該工具在競爭中脫穎而出。

這是因為,儘管它對 A/B 測試很有用,但 Apptimize 允許您將其用作更改應用程序界面的機制,並立即推送給用戶。 如果您想對 UI 進行臨時更改——例如添加節日主題,或引起對 24 小時促銷的關注——Live Update 可以滿足您的需求。

Apptimize 不只是管理您的測試——它創建它們並處理部署。

用戶友好的界面使您可以輕鬆跟踪創建測試期間的所有更改。

通常,在部署變體時必須進行很多幕後編碼——開發人員需要知道他們的代碼的哪些部分已被更改以進行測試,這意味著要檢查該代碼並手動標記每個已更改的部分.

使用 Apptimize,所需的時間從等式中刪除。 只需進行您想要看到的更改,Apptimize 會處理其他一切。 這種對節省編碼人員時間和頭痛的關注是它出現在這個列表中的一個重要原因。

Apptimize 為其服務提供兩種不同級別的訂閱,其中不僅僅是 A/B 測試。

小企業主會很高興得知較小計劃的測試組件沒有限制。 設計、部署和分析變體所需的一切都包含在較低級別的計劃中,以及實時更新和功能標記(有利於監控新版本的推出)。

2.丙酮

這些測試工具都依賴於即時、無縫地向用戶推送更新的能力。 A/B 測試只是一種可能性,其功能集通常遵循規定的公式。

Azetone 的功能和您發現的一樣齊全,它甚至與推送通知平台集成,但他們的服務的不同之處在於他們如何利用實時更新應用程序的能力。

使用 Azetone,您可以對高度個性化的用戶體驗進行 A/B 測試。 找出在特定城市有效的內容,然後創建當用戶在該城市時動態提供的內容。 可以根據用戶的個人資料對用戶進行個性化設置,並且 Azetone 與第三方 CRM 平台集成以提供更深入的見解。

不過,Azetone 最大的賣點可能是它的分析引擎。

當然,它提供了有關轉化率的數據,甚至可以根據用戶人口統計、設備類型、位置以及您所期望的所有條件進一步細分轉化率。

Azetone 的分析最令人印象深刻的是,甚至在您運行第一次 A/B 測試之前,它們就可以提供幫助。 只需告訴它您希望它監視的應用程序中的頁面,然後讓軟件工作一段時間。 很快,您將收到帶有熱圖的詳細報告,顯示每個頁面上最緊迫/滾動/縮放/等的區域。 正在發生。 除了這些人們正在點擊的地方的視覺表示之外,還有一份詳細的報告,將其全部歸結為可操作的數字。

clip_image004

這種對人們如何使用您的應用程序的洞察力非常寶貴,甚至可以為您指出您可能想要進行測試的各種變體的方向。

對於很多企業來說,他們沒有錢投資焦點小組研究,也沒有時間開發和分析反饋問卷。 Azetone 先發製人地解決您甚至不知道自己遇到的 UI 問題,然後可以測試可能解決這些問題的變體。 Azetone 的這一方面使其在競爭對手中脫穎而出。

3.瘦肉

Leanplum 將自己定位為推動移動參與的平台,當然具有支持這一點的功能。

它的A/B測試模塊更準確的應該叫做ABCDEFGHIJKLM(you get the idea)測試。 該工具對多種變體組合(多變量測試)的支持只會增加一層混亂,如果不是為了理解所有這些的綜合報告。

Leanplum 以其他工具從未嘗試過的方式簡化了複雜的多次迭代測試,並以一種即時不穩定的方式將所有數據呈現給用戶。

clip_image006

Leanplum 推動參與的使命的核心是其集成的消息傳遞功能。

有了它,多個渠道——包括應用內消息、彈出窗口、推送通知和電子郵件——可以在 Leanplum 內部進行管理,並緊密地融入其測試和報告中。

它收集了大量關於每個渠道(以及該渠道中的每條消息)在吸引和留住客戶方面的有效性的數據。 但它還不止於此,它通過在個人層面上自動發送消息並響應用戶行為。

例如,如果有人一直在查看一件綠色連衣裙但從未購買,那麼如果價格下降,則可以發送友好的推送通知或電子郵件。 這種自動化可以跨用戶擴展,從而產生自動化的電子郵件營銷活動和旨在吸引用戶回來的應用程序內消息。當然,所有這些都可以進行測試。

“你已經有了數據,還不如根據它採取行動”的態度使 Leanplum 成為如此有吸引力的選擇。

4.分裂力

Splitforce 是列表中第一個採用“做一件事並做好它”理念的公司,除了 A/B 測試工具外,它不提供任何東西——但他們確實做得很好。

與此列表中的其他人一樣,Splitforce 無需編碼即可進行修改。 非技術設計師可以輕鬆調整 UI,甚至可以打開和關閉所有功能。 同時,編碼人員可以使用自定義元素並測試全新代碼以獲取遊戲的新功能或新關卡等內容。

clip_image008

所有測試的背後是 Splitforce 的數據分析,其背後的想法實際上涉及一些相當令人興奮的概率和統計概念,這些概念太無聊了,無法在這裡解釋。 可以這麼說,Splitforce 採用了一種機器學習算法,可以通過不斷增加的數據點數量不斷優化其分析。

控制組 A 和變體 B 之間的轉化率差異可能只有幾個百分點——從本質上講,這在人眼看來是一次統計上的擲硬幣。 Splitforce 對每個變體性能的內部深入研究允許更早地發現最弱的變體,並開始自動修剪它們並將用戶轉移到表現更好的變體。

好消息是,到實驗結束時,將有一些非常有說服力且無可爭辯的數據,無論是哪種方式,關於測試完成後哪些變體有效。

更好的是,通過從池中消除弱變體並將用戶轉移到性能更好的變體,測試軟件實際上在實驗仍在運行時推動了轉換和保留。沒有人需要做任何事情來實現這一點,並且沒有其他測試工具擁有這種智能。

Splitforce 在這方面脫穎而出,實際上在您有機會分析每個變體性能之前就改進了您的應用程序。

5.轉彎

Swrve 背後的概念是並非所有用戶都是平等創建的。 這也不僅僅是品味和偏好的問題——某人在客戶生命週期中所處的位置也應該決定他們收到的內容。

這是使 Swrve 獨一無二的功能:一套基於這些生命週期標準的針對用戶的消息傳遞和參與工具。 換句話說:一位喜歡毛衣的 30 歲女性剛剛下載了您的服裝應用程序,不應該收到與她已經是常客的人口統計雙胞胎相同的消息。 在生命週期的不同階段,他們將需要不同類型的外展活動。

從入門到貨幣化,Swrve 的高級測試工具將向您展示如何改進您的應用程序以增加註冊、參與和銷售。

clip_image010

Swrve 維護著一個包含各種揭示性 KPI 的數據庫:內置的收據驗證系統確保收入數據真實反映您的應用程序或活動的成功; 用戶體驗數據(例如每位用戶的會話次數或每次會話的平均時間)準確展示了人們使用您的應用程序的方式和時間; 可自定義的漏斗報告顯示應用程序工作流程中您實際流失用戶的位置,這些點將受益於良好的 A/B 測試。

所有這些數據都用於不斷為每位用戶提供個性化的應用體驗,以便他們收到他們可能會回复的消息,以及他們可能會接受您的優惠。 Swrve 提供的見解和數據可讓您與客戶進行更個性化的互動,成為可用的頂級測試工具之一。

結論

您可以從這個列表中看到,A/B 測試不僅僅是將一些東西扔到世界上然後看看什麼有效。

就其本身而言,這是一種不斷完善您的應用程序以使其成為人們希望在其設備上擁有的東西的有效方法。 您的應用程序與每個用戶最近的體驗一樣好。

停滯不前的應用程序,或者在被允許進入應用程序商店之前更新停留在審核中的應用程序,都有失去用戶的風險。 通過比以往任何時候都更快地進行更改、測試、個性化和分析,您可以確保留住最初努力爭取的用戶。 快速迭代周期被證明是應用程序長期成功的關鍵,因為他們永遠沒有機會變成靜態的。 他們正忙於改進。

雖然這種發展戰略過去屬於擁有資源支持的大公司,但現在已不再如此。 此處介紹的應用程序工具也讓小型企業有機會測試他們的長壽之路。

精選相關文章:

  • 關於營銷移動應用程序您需要了解的一切
  • CTA 如何大幅增加您的移動應用程序的下載量
  • 應避免的 5 個 App Store 優化錯誤