移动应用的最佳 A/B 测试工具

已发表: 2017-02-21

ab-testing-mobile-apps

A/B 测试工具起源于网页设计,其背后的概念很简单。

例如,您有一个网站,其首页旨在吸引访问者购买商品。 销售额没有达到您希望的水平,因此您需要关注可能会提高转化率的潜在变化。

假设您确定“购买”按钮太小。 然后,您将制作具有更大按钮的网页变体。 当访问者访问您的站点时,他们将被随机重定向到两个版本之一:版本 A,即原始站点,或版本 B,其中包含新设计的按钮。

一段时间后,您分析结果以查看效果更好的方法。 如果变体提高了销量,那么它将成为您的新主页。

这是一个简化的解释,其中最重要的一点是 A/B 测试不仅仅与网页有关。 它也是测试移动应用程序的完美工具——尤其是当应用程序的目的是作为移动店面工作时。

但是在移动设备上进行测试还有一个额外的挑战——实际上是将更改推送给您的用户。

在网络上,这很容易:在服务器上进行更改,之后访问的任何人都将获得新内容。 但是,这如何在用户下载并存在于他们的设备上的应用程序上发挥作用呢? 拥有资源的大公司可以构建硬件和软件基础架构,以立即推动应用程序内容的变化,但小企业该怎么办? 此外,当您谈论应用程序中的多个页面或应用程序的多个版本(具体取决于硬件)时,管理变体测试可能会很快失控。

[旁注:那些在家里玩“有一个应用程序”的饮酒游戏的人应该准备好喝掉你选择的成人饮料,因为它会发生。]

A/B 测试只有在正确执行时才有效。 你是怎么做到的? 好吧,即使在移动应用程序测试领域,也有一个应用程序可以做到这一点。 几个,实际上。 看看这五种不同的应用程序工具帮助您充分利用移动渠道。

1.优化

clip_image002

任何 A/B 测试工具的核心都是能够即时更改应用程序的 UI; 如果您不得不等待人们更新应用程序以部署变体,那么测试将是一场噩梦。

当您想要立即对用户界面进行美学更改时,这非常有用,可能是为了纠正错误或为外观添加一些季节性风格(想想假期)。 Apptimize 将此称为“实时更新”,它是将测试变体推送给特定用户的引擎。

对于更复杂的任务,该应用程序可以让您深入了解并开始调整或删除整个代码块——但正是实时更新功能使该工具在竞争中脱颖而出。

这是因为,尽管它对 A/B 测试很有用,但 Apptimize 允许您将其用作更改应用程序界面的机制,并立即推送给用户。 如果您想对 UI 进行临时更改——例如添加节日主题,或引起对 24 小时促销的关注——Live Update 可以满足您的需求。

Apptimize 不只是管理您的测试——它创建它们并处理部署。

用户友好的界面使您可以轻松跟踪创建测试期间的所有更改。

通常,在部署变体时必须进行很多幕后编码——开发人员需要知道他们的代码的哪些部分已被更改以进行测试,这意味着要检查该代码并手动标记每个已更改的部分.

使用 Apptimize,所需的时间从等式中删除。 只需进行您想要看到的更改,Apptimize 会处理其他一切。 这种对节省编码人员时间和头痛的关注是它出现在这个列表中的一个重要原因。

Apptimize 为其服务提供两种不同级别的订阅,其中不仅仅是 A/B 测试。

小企业主会很高兴得知较小计划的测试组件没有限制。 设计、部署和分析变体所需的一切都包含在较低级别的计划中,以及实时更新和功能标记(有利于监控新版本的推出)。

2.丙酮

这些测试工具都依赖于即时、无缝地向用户推送更新的能力。 A/B 测试只是一种可能性,其功能集通常遵循规定的公式。

Azetone 的功能和您发现的一样齐全,它甚至与推送通知平台集成,但他们的服务的不同之处在于他们如何利用实时更新应用程序的能力。

使用 Azetone,您可以对高度个性化的用户体验进行 A/B 测试。 找出在特定城市有效的内容,然后创建当用户在该城市时动态提供的内容。 可以根据用户的个人资料对用户进行个性化设置,并且 Azetone 与第三方 CRM 平台集成以提供更深入的见解。

不过,Azetone 最大的卖点可能是它的分析引擎。

当然,它提供了有关转化率的数据,甚至可以根据用户人口统计数据、设备类型、位置以及您所期望的所有条件进一步细分这些数据。

Azetone 的分析最令人印象深刻的是,甚至在您运行第一次 A/B 测试之前,它们就可以提供帮助。 只需告诉它您希望它监视的应用程序中的页面,然后让软件工作一段时间。 很快,您将收到带有热图的详细报告,显示每个页面上最紧迫/滚动/缩放/等的区域。 正在发生。 除了这些人们正在点击的地方的视觉表示之外,还有一份详细的报告,将其全部归结为可操作的数字。

clip_image004

这种对人们如何使用您的应用程序的洞察力非常宝贵,甚至可以为您指出您可能想要进行测试的各种变体的方向。

对于很多企业来说,他们没有钱投资焦点小组研究,也没有时间开发和分析反馈问卷。 Azetone 先发制人地解决您甚至不知道自己遇到的 UI 问题,然后可以测试可能解决这些问题的变体。 Azetone 的这一方面使其在竞争对手中脱颖而出。

3.瘦肉

Leanplum 将自己定位为推动移动参与的平台,当然具有支持这一点的功能。

它的A/B测试模块更准确的应该叫做ABCDEFGHIJKLM(you get the idea)测试。 该工具对多种变体组合(多变量测试)的支持只会增加一层混乱,如果不是为了理解所有这些的综合报告。

Leanplum 以其他工具从未尝试过的方式简化了复杂的多次迭代测试,并以一种即时不稳定的方式将所有数据呈现给用户。

clip_image006

Leanplum 推动参与的使命的核心是其集成的消息传递功能。

有了它,多个渠道——包括应用内消息、弹出窗口、推送通知和电子邮件——可以在 Leanplum 内部进行管理,并紧密地融入其测试和报告中。

它收集了大量关于每个渠道(以及该渠道中的每条消息)在吸引和留住客户方面的有效性的数据。 但它还不止于此,它通过在个人层面上自动发送消息并响应用户行为。

例如,如果有人一直在查看一件绿色连衣裙但从未购买,那么如果价格下降,则可以发送友好的推送通知或电子邮件。 这种自动化可以跨用户扩展,从而产生自动化的电子邮件营销活动和旨在吸引用户回来的应用程序内消息。当然,所有这些都可以进行测试。

“你已经有了数据,还不如根据它采取行动”的态度使 Leanplum 成为如此有吸引力的选择。

4.分裂力

Splitforce 是列表中第一个采用“做一件事并做好它”理念的公司,除了 A/B 测试工具外,它不提供任何东西——但他们确实做得很好。

与此列表中的其他人一样,Splitforce 无需编码即可进行修改。 非技术设计师可以轻松调整 UI,甚至可以打开和关闭所有功能。 同时,编码人员可以使用自定义元素并测试全新代码以获取游戏的新功能或新关卡等内容。

clip_image008

所有测试的背后是 Splitforce 的数据分析,其背后的想法实际上涉及一些相当令人兴奋的概率和统计概念,这些概念太无聊了,无法在这里解释。 可以这么说,Splitforce 采用了一种机器学习算法,可以通过不断增加的数据点数量不断优化其分析。

控制组 A 和变体 B 之间的转化率差异可能只有几个百分点——从本质上讲,这在人眼看来是一次统计上的掷硬币。 Splitforce 对每个变体性能的内部深入研究允许更早地发现最弱的变体,并开始自动修剪它们并将用户转移到表现更好的变体。

好消息是,到实验结束时,将有一些非常有说服力且无可争辩的数据,无论是哪种方式,关于测试完成后哪些变体有效。

更好的是,通过从池中消除弱变体并将用户转移到性能更好的变体,测试软件实际上在实验仍在运行时推动了转换和保留。没有人需要做任何事情来实现这一点,并且没有其他测试工具拥有这种智能。

Splitforce 在这方面脱颖而出,实际上在您有机会分析每个变体性能之前就改进了您的应用程序。

5.转弯

Swrve 背后的概念是并非所有用户都是平等创建的。 这也不仅仅是品味和偏好的问题——某人在客户生命周期中所处的位置也应该决定他们收到的内容。

这是使 Swrve 独一无二的功能:一套基于这些生命周期标准的针对用户的消息传递和参与工具。 换句话说:一位喜欢毛衣的 30 岁女性刚刚下载了您的服装应用程序,不应该收到与她已经是常客的人口统计双胞胎相同的消息。 在生命周期的不同阶段,他们将需要不同类型的外展活动。

从入门到货币化,Swrve 的高级测试工具将向您展示如何改进您的应用程序以增加注册、参与和销售。

clip_image010

Swrve 维护着一个包含各种揭示性 KPI 的数据库:内置的收据验证系统确保收入数据真实反映您的应用程序或活动的成功; 用户体验数据(例如每位用户的会话次数或每次会话的平均时间)准确展示了人们使用您的应用程序的方式和时间; 可自定义的漏斗报告显示应用程序工作流程中您实际流失用户的位置,这些点将受益于良好的 A/B 测试。

所有这些数据都用于不断为每位用户提供个性化的应用体验,以便他们收到他们可能会回复的消息,以及他们可能会接受您的优惠。 Swrve 提供的见解和数据可让您与客户进行更个性化的互动,成为可用的顶级测试工具之一。

结论

您可以从这个列表中看到,A/B 测试不仅仅是将一些东西扔到世界上然后看看什么有效。

就其本身而言,这是一种不断完善您的应用程序以使其成为人们希望在其设备上拥有的东西的有效方法。 您的应用程序与每个用户最近的体验​​一样好。

停滞不前的应用程序,或者在被允许进入应用程序商店之前更新停留在审核中的应用程序,都有失去用户的风险。 通过比以往任何时候都更快地进行更改、测试、个性化和分析,您可以确保留住最初努力争取的用户。 快速迭代周期被证明是应用程序长期成功的关键,因为他们永远没有机会变成静态的。 他们正忙于改进。

虽然这种发展战略过去属于拥有资源支持的大公司,但现在已不再如此。 此处介绍的应用程序工具也让小型企业有机会测试他们的长寿之路。

精选相关文章:

  • 关于营销移动应用程序您需要了解的一切
  • CTA 如何大幅增加您的移动应用程序的下载量
  • 应避免的 5 个 App Store 优化错误