下载我们的免费电子书43 A / B检测案例研究,从世界领先的公司寻找考试创意和灵感。 现在下载

优化博客

构建您的实验计划的提示和技巧



要有一个成功的实验计划,你必须开始“目标是什么?“你的成长和实验努力。这对我来说很强调 优化当我们的联合创始人Dan Siroker刚刚在几个星期内时说:“实验领导者选择重要的指标。” 

了解您最重要的目标对于定义指标来影响通过实验来驾驶的衡量标准和其他行为至关重要。许多公司知道这一顶级KPI,如收入或DAU(日常活跃的用户),所以我们可以问“我可以通过关键页面上的实验推动哪些指标和行为来移动这些顶级目标?”。 框架 我看到有效地定义输入和输出指标。   

让我们定义输入和输出度量之前的意思: 

  • 输出指标 –这些是您的最终目标以及您主要针对您的产品或经验衡量成功(例如,对于零售应用程序,它将购买,收入,也许忠诚度账号注册)
  • 输入指标 –这些是您的用户所采用的操作,这是成功的好指标,以推进输出指标(例如,对于同一零售应用程序,它可能是每次会话中查看的平均产品数量或应用内搜索率)

使用此框架有助于定义推送主要输出度量的行为。  

作为一个例子,让我们来看看一个想要增加它的忠诚度计划的注册的零售客户,输入和输出指标可能看起来像下面的东西。

当您为自己的指标考虑这一点时,您应该尽可能地宽阔地使这种观点。贡献对输出指标的成功的所有行为是什么?从那里开始,您可以开始向数据通知的问题提出要创建 问题陈述 并概述您的个别实验的测量计划。 

对这个全面思考可能是一个挑战。我发现有用的是概述页面级别的输入和输出指标,以获得最重要的客户旅行朝您的主要输出指标。再次使用零售作为一个例子,为客户购买的主要旅程是什么?概述该旅程中每个页面的页面级别输出度量,以及所有特定页面输入指标。这是耐克(或任何零售商)如何为其产品细节页面接近这一点。

所有可以推动此页面主动动的贡献操作

如您所见,本产品详细信息页面的主要目标和输出度量标准是客户执行添加到购物车,但滚动深度,图像交互和属性选择的行为是输入指标,帮助客户朝向输出度量移动。总之,来自主要入口点(例如产品类别页面)的完整用户旅程将为每个页面具有相同的站点输出指标,但不同的页面级别。 

在与客户交谈时,我经常得到问题“页面输出度量应该是什么?”我喜欢转介 来自Avinash Kaushik的这个博客帖子避免了Web Analytics错误 并简单地问:“为什么这个页面存在?”它应该有助于让用户更接近主输出指标。基于它用于将客户移动到的哪一步,这是您的页面输出度量!您可以在下面的网站上看到由页面构建的示例用户旅程,继续使用我们的零售示例。 

用户旅程,重点关注旅程中每个页面的输出度量标准及其支持输入指标

当您通过实验更改产品和经验时,您的输入指标可能会转变,因此重新评估您的输入和输出指标和整体用户之旅很重要。我建议至少每年进行重新映射。 

您是否完成了用户旅程映射或输入/输出度量映射?您在此过程中使用的任何最佳实践?推特美国 @Optimizely..

准备升级您的实验实践? 今天到达我们。

优化X.