网易首页 > 网易财经 > 正文

作为一个产品经理,该如何为试验想法排列优先级

0
分享至

(原标题:作为一个产品经理,该如何为试验想法排列优先级)

摘要: 通常我们经常挥舞着拳头拍着胸脯说“YOU CAN TEST ANYTHING!”,但是并不意味着所有的一切都需要测试,或者说我们需要找到一个适合开始的点来测试。

作为产品经理的你,一旦确定了你的试验目标和想要优化的KPI后,下一步要优先考虑的就是测试什么。

通常我们经常挥舞着拳头拍着胸脯说“YOU CAN TEST ANYTHING!”,但是并不意味着所有的一切都需要测试,或者说我们需要找到一个适合开始的点来测试。

通常,Google Analytics会提供大量的数据,从数据我们可以发现一些问题,但是若要这些数据变得更有价值,ab测试才是真正能带来最大收益的关键。

所以,基于数据的优先化测试将是产品经理为测试排序优先级的最宝贵资源。通常你会认为你的首页是你网站中最重要的区域。但是当你查看Google Analytics(分析)的“目标网页”报告时 ,你可能会看到许多不同的网页获得入口,有些甚至超过了你的首页。

当你把使用相同模板的所有网页的流量相加在一起后,你会发现得到了比网站首页还要多的流量。如果你需要确定测试站点范围模板布局的机会时,就可以查看模板级别上的数据。

优先考虑那些存在最大提升潜力的页面 

首先查找到那些效果极为不佳的网页。你的数据可以帮助你找到一些明显存在问题的页面,比如高跳出率的页面,但是有一些问题就表现的并不是那么明显。

如果你的问题是结算过程中购物车的放弃率过高,那么像GA这样的统计工具无法告诉你真正的原因,比如它不能帮助你发现你的访问者之所以放弃是因为很难从其他页面找到运费信息,所以他们才会继续走到结算流程看是否能找到他们想要的运费信息。

这个时候,你如果只是优化购物车的视图,那可能无法解决问题—你还需要查看你的产品和类别页面。

当你只查看一个页面的数据时,你的信息来源中的任何一个都不会帮你找到ab测试的机会,这个时候最好同时看几个页面。高退出率的页面——这是用户在离开你的网站前看到的最后一个页面,在GA它会显示在查看网页后立即离开网站的访问者的百分比。

高退出率的页面可以识别问题所在。转化漏斗由两部分组成:顶部漏斗和底部漏斗。我们也可以把顶部漏斗叫做说服端,底部漏斗叫做事务端。

顶部漏斗包括用户最常访问的页面比如首页,类别页面,产品页面。这些页面和区域是消费者对你的产品和服务最感兴趣的地方;底部漏斗是转化发生的地方—访客购买产品,注册并与你取得联系。

到目前为止,我们看过的大多数数据都集中在顶部漏斗,但是显然我们也要关注底部漏斗的转化。

查看下面渠道的跳出率:

GA的渠道分析侧重对底部漏斗的转化分析。如果你正确的设置了渠道,你可以从中获得有价值的测试信息。例如,查看上图渠道中突然下降的drop-off rates,如果结算区域只有18%的流量从步骤2进行到步骤3,那么在步骤2中就遇到了问题,找到出现的问题后,你应该问问自己为什么会出现这样的问题:

  • 访客在这个页面在寻找什么信息?
  • 有什么东西阻止了他们在网页上采取行动吗?
  • 他们期望在这个页面上看到什么信息?
  • 这些访客是从哪里过来的?
  • 他们没有足够的动力继续走下去吗?

以上这些问题的答案都可以通过试验来测试和验证你的想法。

当我们像上述讲述的那样定位到问题后,我们产生了几种不同的想法。现在我们就可以基于价值和成本来确定测试想法的优先级。

从高价值,低成本的测试想法开始。针对这种情况的一个例子就是测试结算页面中的相关区域或者变量,通常这个结算页面比它之前转化漏斗中的页面的放弃率都高。

优先测试重要的页面。你的用户最常访问的页面以及最热门的页面也是用于测试的最重要的页面。你可能已经发现了有些页面的效果远不及你之前预期的,但是如果他们没有大量且高质量的流量,你暂时可以先把他往后排一排。

流量高的页面最重要。你需要有较高流量的网页才能在合理的时间内完成试验。通常每月独立访客访问量超过30000的网页就可以在几周内达到统计显著。如果使用较低的流量,那可能就会需要较长的时间来运行,如果页面的转化率比较高,那可以相对缩短运行的时间。所以高流量的页面是首先考虑尽快安排测试的,你可以更快的进入下一个试验,这将加速你的优化迭代的过程。

费用高昂的页面。在两个具有相似流量的页面之间进行选择时,可以选择流量费用最高的页面来优先测试,以获得更好的投资回报率。

使用PXL优先级框架 

ConversionXL创建了自己的试验想法优先级模型,试图让使用者尽可能多地排除主观性,它是基于将数据带到表中的必要性。 这个模型被称为PXL,看起来像这样:

这个PXL框架不是帮我们猜测试验可能产生什么影响,而是要求我们提出一系列我们认为重要的问题,从而帮助我们给众多的测试想法进行优先级排序。

比如图示中第一列,罗列了三个试验想法:

  • 1. 重新组织并重写游览页面上的文案
  • 2. 颠倒主页内容块的顺序
  • 3. 增加移动端主体文案的字体大小

如果你无法同时让三个或者更多的测试想法同时进行试验,那么需要排列顺序。你需要问自己这样几个问题:

1. 更改是否在首位区域? →页面中折叠区域以上的内容的变化能被更多的人注意到,因此增加了测试具有影响的可能性。

2. 看用户响应时长在5秒内变化是否明显? →借助A/B测试,让一组用户看到原始版本,另一组看到测试版本,然后跟踪用户看到差异后5秒内有没有做响应?如果没有,这个改变可能有较少的影响。

3. 它是添加还是删除任何东西? →更大的变化比如消除干扰或添加关键信息往往会带来更大的影响。

4. 它能够刺激和提升用户的动机?

5. 试验是否在高流量页面上运行? →在高流量页面上的优化改进会产生更多的变现机会。还有一些变量特别要求您将数据带到表中以确定您的假设的优先级。

6. 它是否解决了通过用户测试发现的问题?

7. 它是否解决了通过定性数据反馈(调查,民意调查,访谈)发现的问题?

8. 它是否支持鼠标跟踪或眼动跟踪热图的假设?

9. 它是通过数字分析找到的见解吗?

将这四个问题带入到每周的试验讨论会中,可以避免每个人只是依赖主观意见来排序试验想法。

还有根据估计的时间通过包围答案易于实施的限制。理想情况下,您可以让测试开发人员参与优先级讨论。

根据权重系数为测试想法打分 

这是一个二进制的比例 ,你必须选择一个或另一个。 所以对于大多数变量(除非另有说明),产品经理可以通过ab测试选择0或1。

同时,某些变量也被加权,因为它们的重要性 – 变化是多么明显,如果添加/删除某些内容,且易于实现。 所以在这些变量上,我们具体说明事情如何变化。 例如,在“变化的可察觉性”变量上,您可以将其标记为2或0;或者在“实施的难易程度”上,可以标记2或0。

(文章节选自CXL的博客,原文链接https://conversionxl.com/how-to-build-a-strong-ab-testing-plan-that-gets-results/#step-2-prioritize-your-testing-opportunities)

更多精彩内容,关注钛媒体微信号(ID:taimeiti),或者下载钛媒体App

相关推荐
热点推荐
爆炸!日本汽车品牌纷纷选择奇瑞发动机,消费者的明智之选?

爆炸!日本汽车品牌纷纷选择奇瑞发动机,消费者的明智之选?

户外小阿隋
2024-04-26 15:27:52
“初代超模”李艾重返T台,1.2米黑丝大长腿被嘲不如瞿颖

“初代超模”李艾重返T台,1.2米黑丝大长腿被嘲不如瞿颖

红大娘娱乐
2024-04-26 00:15:55
不打了!基本确认季后赛报销!NBA超级状元正式倒下……

不打了!基本确认季后赛报销!NBA超级状元正式倒下……

篮球实战宝典
2024-04-26 06:22:01
向太陈岚浴室洗澡摔倒致大腿骨断裂,手术后自称“钢铁女侠”

向太陈岚浴室洗澡摔倒致大腿骨断裂,手术后自称“钢铁女侠”

红星新闻
2024-04-26 16:29:15
10万张“撮虾消费券”发放!五一假期来武汉实现“吃虾自由”

10万张“撮虾消费券”发放!五一假期来武汉实现“吃虾自由”

极目新闻
2024-04-26 19:58:56
我78岁风流才子和妙龄少妇同居两年后,她怀孕还发财了

我78岁风流才子和妙龄少妇同居两年后,她怀孕还发财了

叶天辰故事会
2024-04-23 22:26:35
到底什么情况?球迷称:成都蓉城打欧冠死亡之组的小组赛

到底什么情况?球迷称:成都蓉城打欧冠死亡之组的小组赛

侧身凌空斩
2024-04-26 10:29:38
防守稳固!皇马本赛季33轮联赛仅丢22球,队史同期第三少

防守稳固!皇马本赛季33轮联赛仅丢22球,队史同期第三少

直播吧
2024-04-27 06:56:48
事大了!苏纳克狂言:中国是“威权主义国家”,中方对其称呼变了

事大了!苏纳克狂言:中国是“威权主义国家”,中方对其称呼变了

乐阳聊军事
2024-04-26 10:22:18
13门海马斯火箭炮就位 200枚战役战术导弹下发:一准备切就绪

13门海马斯火箭炮就位 200枚战役战术导弹下发:一准备切就绪

聚峰军评
2024-04-26 17:36:25
爱妻和男朋友爬山失联,房号8203的红裤子大哥,好像都不太聪明

爱妻和男朋友爬山失联,房号8203的红裤子大哥,好像都不太聪明

听风听你
2024-04-26 14:08:35
台湾16个县市长反台独,赖清德公然以武拒统,支持台军挑战大陆

台湾16个县市长反台独,赖清德公然以武拒统,支持台军挑战大陆

说天说地说实事
2024-04-24 09:18:24
东莞奥特莱斯综合体要来了,总建面约16万㎡,计划明年开业

东莞奥特莱斯综合体要来了,总建面约16万㎡,计划明年开业

南方都市报
2024-04-24 17:18:08
泰山队客场1-0力克蓉城 崔康熙:队员战术执行非常完美

泰山队客场1-0力克蓉城 崔康熙:队员战术执行非常完美

闪电新闻
2024-04-27 00:01:32
清凉峰爬山后续:妻子已回家,有一点点擦伤,疑似不雅视频流出

清凉峰爬山后续:妻子已回家,有一点点擦伤,疑似不雅视频流出

田间农人阿馋
2024-04-26 11:56:25
巴萨官方:对欧冠1/4决赛客战巴黎时行纳粹礼的球迷终身禁赛

巴萨官方:对欧冠1/4决赛客战巴黎时行纳粹礼的球迷终身禁赛

懂球帝
2024-04-26 21:12:51
马德里大师赛:难破月亮球,再负普汀塞娃,郑钦文因伤退赛

马德里大师赛:难破月亮球,再负普汀塞娃,郑钦文因伤退赛

撒丁岛体育
2024-04-26 22:49:26
省卫健委原主任被查,力推50家高水平医院,其中5个院长落马

省卫健委原主任被查,力推50家高水平医院,其中5个院长落马

健识局
2024-04-26 21:09:29
又一因情绪失控面引发的惨剧,沈阳一男子当街捅人,现场触目惊心

又一因情绪失控面引发的惨剧,沈阳一男子当街捅人,现场触目惊心

小怪吃美食
2024-04-26 21:59:34
游泳综述:潘展乐46秒72超世界纪录,张雨霏、覃海洋携手夺冠

游泳综述:潘展乐46秒72超世界纪录,张雨霏、覃海洋携手夺冠

乒烧足篮排
2024-04-26 22:07:00
2024-04-27 07:22:44

财经要闻

贾跃亭,真他娘是个人才

头条要闻

官方回应环卫工用电子秤测灰尘:正常作业达标有奖励

头条要闻

官方回应环卫工用电子秤测灰尘:正常作业达标有奖励

体育要闻

皇社主帅:如果说谁配得上胜利那就是我们 很遗憾皇马活着逃出来

娱乐要闻

金靖回应不官宣恋情结婚的原因

科技要闻

车展观察|德系日系绝不能放弃中国市场

汽车要闻

2024北京车展 比亚迪的自驱力让对手紧追猛赶

态度原创

艺术
家居
手机
亲子
房产

艺术要闻

画廊周北京迎来第八年, “漂留” 主题聚集 30 余家艺术机构与 40 场展览

家居要闻

光影之间 空间暖意打造生活律动

手机要闻

系列首次,三星Galaxy Z Fold6 Ultra手机再现踪迹

亲子要闻

爸爸和儿子神对话,差点唠出危机,最后回答太机智了。

房产要闻

海南最新房价出炉,三亚跌价最猛!

无障碍浏览 进入关怀版
×