如何为实验选择合适的工具作者:托马斯·莱特曼(Thomas Leitermann) “产品人员-产品经理,产品设计师,UX设计人员,UX研究人员,业务分析师,开发人员,制造商和企业家 August 08 2019 真正 实验,MTP参与汉堡2019,产品管理,产品管理工具, 注意产品 介意产品有限公司 991 产品管理 3.964

如何为实验选择合适的工具作者:托马斯·莱特曼(Thomas Leitermann)

通过 ON

准备开始实验了吗?现在只需要找到合适的工具?但是选择哪一个呢?感觉就像在丛林中,工具在工具上–如何应对这种情况?

在汉堡MTP Engage的演讲中,我分享了过去两年我在Inovex进行的众多实验中的一些经验教训和实例。我将研究如何从错误中吸取教训,了解使用当今工具的便捷程度,并了解为什么我认为实验比A / B测试还重要。

包装宝藏地图和指南针

为进行实验而进行实验是在浪费时间和金钱。我们应该永远知道为什么要进行实验–我们的目标是什么?我们怎么知道我们已经实现了目标?为了构建众多的假设和构想,并思考成功的模样以及如何衡量成功,Inovex开始依赖于 测试卡 from Strategyzer.

  • 它是我们丛林探险的宝藏地图。在此上面,我们收集了所有重要信息以浏览工具丛林。测试卡上定义的度量标准为我们提供了指南针,为我们提供了决策依据。

选择正确的弯刀

在选择实验类型时,我们发现了两个约束。我们的假设是生成性的还是评估性的?而且,与我们拥有的时间相比,我们的证据需要有多强?

当我们的假设是可生成的时,它要么与客户群有关,要么与解决方案有关。如果我们的假设是可评估的,那么它要么是关于收入和支付意愿,要么是接受解决方案。这种定位决定了我们可以使用的实验类型。例如,我们可以从各种各样的实验中进行选择。从30种以上的实验类型中 真正的创业书.

一旦我们找到了既符合我们的假设又符合我们所需的证据强度的实验类型,我们就需要找到时间和预算以进行启动。

  • 对于丛林探险,这意味着我们现在可以打包弯刀,这是一种可以帮助我们穿越丛林工具的实验类型。可以将时间和预算视为丛林探险的食物和水。

准备好出发?– Almost

现在我们已经拥有所有必需品,可以出发了,对吧?在深入探究工具丛林的未知世界之前,我将提供一些从以前的探险中获得的知识。

根据我的经验,实验有助于实施 – hopefully old –口号“您不是用户”。实验不是根据假设构建最终产品功能,而是帮助我们揭示这些功能。通过实验,我们可以向生活在丛林中的人们学习– our users.

为了向我们的用户公开和学习,我们首先需要与他们联系。自动招募用户进行研究和测试非常有帮助。有很多有用的工具可用于查找,获取,安排和设置用户进行研究。有了这些,我们就可以将我们的用户研究招聘放到自动驾驶仪上。

  • 在丛林中,我们可以使用地图和指南针导航–但是GPS设备可以使我们更快地达到目标。

越简单越好– 和 Faster

寻找工具时’轻松找到最佳,最简单或最新的工具。在Inovex上,我们曾经花了很多天在第一个工具在很小但很重要的部分使我们失败之后,在新工具上重建了实验。因此,最好总是选择最简单的工具。代替高保真原型制作工具–为什么不使用Keynote或PowerPoint?简单的工具还有一个额外的好处,那就是每个人都应该了解它们。因此,可以快速进行最新更改,而不会成为瓶颈。

  • 如果您在丛林中想要砍柴,那么可以使用电锯。但是斧头也能完成工作,并且永远不会耗尽燃料。

用户测试您的用户测试工具

有许多出色的工具可用来帮助我们了解实验中的用户行为,例如Hotjar,Mixpanel或Amplitude。他们还有助于衡量我们的指标,即我们的实验指南针。为了能够依赖指标,我们需要确保端到端地测试工具。只有这样,我们才能确定他们有能力提供所需的指标。
在Inovex,我们很难学到这一点。我们进行了两天的实验,然后发现该工具无法生成所需的指标。只有切换工具并重新运行实验,我们才能回答我们的实验假设。

  • 在进行为期多天的丛林探险之前,’住一晚可能更好。确保您的用户测试和测量工具可以保留一名用户。

在实验中迭代

实验开始后,别无选择,只能等待,对吧?我会另辟argue径。第一次使一切正确的可能性可以忽略不计。我相信在实验中也应该使用众所周知的检查和适应敏捷座右铭。在Inovex进行的一项实验中,我们设置了广告来吸引整个晚上的流量,然后在早上检查结果并确定问题,在下午进行更改并在晚上重新开始循环。

  • 第一次打火石很少见–但是如果我们进行检查和调整,就能在丛林中过夜的过程中迅速解散。

通过工具丛林找到一条路

装备了以前的探险经验以及配有藏宝图,指南针,砍刀和补给品的背包,我相信这条路可以穿越丛林。

可以从这次谈话中找到幻灯片 这里(英语) and 在这里(德语).