一种可帮助您为产品选择最佳创意的工具。

假设您正在管理一种产品，该产品可以帮助小型企业向其客户提供技术支持。 您正在寻找增加客户参与度和保留率的方法。 您有两个想法：

• 仪表板，使企业所有者可以监视参与统计信息。
• 一个聊天机器人，可帮助企业主自动与消费者进行交流。

仪表板是已经与用户讨论过多次的功能，您认为它具有巨大的潜力，但是您也意识到只有一个大用户使用仪表板的风险。 Chatbot使公司的所有员工感到愉快，并受到管理层的推动-对于客户来说，这似乎是非常必要的事情，这是一个很酷的项目。 是的，聊天机器人现在很流行。

您选择什么？

这些优先级问题是产品管理的核心。 错误选择错误的代价可能会很高：开发成本+生产部署成本+支持成本+利润损失成本+所有其他成本。

我们经常倾向于根据微弱的信号做出决定：多数人的声音，权威人士的意见（ HiPPO ），行业趋势等，但是，正如经验所表明的那样，这是一种错误的启发式方法，这种方法并不比扔硬币好。

在本文中，我将说明什么是寻找好的想法的最佳方法。 此方法包括三个组件：

• ICE比率
• 置信度
• 增量验证

ICE比率

ICE系数的计算是肖恩·埃利斯 （ Sean Ellis）发明的一种优先方法， 肖恩·埃利斯是帮助发展DropBox，Eventbrite和“增长黑客”等公司的人 。 ICE系数的计算最初是为了优先进行生长实验，但也可以应用于任何其他想法。

您可以使用以下公式计算每个构想的系数：

ICE = Impact () * Confidence () * Ease (),

其中：

• 影响力是对一个想法将如何积极影响您要改进的关键指标的评估。
• 简单性（实现）是对实现一个想法将需要多少努力和资源的评估。 这是经典的人工成本估算（以人周为单位）的反面-付出的努力越少，简单性就越高。
• 信心-表示我们对将提供什么样的影响力充满信心，并且在某种程度上讲实施的简单性。 我写了整篇文章， 解释了为什么按劳动和价值进行优先排序不起作用 。 [ 本文在Habré上的翻译 ]。 简而言之，底线是我们所有人的估算都非常差，天真地对此并不怀疑。 信心是一种解药，它可以帮助我们更准确地进行假设。

这三个指标均填充了从1到10的相对标度值，因此没有一个被高估。 每个团队自己确定指标1-10与什么相对应，以便每个等效项都适用。 最终，评估的目的是获得一个类似于以下内容的“想法库”：

让我们看一个例子，看看它是如何工作的。

ICE的第一个版本

您决定计算两个想法的ICE系数-仪表板和聊天机器人。 在早期阶段，您将根据自己的直觉使用总值。

影响-您假设仪表板将显着增加保留率，但仅对某些用户而言，因此将10个中的5个放置。另一方面，Chatbot可能会影响大量用户，因此您将10个中的8个放置。

简单性-您相信仪表板将需要10个工作日的开发时间，而聊天机器人则需要20个开发人员周-仅基于以前类似项目的数据进行开发。 稍后，您会从开发团队获得更好的成绩，但是现在，使用此简单表（与团队一起编译）将成绩转换为Simplicity参数值：

结果，仪表板的Simplicity值等于10（共4个），聊天机器人得到2。

我们考虑信心指标

只有一种方法来计算置信度-查看支持性证据。 为此，我创建了一个工具，该工具描述了类型测试和您可能拥有的证据，以及它们拥有的Confidence参数的值。 使用此工具时，请考虑已经拥有的工件，有多少工件以及需要做些什么才能获得更多价值。

图片文字-置信度：

• 大约为零：
  
  • 自信。
  • 简报
  • 主题支持-与愿景/策略，当前趋势/流行语，外部研究，宏观趋势，产品方法学保持一致。
• 非常低：
  
  • 有人认为，团队，管理层，外部专家，投资者，媒体，其他人都认为这是一个好主意。
  • 评估和计划-餐巾纸的计算，可行性评估，项目时间表，业务模型。
• 低-非官方证据：基于产品数据的多个方面，频繁的销售请求，1-3个感兴趣的客户，一些竞争对手已经具备了这一点...
• 中低：
  
  • 市场数据-基于调查，烟雾测试的证据，所有竞争对手都已经具备了这一点...
  • 用户/客户的证据-基于大量产品数据，顶级用户的要求，对20多个用户的采访，可用性研究结果，MVP启动结果。
• 中-测试结果：基于长期的用户研究，更大规模的MVP发布结果，alpha，beta版本，A / B实验。
• 高-启动后的数据。

注意事项 如果您的产品或行业中使用了其他证据，则可以创建自己的版本的Confidence Tool，只需考虑什么是强证据，什么是弱证据。 有关更多信息，请参见之前的文章 。

让我们回到示例中，看看“行动中的信心工具”。

• 支持聊天机器人的证据：您的自信（您认为这是一个好主意），主题支持（业界认为这是一个好主意）和其他人的意见（您的领导人和同事认为这是一个好主意）。 这使您的最终置信度值为0.1（十分之十），即 接近零。 该工具显然不会将意见视为可靠的指标。 有趣
• 对于仪表板，有以下证据：自信（您认为这是个好主意），非官方证据（少数客户已要求这样做）。 实际上，这会将置信度值提高到十分之0.5，这意味着置信度较低。 不幸的是，用户不能很好地预测其未来的行为。

ICE系数的计算：

图片中的文字：沿Y轴-ICE得分，沿X轴-优先级回合。 蓝点是仪表板，红点是聊天机器人。

目前，仪表板看起来是一个更合适的主意，但该工具显示可信度很低。 到目前为止，根本没有足够的信息来做出决定。

评估和可行性检查

接下来，您将与开发和UX的同事会面，然后一起讨论这两种想法。 乍看之下，这两个项目都很可行。 开发人员的回报率大约是人工估算值：仪表板启动需要12个人周，而聊天机器人则需要16。根据您的“简单性”量表，这分别表示指标4和3。

同时，您在餐巾纸上进行计算并更新“影响力”列。 仔细检查后，仪表板的前景似乎不太乐观，获得了3。聊天机器人看上去仍然可靠，为8。

使用置信度工具显示，这两个构想现在都通过了“评估和计划”测试，并获得了置信度参数的新指标。 信息中心现在有0.8，聊天机器人-0.4。

因此，聊天机器人消除了差距。 但是，出于充分的原因，置信度仍然很低-这些主要是从空中获得的数据，您了解需要收集更多的证据。

市场数据

您向当前用户发送了带有调查的问卷，要求他们选择5种潜在功能之一，该列表包括聊天机器人和仪表板。 您会得到数百个答案。 结果对于聊天机器人非常正面-这是功能1，38％的受访者选择了它。 资讯主页以17％的选票排名第三。

这给这两个功能都提供了对市场数据的支持，但是聊天机器人的指标更高-1.5。 信息中心的Confidence列的值也增加了，但到目前为止最多只能为1。

Chatbot正在成为强大的领导者。 看来您的同事和行业是正确的。 是时候扳动扳机了吗？ 可能不是。 项目非常昂贵，我们对成功仍然只有一点信心。 不幸的是，调查结果无法产生足够强的信号。 我们继续努力！

来自客户的证据

要了解更多信息，您需要与十个当前用户进行研究，向他们展示每个功能的交互式原型。 同时，您进行电话采访并采访20位必须选择两个候选功能之一的受访者。

研究显示了更详细的图片：

• 每10位客户中就有8位认为该仪表板非常有用，并表示他们至少每周使用一次。 他们对功能的理解与您想要传达的内容一致，并且在使用仪表板的过程中没有遇到困难。 电话采访证实了理解和渴望平均每周使用一次。
• 每10名研究参与者中有9名表示愿意使用聊天机器人，他们的热情很高。 每个人都立即了解了聊天机器人如何帮助他们，许多人都要求尽快进行访问。 但是，发现了主要的可用性问题，此外，一些用户表示担心他们的客户可能对该机器人的不自然反应不满意。

这项定性研究为我们提供了思考的机会。 仪表盘的需求比以前想象的要多。 聊天机器人现在看起来像一个具有更高风险和更大潜力的项目。 查看Confidence Tool，将仪表板和聊天机器人分别设置为3和2.5。 您将影响力值更新为仪表板6和聊天机器人9。 另外，根据可用性研究的结果，您了解到聊天机器人UI需要做更多的工作，因此您将Simplicity参数减少为2。

表格再次更改，现在仪表板处于领先地位。 您将结果带给您的团队和领导。 严格基于ICE的预测宣布仪表板为赢家，另一方面，置信度仍远未达到高水平。 我不想放弃一个可能不错的功能，因此团队决定继续测试这两个功能。

最新测试和获胜者！

您决定开始为聊天机器人创建MVP-开发过程花了六周的时间，并且针对200位参与上次调查并表示希望参加Beta测试的受访者启动了该MVP。 该功能包括167个功能，但使用人数每天都在急剧下降，到第二周结束时，只有24人成为活跃用户。 在随后的民意测验和通话中，图片被清除了。 聊天机器人比参与者预期的更难使用且实用性大大降低，更糟糕的是，它对似乎喜欢个人联系的客户不友好。 实际上，此功能使企业主的工作更多。

通过分析结果，您和团队得出的结论是，要启动满足您客户期望的便捷版本的聊天机器人，至少需要增加40至50个人周（Simplicity = 1），这非常冒险。 同样清楚的是，很少有用户认为聊天机器人比最初预期的方便。 因此，您将感化力降低为2。这从根本上改变了最初的想法，使您不再相信和接受用户研究的结果，因此将置信度得分降低到0.5。

MVP仪表板在五周内为另外200个用户启动。 结果非常好。 87％的参与者使用它，大多数情况下每天流出的流量很小。 反馈是非常积极的，大多数人都要求访问全部功能。 您知道影响大于预期-8。开发团队估计完整版本的完成将需要10周，因此简单4。根据该工具，您将Confidence设置为6.5（满分10）。

现在确定优先级非常简单。 没有人认为仪表板是应该解决的功能。 您将聊天机器人留在Idea Bank中以记录将来的发现，但是由于ICE系数低，因此它被分类到最后。

合计

1.停止投资坏主意

此示例说明了投注需要大量努力且基于风采，观点，市场趋势等的功能有多冒险。大多数想法更像是聊天机器人，而不是仪表板。 它们带来的结果更少，成本却比您想象的要高得多。 找到成功想法的唯一方法是测试它们并减少不确定性。

2.担心结果，而不是功能

这似乎是一种耗时且缓慢的创建产品的方法，但实际上，这是比其他方法更有效的方法。 通过测试来确定“置信度”指标，不仅可以减少浪费在坏主意上的精力，而且可以使团队专注于简短而有形的学习里程碑，并获得快速，可衡量的结果，从而提高专注度和绩效。 在此过程中，我们了解了很多有关我们的产品，用户，市场的信息，因此，我们拥有了经过客户测试的最好的最终产品。 因此，我们不太会对发布结果感到惊讶，并且所需的修补程序也少得多。

3.让数千朵花绽放

实际上，我们常常不得不做出选择，而不是在两个想法之间做出选择，而是在数十个想法之间做出选择。 通过限制每个工作量，在给定置信度的情况下，我们有机会并行测试许多想法，避免了传统的开发方法的陷阱。 您可以在文章“为什么应该停止使用杂货路线图并尝试GIST”中阅读更多有关此内容的信息 。

在此示例中，团队并行测试了四个想法，并启动了多个步骤项目。 通过测试，每种方法都会逐步改善想法，从而提高对结果的信心。

4.如何将领导者和利益相关者放到一边

当我解释这个话题时，最让人们感到困扰的是如何将其“出售”给管理层和利益相关者的问题。 我们真的可以让他们限制他们对产品的影响程度吗？ 好吧，你会感到惊讶。 我从许多高管那里听说，他们宁愿不对产品问题做出决定，但是如果团队提供的选择不多，他们就会感到需要参与。 当然，只有弱而有力的选择才是主观意见，直到您不仅展示精美的表述，而且还附有可靠的真实证据。 当您意识到讨论变得如此轻松时，您会感到非常惊讶。 另一方面，下一次您的CEO提出另一批必须具备的想法时，请尝试向他展示如何评估这些想法：您指出了哪些影响力，简洁性和信心指标，结果是什么ICE系数，如何与他人进行比较想法以及如何测试它们以增加信心。

大多数有理智的人都会同意这是一个好方法。 如果仍然不满意，请给他们提供指向Itamar的译文或原始帖子的链接，他准备在评论中为这种方法辩护。

在联合公司“ Wheels | 屋顶| 市场”我们正在寻找愿意尝试，快速且廉价地测试假设的产品经理。 您可以在Headhunter和公司网站 上申请职位空缺。