Un outil pour vous aider à choisir les meilleures idées pour votre produit.

Imaginons que vous gérez un produit qui aide les petites entreprises à fournir un support technique à leurs clients. Vous cherchez des moyens d'augmenter l'engagement et la rétention de vos clients. Vous avez deux idées:

• Un tableau de bord qui permet aux propriétaires d'entreprise de surveiller les statistiques d'engagement.
• Un chatbot qui aide les propriétaires d'entreprise à automatiser la communication avec les consommateurs.

Un tableau de bord est une fonctionnalité qui a été discutée à plusieurs reprises avec les utilisateurs et vous sentez qu'il a un grand potentiel, mais vous réalisez également le risque qu'un seul grand utilisateur utilise des tableaux de bord. Le chatbot est quelque chose d'agréable pour tous les employés de votre entreprise et est poussé par la direction - cela semble être une chose très nécessaire pour les clients, c'est un projet cool. Et oui, les robots de discussion sont à la mode maintenant.

Que choisissez-vous?

Ces problèmes de priorisation sont au cœur de la gestion des produits. Le prix d'une erreur pour le mauvais choix peut être assez élevé: le coût de développement + le coût de déploiement en production + le coût de support + les coûts de manque à gagner + tous les autres coûts.

Nous sommes souvent tentés de prendre des décisions sur des signaux faibles: voix majoritaires, opinions de personnes autoritaires ( HiPPO ), tendances de l'industrie, etc., mais, comme le montre l'expérience, il s'agit d'une mauvaise heuristique, une telle approche ne vaut pas mieux que de lancer une pièce.

Dans cet article, je vais démontrer quelle est, à mon avis, la meilleure façon de trouver de bonnes idées. Cette approche comprend trois volets:

• Rapport ICE
• Niveau de confiance
• Validation incrémentale

Rapport ICE

Le calcul du coefficient ICE est une méthode de priorisation inventée par Sean Ellis, la personne qui a contribué à la croissance d'entreprises telles que DropBox, Eventbrite et le terme «croissance hacking» . Le calcul du coefficient ICE était à l'origine destiné à prioriser les expériences de croissance, mais peut également être appliqué à d'autres idées.

Vous calculez le coefficient pour chaque idée en utilisant la formule suivante:

ICE = Impact () * Confidence () * Ease (),

où:

• L'influence est une évaluation de l'influence positive d'une idée sur une mesure clé que vous essayez d'améliorer.
• La simplicité (mise en œuvre) est une évaluation de l'effort et des ressources nécessaires pour mettre en œuvre une idée. Il s'agit de l'inverse de l'estimation classique des coûts de main-d'œuvre (en hommes-semaines) - moins d'effort, plus de simplicité.
• Confiance - montre à quel point nous sommes confiants quant à l'influence qui sera fournie, et parle également dans une certaine mesure de la simplicité de mise en œuvre. J'ai écrit un article entier expliquant pourquoi la priorisation par le travail et la valeur ne fonctionne pas . [ traduction de cet article sur Habré ]. Bref, l'essentiel est que nous sommes tous très pauvres en estimations et ne nous en doutons pas naïvement. La confiance est un antidote, elle nous aide à être plus précis dans les hypothèses.

Les trois indicateurs sont remplis de valeurs sur des échelles relatives de 1 à 10, donc aucun d'entre eux n'est surestimé. Chaque équipe détermine pour elle-même à quoi correspondent les indicateurs 1 à 10, afin que chaque équivalent soit approprié. En fin de compte, le but de l'évaluation est d'obtenir une «banque d'idées» qui ressemble à ceci:

Regardons un exemple pour voir comment cela fonctionne.

La première version d'ICE

Vous avez décidé de calculer les coefficients ICE pour deux idées - un tableau de bord et un chatbot. À un stade précoce, vous utilisez des valeurs brutes, basées sur votre propre intuition.

Impact - vous supposez que le tableau de bord augmentera considérablement la rétention, mais seulement pour certains utilisateurs, alors mettez 5 sur 10. Chatbot, d'autre part, peut affecter un grand nombre d'utilisateurs, vous en mettez donc 8 sur 10.

Simplicité - vous pensez qu'un tableau de bord nécessitera 10 semaines-homme de développement et un chat bot - 20, basés uniquement sur les données de projets précédents similaires. Vous obtiendrez de meilleures notes de l'équipe de développement plus tard, mais pour l'instant, utilisez ce tableau simple (compilé avec l'équipe) pour convertir les notes en valeur du paramètre Simplicity:

Par conséquent, le tableau de bord obtient une valeur de simplicité de 4 sur 10 et le bot de chat en obtient 2.

Nous considérons l'indicateur de confiance

Il n'y a qu'une seule façon de calculer la confiance - regardez les preuves à l'appui. À cette fin, j'ai créé un outil qui décrit les tests de type et les preuves que vous pouvez avoir, ainsi que les valeurs du paramètre de confiance dont ils disposent. Lorsque vous utilisez cet outil, tenez compte des artefacts que vous possédez déjà, de leur nombre et de ce que vous devez faire pour obtenir encore plus de valeur.

Texte dans l'image - Niveau de confiance:

• Environ zéro:
  
  • Confiance en soi.
  • Présentation
  • Support thématique - cohérent avec la vision / stratégie, les tendances / mots à la mode actuels, la recherche externe, les macro-tendances, la méthodologie du produit.
• Très faible:
  
  • L'opinion de quelqu'un - l'équipe, la direction, les experts externes, les investisseurs, les médias, quelqu'un d'autre pense que l'idée est bonne.
  • Évaluations et plans - calculs sur les serviettes, évaluation de faisabilité, calendrier du projet, modèle commercial.
• Faible - preuves non officielles: sur la base de plusieurs aspects des données sur les produits, des demandes de vente fréquentes, de 1 à 3 clients intéressés, certains concurrents l'ont déjà ...
• Mid Low:
  
  • Données de marché - preuves basées sur des enquêtes, des tests de fumée, tous les concurrents l'ont déjà ...
  • Preuve des utilisateurs / clients - basée sur une grande quantité de données sur les produits, les demandes des meilleurs utilisateurs, des entretiens avec plus de 20 utilisateurs, les résultats de la recherche sur l'utilisabilité, les résultats du lancement du MVP.
• Résultats de tests moyens: basés sur de longues recherches d'utilisateurs, des résultats de lancement de MVP à plus grande échelle, des versions alpha et bêta, des expériences A / B.
• Haut - données après le lancement.

Remarque Si d'autres preuves sont utilisées dans votre produit ou votre industrie, vous pouvez créer votre propre version de l'outil de confiance, il suffit de considérer ce qui est fort et ce qui est faible. Plus d'informations dans un article précédent .

Revenons à notre exemple et regardons l'outil Confiance en action.

• Des preuves à l'appui pour le chatbot: votre propre confiance (vous pensez que c'est une bonne idée), un soutien thématique (l'industrie pense que c'est une bonne idée) et les opinions des autres (vos dirigeants et vos collègues pensent que c'est une bonne idée). Cela vous donne une valeur de confiance finale de 0,1 sur 10, c'est-à-dire près de zéro. L'outil ne considère clairement pas les opinions comme un indicateur fiable. Intéressant.
• Pour le tableau de bord, il y a les preuves suivantes: confiance en soi (vous pensez que c'est une bonne idée), preuves non officielles (une poignée de clients l'ont demandé). En fait, cela augmente la valeur de confiance à un énorme 0,5 sur 10, ce qui signifie un faible niveau de confiance. Malheureusement, les utilisateurs ne prédisent pas bien leur comportement futur.

Calcul du coefficient ICE:

Texte dans l'image: le long de l'axe Y - score ICE, le long de l'axe X - un tour de priorisation. Le point bleu est le tableau de bord, le point rouge est le bot de chat.

Pour le moment, le tableau de bord ressemble à une idée plus appropriée, mais l'outil montre que le niveau de confiance est faible. Jusqu'à présent, il n'y a tout simplement pas assez d'informations pour prendre une décision.

Évaluation et vérification de faisabilité

Ensuite, vous rencontrez des collègues du développement et de l'expérience utilisateur, puis discutez des deux idées ensemble. À première vue, les deux projets semblent tout à fait réalisables. Le calendrier de développement revient avec des estimations approximatives de la main-d'œuvre: un tableau de bord prendra 12 semaines-personnes pour être lancé, et un bot de discussion - 16. Selon votre échelle de simplicité, cela signifie les indicateurs 4 et 3, respectivement.

En parallèle, vous effectuez des calculs sur une serviette et mettez à jour la colonne «Influence». En y regardant de plus près, le tableau de bord semble légèrement moins prometteur et obtient 3. Le chatbot semble toujours solide, à 8.

L'utilisation de l'outil de confiance montre que les deux idées réussissent désormais le test «Évaluations et plans» et reçoivent de nouveaux indicateurs du paramètre de confiance. Le tableau de bord a maintenant 0,8, chatbot - 0,4.

Ainsi, le chat a éliminé l'écart. Cependant, le niveau de confiance est encore faible pour une bonne raison - ce sont principalement des chiffres obtenus par voie aérienne, et vous comprenez que davantage de preuves doivent être recueillies.

Données du marché

Vous envoyez un questionnaire avec une enquête aux utilisateurs actuels, leur demandant de choisir l'une des 5 fonctionnalités potentielles, la liste comprend un bot de chat et un tableau de bord. Vous obtenez des centaines de réponses. Les résultats sont très positifs pour le chatbot - c'est la fonctionnalité n ° 1, 38% des répondants l'ont choisie. Le tableau de bord occupe le troisième rang avec 17% des voix.

Cela donne aux deux fonctionnalités un peu de support avec les données du marché, mais le chatbot a un indicateur plus élevé - 1,5. Le tableau de bord obtient également une valeur accrue pour la colonne Confiance, mais jusqu'à présent uniquement jusqu'à 1.

Chatbot devient un leader solide. Il semble que vos collègues et l'industrie avaient raison. Est-il temps d'appuyer sur la détente? Probablement pas. Les projets sont assez chers et nous n'avons encore qu'une petite confiance dans le succès. Malheureusement, les résultats de l'enquête ne créent pas un signal suffisamment fort. Nous continuons à travailler!

Preuve des clients

Pour en savoir plus, vous effectuez une étude auprès de dix utilisateurs actuels, en leur montrant des prototypes interactifs de chaque fonctionnalité. En parallèle, vous menez un entretien téléphonique et interrogez 20 répondants qui doivent choisir l'une des deux fonctions candidates.

L'étude montre une image plus détaillée:

• 8 clients sur 10 ont trouvé le tableau de bord utile et ont déclaré qu'ils l'utiliseraient au moins une fois par semaine. Leur compréhension des fonctionnalités coïncide avec ce que vous vouliez transmettre et ils n'ont pas rencontré de difficultés dans le processus de travail avec le tableau de bord. Les entretiens téléphoniques ont confirmé la compréhension et le désir d'utiliser en moyenne une fois par semaine.
• 9 participants à l'étude sur 10 ont déclaré qu'ils utiliseraient le chatbot, leur niveau d'enthousiasme était très élevé. Tout le monde a immédiatement compris comment le chatbot pouvait les aider, et beaucoup ont demandé un accès dès que possible. Cependant, des problèmes d'utilisabilité majeurs ont été identifiés, et certains utilisateurs ont exprimé leur inquiétude que leurs clients ne soient pas satisfaits des réponses contre nature du bot.

Cette étude qualitative a donné matière à réflexion. Le tableau de bord semble plus demandé que prévu. Et le chatbot ressemble maintenant à un projet avec des risques plus élevés et avec un plus grand potentiel. En regardant l'outil de confiance, vous définissez le tableau de bord et le chatbot sur 3 et 2,5, respectivement. Vous mettez à jour les valeurs d'influence à 6 pour le tableau de bord et 9 pour le chatbot. En outre, selon les résultats de la recherche sur l'utilisabilité, vous comprenez que l'interface utilisateur du chat bot nécessitera plus de travail, vous réduisez donc le paramètre Simplicity à 2.

Le tableau a encore changé et maintenant le tableau de bord est en tête. Vous apportez des résultats à votre équipe et à votre leadership. La prévision, basée strictement sur l'ICE, déclare le tableau de bord vainqueur, en revanche, le niveau de Confiance est encore loin d'être élevé. Je ne veux pas abandonner une fonctionnalité potentiellement intéressante, donc l'équipe décide de continuer à tester les deux.

Derniers tests et gagnant!

Vous avez décidé de commencer à créer MVP pour le chat bot - le développement a pris six semaines et vous l'avez lancé pour 200 répondants qui ont participé à l'enquête précédente et qui ont exprimé le souhait de participer aux tests bêta. 167 incluaient la fonctionnalité, mais le nombre d'utilisations diminuait considérablement de jour en jour, et à la fin de la deuxième semaine, seulement 24 personnes étaient des utilisateurs actifs. Dans les sondages et appels ultérieurs, l'image s'est éclaircie. Le chatbot est plus difficile à utiliser et beaucoup moins utile que ce que les participants attendaient, pire, il est hostile aux clients qui semblent apprécier le contact personnel. En fait, cette fonctionnalité fait travailler davantage les propriétaires d'entreprise.

En analysant les résultats, vous et l'équipe en arrivez à la conclusion que le lancement d'une version pratique du chatbot qui répondra aux attentes des clients nécessitera un minimum de 40 à 50 semaines-personnes supplémentaires (Simplicité = 1) et cela est très risqué. Il est également clair qu'un nombre beaucoup plus restreint d'utilisateurs perçoivent le chatbot comme étant plus pratique que prévu. Par conséquent, vous avez réduit l'Influence à 2. Cela change fondamentalement l'idée originale, de sorte que vous ne pouvez plus croire et accepter les résultats de la recherche des utilisateurs, donc réduisez le score de confiance à 0,5.

Le tableau de bord MVP a été lancé dans cinq semaines pour 200 autres utilisateurs. Les résultats sont très bons. 87% des participants l'utilisent, la plupart du temps, le débit est faible. Les commentaires sont extrêmement positifs, la plupart demandent l'accès à toutes les fonctionnalités. Vous comprenez que l'impact est supérieur à ce que vous attendiez - 8. L'équipe de développement estime que la finalisation de la version complète prendra 10 semaines, donc Simplicité 4. Selon l'outil, vous définissez la confiance à 6,5 sur 10.

La hiérarchisation est désormais très simple. Personne ne fait valoir que le tableau de bord est la fonctionnalité qui doit être abordée. Vous laissez un chatbot dans votre banque d'idées pour enregistrer les futures découvertes, mais il est bien sûr trié jusqu'à la fin en raison du faible coefficient ICE.

Total

1. Arrêtez d'investir dans de mauvaises idées

Cet exemple illustre à quel point il est risqué de parier sur des fonctionnalités qui nécessitent beaucoup d'efforts et sont basées sur le flair, les opinions, les tendances du marché, etc. La plupart des idées ressemblent plus à un chatbot qu'à un tableau de bord. Ils apportent moins de résultats et coûtent beaucoup plus cher que vous ne le pensez. La seule façon de trouver des idées gagnantes est de les tester et de réduire le niveau d'incertitude.

2. Inquiétez-vous des résultats, pas des fonctionnalités

Cela ressemble à un moyen long et lent de créer des produits, mais en réalité, c'est un moyen plus efficace que les alternatives. Les tests pour déterminer l'indicateur de confiance réduisent non seulement la quantité d'efforts gaspillés sur les mauvaises idées, mais concentrent également les équipes sur des étapes d'apprentissage courtes et tangibles avec des résultats rapides et mesurables, ce qui améliore la concentration et les performances. Ce faisant, nous en apprenons beaucoup sur notre produit, nos utilisateurs, notre marché et, par conséquent, nous avons le meilleur produit final qui a déjà été testé par les clients. Pour cette raison, nous sommes moins susceptibles d'être surpris par les résultats du lancement et beaucoup moins de correctifs sont nécessaires.

3. Laissez fleurir des milliers de fleurs

En réalité, nous devons souvent faire un choix, non pas entre deux idées, mais entre des dizaines. En limitant la quantité d'efforts pour chacun, étant donné le niveau de confiance, nous avons l'occasion de tester de nombreuses idées en parallèle, en évitant les pièges de l'approche traditionnelle du développement. Vous pouvez en savoir plus à ce sujet dans l'article «Pourquoi vous devriez cesser d'utiliser les feuilles de route des épiceries et essayer GIST» .

Dans cet exemple, l'équipe teste quatre idées en parallèle, lançant plusieurs projets d'étape. Chacun améliore progressivement l'idée, à la suite de tests augmentant le niveau de confiance dans les résultats.

4. Comment entraîner le leadership et les parties prenantes à leurs côtés

Ce qui dérange le plus les gens lorsque j'explique ce sujet, c'est la question de savoir comment le «vendre» à la direction et aux parties prenantes. Pouvons-nous réellement les amener à limiter leur niveau d'influence sur le produit? Eh bien, vous serez surpris. De nombreux dirigeants m'ont dit qu'ils préféreraient ne pas prendre de décisions sur les problèmes de produits, mais si l'équipe propose des options faibles, ils ressentent le besoin de s'impliquer. Le fait qu'il existe des options faibles et fortes est, bien sûr, une opinion subjective jusqu'à ce que vous montriez non seulement une présentation soignée, mais que vous apportiez des preuves réelles crédibles. Vous serez très surpris lorsque vous réaliserez à quel point la discussion est plus facile. D'un autre côté, la prochaine fois que votre PDG viendra avec un autre lot d'idées incontournables, essayez de lui montrer comment ces idées sont évaluées: quels indicateurs d'influence, de simplicité et de confiance indiquez-vous, quel est le coefficient ICE qui en résulte, comment la comparaison avec les autres se révèle-t-elle idées et comment vous pouvez les tester pour augmenter la confiance.

La plupart des gens raisonnables conviendront que c'est un bon moyen. S'ils ne sont toujours pas convaincus, lancez-leur un lien vers la traduction ou le post original d'Itamar , où il est prêt à défendre cette approche dans les commentaires.

Dans l'entreprise unie «Roues | Toit | Marché », nous recherchons des chefs de produits prêts à expérimenter, à tester rapidement et à moindre coût des hypothèses. Vous pouvez postuler pour le poste vacant sur Headhunter et le site Web de l'entreprise .