Ein Tool, mit dem Sie die besten Ideen für Ihr Produkt auswählen können.

Stellen Sie sich vor, Sie verwalten ein Produkt, mit dem kleine Unternehmen ihren Kunden technischen Support bieten können. Sie suchen nach Möglichkeiten, um das Engagement und die Bindung Ihrer Kunden zu steigern. Sie haben zwei Ideen:

• Ein Dashboard, mit dem Geschäftsinhaber Engagement-Statistiken überwachen können.
• Ein Chatbot, mit dem Geschäftsinhaber die Kommunikation mit Verbrauchern automatisieren können.

Ein Dashboard ist eine Funktion, die bereits mehrfach mit Benutzern besprochen wurde, und Sie haben das Gefühl, dass es ein großes Potenzial hat. Sie erkennen jedoch auch das Risiko, dass nur ein großer Benutzer Dashboards verwendet. Chatbot ist etwas, das für alle Mitarbeiter Ihres Unternehmens angenehm ist und vom Management vorangetrieben wird - es scheint für Kunden eine sehr notwendige Sache zu sein, dies ist ein cooles Projekt. Und ja, Chat-Bots sind jetzt in Mode.

Was wählst du?

Solche Priorisierungsprobleme stehen im Mittelpunkt des Produktmanagements. Der Preis eines Fehlers für die falsche Wahl kann sehr hoch sein: die Entwicklungskosten + die Kosten für den Einsatz in der Produktion + die Kosten für den Support + die Kosten für entgangenen Gewinn + alle anderen Kosten.

Wir sind oft versucht, Entscheidungen über schwache Signale zu treffen: Mehrheitsstimmen, Meinungen maßgeblicher Personen ( HiPPO ), Branchentrends usw., aber wie die Erfahrung zeigt, ist dies eine schlechte Heuristik. Ein solcher Ansatz ist nicht besser als das Werfen einer Münze.

In diesem Artikel werde ich zeigen, was meiner Meinung nach der beste Weg ist, gute Ideen zu finden. Dieser Ansatz umfasst drei Komponenten:

• ICE-Verhältnis
• Vertrauensniveau
• Inkrementelle Validierung

ICE-Verhältnis

Die Berechnung des ICE-Koeffizienten ist eine Priorisierungsmethode, die von Sean Ellis erfunden wurde , der Person, die zum Wachstum von Unternehmen wie DropBox, Eventbrite und dem Begriff „Wachstumshacking“ beigetragen hat . Die Berechnung des ICE-Koeffizienten sollte ursprünglich Wachstumsexperimente priorisieren, kann aber auch auf andere Ideen angewendet werden.

Sie berechnen den Koeffizienten für jede Idee nach folgender Formel:

ICE = Impact () * Confidence () * Ease (),

wo:

• Einfluss ist eine Einschätzung, wie positiv eine Idee eine Schlüsselmetrik beeinflusst, die Sie verbessern möchten.
• Einfachheit (Implementierung) ist eine Bewertung, wie viel Aufwand und Ressourcen erforderlich sind, um eine Idee umzusetzen. Dies ist die Umkehrung der klassischen Schätzung der Arbeitskosten (in Mannwochen) - je weniger Aufwand, desto einfacher.
• Vertrauen - zeigt, wie sicher wir sind, welchen Einfluss wir haben werden, und spricht in gewissem Maße auch von einer einfachen Implementierung. Ich habe einen ganzen Artikel geschrieben, in dem erklärt wird, warum die Priorisierung nach Arbeit und Wert nicht funktioniert . [ Übersetzung dieses Artikels über Habré ]. Kurz gesagt, das Fazit ist, dass wir alle sehr schlecht in Schätzungen sind und naiv nichts davon ahnen. Vertrauen ist ein Gegenmittel, es hilft uns, Annahmen genauer zu treffen.

Alle drei Indikatoren sind mit Werten auf relativen Skalen von 1 bis 10 gefüllt, sodass keiner von ihnen überschätzt wird. Jedes Team bestimmt für sich, welchen Indikatoren 1-10 entsprechen, so dass jedes Äquivalent angemessen ist. Letztendlich besteht der Zweck der Bewertung darin, eine „Bank of Ideas“ zu erhalten, die ungefähr so ​​aussieht:

Schauen wir uns ein Beispiel an, um zu sehen, wie das funktioniert.

Die erste Version von ICE

Sie haben beschlossen, die ICE-Koeffizienten für zwei Ideen zu berechnen - ein Dashboard und einen Chatbot. In einem frühen Stadium verwenden Sie Bruttowerte, basierend auf Ihrer eigenen Intuition.

Auswirkung - Sie gehen davon aus, dass das Dashboard die Aufbewahrung erheblich erhöht, jedoch nur für einige Benutzer. Geben Sie also 5 von 10 ein. Chatbot hingegen kann eine große Anzahl von Benutzern betreffen, sodass Sie 8 von 10 eingeben.

Einfachheit - Sie glauben, dass ein Dashboard 10 Mannwochen Entwicklungszeit und ein Chat-Bot 20 benötigt, der ausschließlich auf Daten aus ähnlichen früheren Projekten basiert. Sie werden später bessere Noten vom Entwicklungsteam erhalten, aber verwenden Sie vorerst diese einfache Tabelle (zusammen mit dem Team zusammengestellt), um die Noten in den Simplicity-Parameterwert umzuwandeln:

Infolgedessen erhält das Dashboard einen Simplicity-Wert von 4 von 10 und der Chat-Bot 2.

Wir betrachten den Indikator des Vertrauens

Es gibt nur einen Weg, das Vertrauen zu berechnen - sehen Sie sich die Belege an. Zu diesem Zweck habe ich ein Tool erstellt, das die möglicherweise vorhandenen Typprüfungen und Nachweise sowie die Werte des darin enthaltenen Confidence-Parameters beschreibt. Überlegen Sie bei der Verwendung dieses Tools, welche Artefakte Sie bereits haben, wie viele es gibt und was Sie tun müssen, um noch mehr Wert zu erzielen.

Text im Bild - Vertrauensstufe:

• Über Null:
  
  • Eigenes Vertrauen.
  • Präsentation
  • Thematische Unterstützung - im Einklang mit der Vision / Strategie, aktuellen Trends / Schlagworten, externer Forschung, Makrotrends, Produktmethodik.
• Sehr niedrig:
  
  • Jemandes Meinung - das Team, das Management, externe Experten, Investoren, die Medien, jemand anderes hält die Idee für gut.
  • Bewertungen und Pläne - Berechnungen auf Servietten, Machbarkeitsbewertung, Projektzeitplan, Geschäftsmodell.
• Niedrig - inoffizielle Beweise: Basierend auf verschiedenen Aspekten der Produktdaten, häufigen Verkaufsanfragen, 1-3 interessierten Kunden haben einige der Wettbewerber diese ...
• Mid Low:
  
  • Marktdaten - Evidenz basierend auf Umfragen, Rauchtests, alle Wettbewerber haben diese bereits ...
  • Beweise von Benutzern / Kunden - basierend auf einer großen Menge von Produktdaten, Anfragen von Top-Benutzern, Interviews mit mehr als 20 Benutzern, Usability-Forschungsergebnissen, MVP-Startergebnissen.
• Mittel - Testergebnisse: basierend auf langwierigen Benutzerrecherchen, größeren MVP-Startergebnissen, Alpha-, Beta-Versionen und A / B-Experimenten.
• High - Daten nach dem Start.

Hinweis Wenn in Ihrem Produkt oder Ihrer Branche andere Beweise verwendet werden, können Sie Ihre eigene Version des Vertrauenswerkzeugs erstellen. Überlegen Sie einfach, was starke und was schwache Beweise sind. Weitere Informationen in einem früheren Beitrag .

Kehren wir zu unserem Beispiel zurück und schauen uns das Tool zum Vertrauen in die Aktion an.

• Unterstützende Beweise für den Chatbot: Ihr eigenes Vertrauen (Sie halten dies für eine gute Idee), thematische Unterstützung (die Branche hält dies für eine gute Idee) und die Meinungen anderer (Ihre Führungskräfte und Kollegen halten dies für eine gute Idee). Dies gibt Ihnen einen endgültigen Konfidenzwert von 0,1 von 10, d. H. nahe Null. Das Tool betrachtet Meinungen eindeutig nicht als verlässlichen Indikator. Interessant.
• Für das Dashboard gibt es folgende Beweise: Selbstvertrauen (Sie halten dies für eine gute Idee), inoffizielle Beweise (eine Handvoll Kunden haben dies angefordert). Tatsächlich erhöht dies den Konfidenzwert auf satte 0,5 von 10, was ein geringes Konfidenzniveau bedeutet. Leider sagen Benutzer ihr zukünftiges Verhalten nicht gut voraus.

Berechnung des ICE-Koeffizienten:

Text im Bild: entlang der Y-Achse - ICE-Punktzahl, entlang der X-Achse - eine Priorisierungsrunde. Der blaue Punkt ist das Dashboard, der rote Punkt ist der Chat-Bot.

Im Moment sieht das Dashboard besser aus, aber das Tool zeigt, dass das Vertrauensniveau niedrig ist. Bisher gibt es einfach nicht genug Informationen, um eine Entscheidung zu treffen.

Bewertung und Machbarkeitsprüfung

Als nächstes treffen Sie sich mit Kollegen aus Entwicklung und UX und diskutieren dann beide Ideen gemeinsam. Beide Projekte sehen auf den ersten Blick durchaus machbar aus. Der Entwicklungszeitplan kehrt mit ungefähren Arbeitsschätzungen zurück: Der Start eines Dashboards dauert 12 Personenwochen, und ein Chat-Bot - 16. Laut Ihrer Einfachheitsskala bedeutet dies die Indikatoren 4 bzw. 3.

Parallel dazu führen Sie Berechnungen auf einer Serviette durch und aktualisieren die Spalte „Einfluss“. Bei näherer Betrachtung sieht das Dashboard etwas weniger vielversprechend aus und erhält 3. Der Chatbot sieht mit 8 immer noch solide aus.

Die Verwendung des Vertrauenswerkzeugs zeigt, dass beide Ideen jetzt den Test „Bewertungen und Pläne“ bestehen und neue Indikatoren für den Vertrauensparameter erhalten. Das Dashboard hat jetzt 0,8, Chatbot - 0,4.

Somit hat der Chat-Bot die Lücke geschlossen. Das Vertrauensniveau ist jedoch aus gutem Grund immer noch niedrig - dies sind hauptsächlich Zahlen aus der Luft, und Sie verstehen, dass mehr Beweise gesammelt werden müssen.

Marktdaten

Sie senden einen Fragebogen mit einer Umfrage an aktuelle Benutzer und bitten sie, eine von fünf möglichen Funktionen auszuwählen. Die Liste enthält einen Chat-Bot und ein Dashboard. Sie erhalten Hunderte von Antworten. Die Ergebnisse sind für den Chatbot sehr positiv - dies ist Feature Nr. 1, 38% der Befragten haben es gewählt. Dashboard belegt mit 17% der Stimmen den dritten Platz.

Dies gibt beiden Funktionen ein wenig Unterstützung bei Marktdaten, aber der Chatbot hat einen höheren Indikator - 1,5. Das Dashboard erhält auch einen erhöhten Wert für die Spalte "Vertrauen", jedoch bisher nur bis zu 1.

Chatbot wird ein starker Anführer. Es scheint, dass Ihre Kollegen und die Branche Recht hatten. Ist es Zeit, den Abzug zu betätigen? Wahrscheinlich nicht. Projekte sind ziemlich teuer und wir haben immer noch wenig Vertrauen in den Erfolg. Leider erzeugen die Umfrageergebnisse kein ausreichend starkes Signal. Wir arbeiten weiter!

Beweise von Kunden

Um mehr zu erfahren, führen Sie eine Studie mit zehn aktuellen Benutzern durch, in der ihnen interaktive Prototypen der einzelnen Funktionen gezeigt werden. Parallel dazu führen Sie ein Telefoninterview durch und interviewen 20 Befragte, die eine von zwei Kandidatenfunktionen auswählen müssen.

Die Studie zeigt ein detaillierteres Bild:

• 8 von 10 Kunden fanden das Dashboard nützlich und sagten, sie würden es mindestens einmal pro Woche verwenden. Ihr Verständnis der Funktionalität stimmt mit dem überein, was Sie vermitteln wollten, und sie hatten keine Schwierigkeiten bei der Arbeit mit dem Dashboard. Telefoninterviews bestätigten das Verständnis und den Wunsch, durchschnittlich einmal pro Woche zu verwenden.
• 9 von 10 Studienteilnehmern sagten, sie würden den Chatbot verwenden, ihre Begeisterung war sehr hoch. Jeder verstand sofort, wie der Chatbot ihm helfen kann, und viele baten so schnell wie möglich um Zugang. Es wurden jedoch große Usability-Probleme festgestellt, und einige Benutzer äußerten Bedenken, dass ihre Kunden mit den unnatürlichen Reaktionen des Bots möglicherweise nicht zufrieden sind.

Diese qualitative Studie gab Anlass zum Nachdenken. Das Dashboard ist gefragter als bisher angenommen. Und der Chatbot sieht jetzt aus wie ein Projekt mit höheren Risiken und größerem Potenzial. Mit dem Confidence Tool setzen Sie das Dashboard und den Chatbot auf 3 bzw. 2,5. Sie aktualisieren die Einflusswerte für das Dashboard auf 6 und für den Chatbot auf 9. Den Ergebnissen der Usability-Forschung zufolge ist für die Benutzeroberfläche des Chat-Bots außerdem mehr Arbeit erforderlich, sodass Sie den Parameter "Einfachheit" auf 2 reduzieren.

Die Tabelle hat sich erneut geändert und jetzt liegt das Dashboard an der Spitze. Sie bringen Ergebnisse in Ihr Team und Ihre Führung. Die Prognose, die ausschließlich auf dem ICE basiert, erklärt das Dashboard zum Gewinner, andererseits ist das Vertrauensniveau noch lange nicht hoch. Ich möchte eine potenziell gute Funktion nicht loslassen, daher beschließt das Team, beide weiterhin zu testen.

Neueste Tests und Gewinner!

Sie haben beschlossen, MVP für den Chat-Bot zu erstellen. Die Entwicklung dauerte sechs Wochen und Sie haben sie für 200 Befragte gestartet, die an der vorherigen Umfrage teilgenommen haben und den Wunsch geäußert haben, an Betatests teilzunehmen. 167 enthielten die Funktion, aber die Anzahl der Nutzungen ging von Tag zu Tag dramatisch zurück, und am Ende der zweiten Woche waren nur 24 Personen aktive Benutzer. In nachfolgenden Umfragen und Anrufen wurde das Bild klarer. Der Chatbot ist schwieriger zu bedienen und deutlich weniger nützlich als von den Teilnehmern erwartet. Schlimmer noch, er ist unfreundlich für Kunden, die den persönlichen Kontakt zu schätzen scheinen. In der Tat bringt diese Funktion Geschäftsinhaber dazu, mehr zu arbeiten.

Wenn Sie die Ergebnisse analysieren, kommen Sie und das Team zu dem Schluss, dass das Starten einer praktischen Version des Chatbots, die den Erwartungen der Kunden entspricht, mindestens 40-50 zusätzliche Personenwochen erfordert (Einfachheit = 1), was sehr riskant ist. Es ist auch klar, dass eine viel geringere Anzahl von Benutzern den Chatbot als bequem empfindet, als ursprünglich erwartet. Daher haben Sie den Einfluss auf 2 reduziert. Dadurch wird die ursprüngliche Idee grundlegend geändert, sodass Sie die Ergebnisse der Benutzerforschung nicht mehr glauben und akzeptieren können. Reduzieren Sie daher den Vertrauenswert auf 0,5.

Das MVP-Dashboard wurde in fünf Wochen für weitere 200 Benutzer gestartet. Die Ergebnisse sind sehr gut. 87% der Teilnehmer nutzen es, meistens täglich, der Abfluss ist gering. Das Feedback ist äußerst positiv, die meisten fordern den Zugriff auf alle Funktionen. Sie verstehen, dass die Auswirkungen größer sind als erwartet - 8. Das Entwicklungsteam schätzt, dass die Fertigstellung der Vollversion 10 Wochen dauern wird, daher Einfachheit 4. Je nach Tool setzen Sie Confidence auf 6,5 von 10.

Die Priorisierung ist jetzt sehr einfach. Niemand argumentiert, dass das Dashboard die Funktion ist, die angesprochen werden sollte. Sie hinterlassen einen Chatbot in Ihrer Ideenbank, um zukünftige Funde aufzuzeichnen, der jedoch aufgrund des niedrigen ICE-Koeffizienten natürlich bis zum Ende sortiert ist.

Insgesamt

1. Hören Sie auf, in schlechte Ideen zu investieren

Dieses Beispiel zeigt, wie riskant es ist, auf Funktionen zu setzen, die viel Aufwand erfordern und auf Flair, Meinungen, Markttrends usw. basieren. Die meisten Ideen ähneln eher einem Chatbot als einem Dashboard. Sie bringen weniger Ergebnisse und kosten viel mehr als Sie denken. Die einzige Möglichkeit, erfolgreiche Ideen zu finden, besteht darin, sie zu testen und die Unsicherheit zu verringern.

2. Sorgen Sie sich um Ergebnisse, nicht um Funktionen

Es sieht nach einer zeitaufwändigen und langsamen Methode aus, Produkte zu erstellen, aber in Wirklichkeit ist es effizienter als Alternativen. Tests zur Ermittlung des Vertrauensindikators reduzieren nicht nur den Aufwand für schlechte Ideen, sondern konzentrieren die Teams auch auf kurze und greifbare Lernmeilensteine mit schnellen, messbaren Ergebnissen, wodurch Fokus und Leistung verbessert werden. Dabei lernen wir viel über unser Produkt, unsere Benutzer, unseren Markt und haben daher das beste Endprodukt, das bereits von Kunden getestet wurde. Aus diesem Grund sind wir weniger überrascht über die Startergebnisse, und es sind viel weniger Korrekturen erforderlich.

3. Lassen Sie Tausende von Blumen blühen

In der Realität müssen wir oft eine Wahl treffen, nicht zwischen zwei Ideen, sondern zwischen Dutzenden. Durch die Begrenzung des Aufwandes für jeden Einzelnen erhalten wir angesichts des Vertrauensniveaus die Möglichkeit, viele Ideen parallel zu testen und die Fallstricke des traditionellen Entwicklungsansatzes zu vermeiden. Weitere Informationen hierzu finden Sie im Artikel „Warum Sie die Verwendung von Roadmaps für Lebensmittel einstellen und GIST ausprobieren sollten“ .

In diesem Beispiel testet das Team vier Ideen parallel und startet mehrere Schrittprojekte. Jedes verbessert die Idee schrittweise, da durch Tests das Vertrauen in die Ergebnisse erhöht wird.

4. Wie man Führung und Stakeholder auf ihre Seite zieht

Was die Leute am meisten stört, wenn ich dieses Thema erkläre, ist die Frage, wie man es an das Management und die Stakeholder „verkauft“. Können wir sie tatsächlich dazu bringen, ihren Einfluss auf das Produkt zu begrenzen? Nun, Sie werden überrascht sein. Ich habe von vielen Führungskräften gehört, dass sie lieber keine Entscheidungen zu Produktproblemen treffen möchten, aber wenn das Team schwache Optionen anbietet, haben sie das Bedürfnis, sich zu engagieren. Dass es schwache und starke Optionen gibt, ist natürlich eine subjektive Meinung, bis Sie nicht nur eine polierte Präsentation zeigen, sondern echte Beweise vorlegen, die glaubwürdig sind. Sie werden sehr überrascht sein, wenn Sie feststellen, wie viel einfacher die Diskussion ist. Wenn Ihr CEO das nächste Mal eine Reihe von Must-Have-Ideen vorlegt, versuchen Sie ihm zu zeigen, wie solche Ideen bewertet werden: Welche Indikatoren für Einfluss, Einfachheit und Vertrauen geben Sie an, welcher ICE-Koeffizient sich als Ergebnis herausstellt, wie erfolgt der Vergleich mit anderen Ideen und wie Sie sie testen können, um das Vertrauen zu erhöhen.

Die meisten vernünftigen Leute werden zustimmen, dass dies ein guter Weg ist. Wenn sie immer noch nicht überzeugt sind, werfen Sie ihnen einen Link zur Übersetzung oder zum ursprünglichen Beitrag von Itamar , wo er bereit ist, diesen Ansatz in den Kommentaren zu verteidigen.

In der vereinten Firma „Wheels | Dach | Markt “suchen wir Produktmanager, die bereit sind zu experimentieren, Hypothesen schnell und kostengünstig zu testen. Sie können sich auf der Headhunter- und Unternehmenswebsite für die Stelle bewerben.