Erste Version des Testtools für die offene Produktsuche

In mehreren kürzlich veröffentlichten Beiträgen wurde eine vielversprechende und recht einfache Methode zur Bewertung der Qualität der Produktsuche anhand von Absichten erörtert. Wir beeilen uns, ein offenes automatisiertes Tool für diese Art von Tests einzuführen - Intent-based Search Quality . Die Idee besteht darin, vorbereitete "fokussierte" Abfragen zu verwenden, deren Wert in ihrer Unkompliziertheit und eindeutigen Interpretation liegt.



Wenn Sie an dem Ansatz interessiert sind, beachten Sie unbedingt den Beitrag „Ich beabsichtige zu kaufen“ oder den einfachsten Weg, um die Qualität der Lebensmittelsuche zu bewerten . Der Übergang vom Standard-A / B-Test zum Testen mit Absichten scheint möglicherweise nicht offensichtlich.

Das Wesentliche des Ansatzes


"Fokussierte" Abfragen bieten eine sehr einfache und ziemlich zuverlässige Möglichkeit, Suchergebnisse zu validieren. In erster Näherung kann die Implementierung übrigens darauf reduziert werden, das Vorhandensein aller Schlüsselwörter aus der Abfrage im Namen der zurückgegebenen Produkte zu überprüfen.

Natürlich ist auch die Position des Produkts in der endgültigen Ausgabe wichtig. Für die Suche in einer mobilen Anwendung sind beispielsweise das erste und mehrere nachfolgende Ergebnisse viel kritischer. Bei einer regelmäßigen Suche (einem vertrauten Desktop) kommt es darauf an, dass auf der ersten Seite relevante Ergebnisse vorhanden sind.

Wie gut ist eine Walmart-Suche?


Ich beabsichtige zu kaufen - ein wirklich leistungsfähiger Ansatz, da keine „manuelle“ Validierung der Suchergebnisse erforderlich ist. Versuchen wir herauszufinden, wie gut Walmart ist (in diesem Fall verwenden wir weiterhin das Abfragepaket für die Marke fiskars). Also, "Fiskars Stahl Hackaxt":



Und lassen Sie uns alles automatisieren


Im Prinzip scheint das Ergebnis gut zu sein, aber wenn Sie genau hinschauen, können Sie leicht völlig irrelevante Optionen feststellen. Es ist ganz einfach, die notwendigen Kontrollen ohne menschliches Eingreifen durchzuführen. Schauen Sie sich den Bericht an:



Das Ergebnis ist negativ, weil es im letzten Satz zu viele wirklich irrelevante Produkte gibt (er braucht kein Hackmesser und nimmt auch die Machete). Natürlich kann die Bewertungsfunktion leicht durch eine weniger "aggressive" ersetzt werden. In zukünftigen Versionen hoffen wir, eine flexiblere Produktbewertung zu implementieren und die Grundfunktionalität zu erweitern.

Das Urteil


In der aktuellen Version war Walmart nicht beeindruckt, seine Fiskars-Bewertung ist nicht sehr hoch:



Denken Sie nicht, dass alles sehr schlecht ist. In vielen, auch nicht den trivialsten Fällen sind die Ergebnisse korrekt, aber um die Suche weiter zu verbessern, müssen nur alle potenziell problematischen Punkte hervorgehoben werden. Mit dem vorgeschlagenen Tool besteht immer die Möglichkeit:

  • Wechseln Sie zu einer anderen Wertung
  • unerwünschte Anfragen entfernen
  • behebe die Suche :)

Wir geben Ihnen die Möglichkeit, die Komplexität der Abfragen zu bewerten:



Referenzen


  1. Absichtsbasierte Suchqualität
  2. Suchqualitäts-API
  3. "Ich beabsichtige zu kaufen" oder der einfachste Weg, um die Qualität einer Lebensmittelsuche zu bewerten
  4. Gasfahrräder oder seltsame Produktsuchen (E-Commerce)

Source: https://habr.com/ru/post/de443740/


All Articles