Varias publicaciones recientes han discutido una forma prometedora y bastante simple de evaluar la calidad de búsqueda de productos utilizando intenciones. Nos apresuramos a introducir una herramienta automatizada abierta para este tipo de pruebas:
calidad de búsqueda basada en intención . La idea se reduce al uso de consultas "enfocadas" preparadas previamente, cuyo valor radica en su sencillez y su interpretación inequívoca.

Si está interesado en el enfoque, asegúrese de prestar atención a la publicación
"Tengo la intención de comprar" o la forma más fácil de evaluar la calidad de la búsqueda de comestibles . La transición de la prueba estándar A / B a la prueba con intenciones puede no parecer obvia.
La esencia del enfoque.
Las consultas "enfocadas" proporcionan una forma muy simple y bastante confiable de validar los resultados de búsqueda. En una primera aproximación, por cierto, su implementación puede reducirse a verificar la presencia de todas las palabras clave de la consulta en el nombre de los productos devueltos.
Naturalmente, la posición del producto en la edición final también es importante. Para buscar en una aplicación móvil, por ejemplo, el primer resultado y varios posteriores son mucho más críticos. Para una búsqueda regular (un escritorio familiar) todo se reduce a la presencia de resultados relevantes en la primera página.
¿Qué tan buena es una búsqueda de Walmart?
Tengo la intención de comprar , un enfoque realmente poderoso, porque no requiere la validación "manual" de los resultados de búsqueda. Intentemos averiguar qué tan bueno es Walmart (en este caso, continuaremos usando el paquete de consulta para la marca fiskars). Entonces, "hacha de corte de acero fiskars":

Y automaticemos todo
En principio, el resultado parece bueno, pero si observa de cerca, puede notar fácilmente opciones completamente irrelevantes. Es bastante fácil llevar a cabo las verificaciones necesarias sin intervención humana, mira el informe:

El resultado es negativo, porque en el conjunto final hay demasiados productos realmente irrelevantes (no necesita una cuchilla y también toma el machete). Naturalmente, la función de evaluación se reemplaza fácilmente por una menos "agresiva". En futuras versiones, esperamos implementar un puntaje de producto más flexible y expandir la funcionalidad básica.
El veredicto
En la versión actual, Walmart no estaba impresionado, su calificación de Fiskars no es muy alta:

No pienses que todo es muy malo. En muchos, incluso en los casos más triviales, los resultados son correctos, pero para mejorar aún más la búsqueda, solo es necesario resaltar todos los puntos potencialmente problemáticos. Usando la herramienta propuesta siempre existe la oportunidad:
- cambiar a otra puntuación
- eliminar solicitudes objetables
- arreglar la búsqueda :)
Le brindamos la oportunidad de evaluar la complejidad de las consultas:

Referencias
- Calidad de búsqueda basada en intenciones
- API de calidad de búsqueda
- "Tengo la intención de comprar" o la forma más fácil de evaluar la calidad de una búsqueda de comestibles
- Bicicletas de gas o búsquedas de productos extraños (comercio electrónico)