Wikipedia aprendió a detectar automáticamente las ediciones incorrectas de artículos usando AI

Fuente: Wikimedia La

enciclopedia en línea Wikipedia ha recibido una nueva herramienta: un servicio con elementos de IA que detectará automáticamente ediciones incorrectas de los materiales de recursos. El servicio ORES (Servicio de evaluación de revisión objetiva) verificará todas las ediciones en busca de spam o trolling. El creador de ORES es la Fundación Wikimedia. Los desarrolladores dicen que el nuevo servicio funciona como gafas de rayos X (de ahí la imagen del anuncio. El sistema ahora resaltará todo lo que parezca sospechoso y luego lo enviará al editor humano para su verificación. Si el administrador decide no usar la edición, el usuario que lo propuso recibirá una notificación Este sistema es más fácil de usar ya que no se están enviando notificaciones a los usuarios en este momento.

El equipo de la enciclopedia enseñó al sistema a distinguir entre ediciones no intencionales y lo que se llama "ediciones perjudiciales". La capacitación se realizó sobre ejemplos de materiales reales. Ahora el nuevo servicio ya se puede utilizar.

A continuación se muestra un ejemplo del servicio. Demuestra cómo los editores ven los materiales (izquierda) y lo que ve ORES (derecha). La probabilidad de que el texto sea normal es 0.0837. La probabilidad de daño intencional al texto es 0.9163. Como resultado, el editor humano comprende que realmente trataron de arruinar el texto. De hecho, la oración "Las llamas crecen en los árboles" no puede llamarse edición correcta.

ores.wmflabs.org/scores/enwiki/damaging/642215410



Y aquí hay un ejemplo de la evaluación del "factor humano"

ores.wmflabs.org/scores/enwiki/damaging/638307884



Esta no es la primera herramienta que funciona en beneficio de la enciclopedia en línea. Anteriormente, tales sistemas también intentaban enseñar cómo trabajar, pero los servicios antiguos no veían la diferencia entre la "edición dañina" y un error humano común.

El tiempo promedio de análisis de texto es de aproximadamente 100 milisegundos. Ahora compatible con 14 idiomas. Ya se realizaron 45 millones de evaluaciones. Esto no es tanto, ya que el número de ediciones de Wiki por día alcanza el medio millón. El nuevo servicio ayudará a los editores a evaluar de manera rápida y eficiente todas las ediciones ofrecidas por los usuarios.

Source: https://habr.com/ru/post/es387355/