El primer caso de trampas del mundo en la investigación de IA

Imagenet Challenge es una competencia internacional para sistemas de reconocimiento de patrones. Según las condiciones, un programa de computadora debe reconocer y clasificar una cantidad de objetos en imágenes digitales, identificando una de las 1000 categorías temáticas.

Muchas grandes empresas participan en la competencia, que asigna grandes presupuestos para tales desarrollos. Por lo tanto, las noticias sobre el engaño de la compañía china Baidu causaron un verdadero escándalo: dicen que este es el primer caso de fraude en el desarrollo de sistemas de inteligencia artificial. Como resultado, Baidu está excluido de la competencia de Imagenet para el próximo año.

El desafío de Imagenet se compara con la prueba de Turing para sistemas de IA, aunque la tarea aquí no es una conversación significativa, sino un reconocimiento de patrones. Pero esta también es una tarea muy importante para la IA.

En un artículo científico , los ingenieros de Baidu describen una supercomputadora que supuestamente muestra un mejor resultado en el reconocimiento de objetos que los diseños anteriores, incluidos los de Google y Microsoft. Los chinos dijeron que su programa mostró una tasa de error baja récord de 4.58%, mientras que la cifra de Google fue de 4.82% y la de Microsoft de 4.9%.

Baidu publicó la publicación en Arxiv.org electrónicamente. Los artículos se publican en este sitio sin verificación previa. La situación se vio agravada por el hecho de que un par de días después las noticias sobre el "logro" de los ingenieros chinos fueron reimpresas por el MIT Technology Review y otras publicaciones científicas. Solo tres semanas después, se reveló el hecho de hacer trampa y se actualizó el artículo.

La investigación mostró que Baidu ha registrado al menos 30 cuentas para participar en Imagenet Challenge y en los últimos seis meses ha presentado más de 200 solicitudes con resultados, incluidas más de 40 solicitudes en un período de cinco días en marzo de 2015.

Baidu luego se disculpó públicamente por su acción.

Esta historia muestra una vez más que la investigación en el campo del reconocimiento de patrones es ahora una de las principales direcciones en TI, incluso si las grandes empresas no se avergüenzan de usar tales trucos para colocarse por delante de la competencia.

Source: https://habr.com/ru/post/es380701/