Un réseau de neurones détermine le rappel d'image

Cette photo que vous oublierez bientôt

Des chercheurs du laboratoire d’informatique et d’intelligence artificielle du Massachusetts Institute of Technology ont développé un algorithme qui détermine le rappel des images. De plus, basé sur cet algorithme, une application pour améliorer les photos a été créée afin qu'elles soient bien imprimées dans le cerveau.

Comme vous pouvez le deviner, l'algorithme a été développé en entraînant le réseau neuronal. La formation s'est déroulée en public. Pendant la formation, chaque photo de l'album a été montrée 600 millisecondes, puis une pause de 800 millisecondes, puis des dizaines d'autres photos ont suivi. Après un temps aléatoire, la première photo a été répétée. Quelques autres photographies ont également été répétées plus tard. À tout moment, l'utilisateur peut appuyer sur un bouton et signaler qu'il a reconnu la photo. Ainsi, le réseau neuronal a reçu des informations sur les photos dont on se souvient le mieux.

À la suite de la formation, le réseau neuronal a appris à prédire littéralement la mémoire humaine. De plus, il met en évidence les zones avec une mémorisation élevée et faible dans le cadre, grâce auxquelles la photo peut être optimisée.



En conséquence, les chercheurs ont compilé une grande base de données de 60 000 photographies avec un indice de rappel - LaMem (Large-scale Memorability Dataset).

L'algorithme s'appelle MemNet, il y a une page de démonstration en ligne .

Un modèle de réseau neuronal pré-préparé peut être téléchargé et testé hors ligne à l'aide du cadre Caffe .

«Comprendre la mémorisation aidera à créer des systèmes qui stockent les informations les plus importantes ou, à l'inverse, conservent ces informations que les gens sont le plus susceptibles d'oublier», explique Aditya Khosla, étudiante diplômée au Laboratoire d'informatique et d'intelligence artificielle, auteur principal du projet scientifique. «C'est comme avoir un groupe de discussion accessible instantanément qui parle de la probabilité de se souvenir d'un message visuel particulier.»

Un tel système peut être appliqué dans divers domaines: de l'amélioration de l'efficacité des publicités et des messages sur un réseau social à l'élaboration de supports de formation plus efficaces. Ou en tant qu'assistant personnel qui vous apporte des informations de la manière la plus mémorable.

Les développeurs du projet ont non seulement publié la conception du réseau de neurones, mais sont également prêts à fournir à chacun une base de données LaMem avec 60 000 photos annotées ( sur demande ).

Une discussion plus détaillée de la formation des réseaux de neurones convolutifs et du fonctionnement de l'algorithme MemNet est décrite dans un article scientifique . Il décrit comment la base a été compilée, comment le jeu de mémoire visuelle a été joué pendant la formation du réseau neuronal et, finalement, comment les résultats du travail du réseau neuronal ont été vérifiés après sa formation.

Source: https://habr.com/ru/post/fr388175/