Vidéo: un réseau de neurones décrit une promenade à Amsterdam

L'artiste américain a démontré les capacités du réseau neuronal NeuroTalk, qui décrit les scènes de la vidéo en temps réel. Le système a fait des erreurs, s'est corrigé lui-même, mais a parfois correctement expliqué ce qui se passait. «Un homme tient une saucisse dans un petit pain avec de la moutarde et du ketchup», «des ciseaux sont assis sur la table à côté du portefeuille» et «vue du train depuis la fenêtre du train» - dans la vidéo sous le chat.



Au cours des dernières années, les ordinateurs ont beaucoup appris sur la reconnaissance d'objets dans les images, qu'il s'agisse de visages, d'animaux ou de meubles. Les réseaux de neurones capables d'apprendre au fil du temps peuvent décrire des scènes complexes. D'après la vidéo tournée par l'artiste et programmeur américain Kyle MacDonald, il est clair que les systèmes sont loin d'être d'une précision absolue. MacDonald a modifié le réseau neuronal développé par des chercheurs de Stanford et de Google pour analyser la vidéo capturée sur une webcam dans les rues d'Amsterdam. Logiciel Open Source NeuralTalk

utilisé par l'artiste. Il est capable de décrire des scènes en temps réel. Le programme fait des erreurs, parfois se corrige. Parfois, de tels systèmes sont appelés intelligence artificielle, mais ils le font avec un étirement: lors de la description des images et de la vidéo, le logiciel ne comprend pas ce qui est dans l'image - il recherche simplement les connexions entre les objets.



Facebook travaille sur un système similaire . L'entreprise développe un système qui reconnaît les objets et les personnes sur les photos, notamment - pour rendre le réseau social plus accessible aux personnes handicapées. L'analyse vidéo de Facebook n'a pas encore été discutée, mais on peut supposer que l'entreprise envisage cette idée pour le cadre intellectuel du fil d'actualité.


À l'aide de ces photos, les développeurs de Facebook apprennent au système à reconnaître les races de chiens.

Source: https://habr.com/ru/post/fr387227/