Video: Neuronales Netz beschreibt einen Spaziergang in Amsterdam

Der amerikanische Künstler demonstrierte die Fähigkeiten des neuronalen NeuroTalk-Netzwerks, das die Szenen von Echtzeitvideos beschreibt. Das System hat Fehler gemacht, sich selbst korrigiert, aber manchmal richtig erzählt, was passiert ist. "Ein Mann hält eine Wurst in einem Brötchen mit Senf und Ketchup", "Schere sitzt auf dem Tisch neben der Brieftasche" und "Blick auf den Zug aus dem Zugfenster" - im Video unter der Katze.



In den letzten Jahren haben Computer viel über das Erkennen von Objekten in Bildern gelernt, sei es Gesichter, Tiere oder Möbel. Neuronale Netze, die im Laufe der Zeit lernen können, können komplexe Szenen beschreiben. Aus dem Video des amerikanischen Künstlers und Programmierers Kyle MacDonald geht hervor, dass die Systeme alles andere als absolut genau sind. MacDonald modifizierte das von Forschern aus Stanford und Google entwickelte neuronale Netzwerk, um Videos zu analysieren, die mit einer Webcam auf den Straßen von Amsterdam aufgenommen wurden. Vom

Künstler verwendete NeuralTalk Open Source-Software. Es ist in der Lage, Szenen in Echtzeit zu beschreiben. Das Programm macht Fehler, korrigiert sich manchmal von selbst. Manchmal werden solche Systeme als künstliche Intelligenz bezeichnet, aber sie tun dies mit einem gewissen Aufwand: Bei der Beschreibung von Bildern und Videos versteht die Software nicht, was auf dem Bild zu sehen ist - sie sucht nur nach Verbindungen zwischen Objekten.



Facebook arbeitet an einem ähnlichen System . Das Unternehmen entwickelt ein System, das Objekte und Personen auf Fotografien erkennt, einschließlich - um das soziale Netzwerk für Menschen mit Behinderungen zugänglicher zu machen. Die Facebook-Videoanalyse wurde noch nicht diskutiert, aber es kann davon ausgegangen werden, dass das Unternehmen diese Idee für die intellektuelle Einstellung des Newsfeeds in Betracht zieht.


Mithilfe dieser Fotos bringen Facebook-Entwickler dem System bei, Hunderassen zu erkennen.

Source: https://habr.com/ru/post/de387227/