"Les ordinateurs voient ces gens", a déclaré Robbie Barrath sur Twitter, démontrant les peintures surréalistes créées par le réseau de neurones qu'il a écrit.
Honnêtement, ces œuvres ne sont pas agréables à voir. Les personnages dans les peintures ressemblent plus à des créatures de Silent Hill qu'à des gens - la plupart n'ont pas de tête, et s'ils le font, alors pour une raison quelconque, ils ressemblent à d'étranges textures violettes.
Et le développeur lui-même ne cache pas le fait que le résultat était assez effrayant. Dans une interview avec
CNet, Robbie appelle le travail du réseau neuronal "des gouttes surréalistes de chair avec des membres".
Et si les artistes du réseau neuronal antérieurs étaient discutés dans des cercles plus ou moins étroits, alors le 25 octobre 2018, ce sujet a créé une résonance. Cela est dû au fait qu'un groupe d'étudiants français appelé Obvious a vendu aux enchères une
image créée par un réseau de neurones, dont le code a été écrit par Robbie. Ainsi, trois étudiants avec le code de quelqu'un d'autre et une campagne de relations publiques brillante sont devenus des personnages clés dans les discussions sur l'IA-art. Est-ce mérité? Voyons cela.
Under the cut - une histoire sur Robbie Barrath, le droit d'auteur et le marketing réussi, qui a permis de gagner près d'un demi-million de dollars.
Qui est Robbie Barrat
Maintenant Robbie Barrath a 19 ans, il travaille et enseigne au Stanford Bioinformatics Laboratory.
Robbie a passé son enfance dans une ferme parentale en Virginie-Occidentale, loin des nouvelles technologies et des développements informatiques. Dans
une interview accordée au Stanford Daily, le type se souvient qu'un professeur d'éducation physique enseignait l'informatique à l'école et que les ordinateurs devaient être mis à jour. Cependant, cela n'a pas empêché Robbie d'étudier les réseaux de neurones.
Les réseaux de neurones pour Barrat étaient une sorte de passe-temps, qu'il passait beaucoup de temps après l'école. Au cours des derniers mois, il a donné des conférences sur la recherche sur l'intelligence artificielle et la neurobiologie, et l'image créée par son réseau de neurones apparaît sur la couverture de Bloomberg.
Couverture Bloomberg avec paysage peint AI. Source: 1fuzz.com«Je suis arrivé en Californie presque immédiatement après avoir obtenu mon diplôme d'études secondaires pour travailler chez NVIDIA. Ils ont remarqué un projet sur GitHub dans lequel j'ai enseigné au réseau neuronal comment écrire du rap, et m'a proposé un stage. «J'ai récemment quitté NVIDIA et je suis allé travailler au laboratoire.»
Le rappeur AI et les morceaux de Kanye West
Robbie Barrat a créé sa première IA à 17 ans - pour gagner l'argument. Ensuite, les participants au club de programmation de l'école, dont Robbie était le président, se sont demandé si l'intelligence artificielle peut effectuer des tâches mieux que les gens. Il a semblé à Barrat que la réponse était évidente, mais plusieurs pairs jusqu'au dernier ont défendu la théorie de la «supériorité humaine».
«Du coup, j'ai eu l'idée de créer un réseau neuronal capable de lire le rap», se souvient Barrat. Une semaine plus tard, lorsque le club s'est à nouveau réuni, il a présenté la chanson d'IA déjà écrite.
Le rap AI a été le premier grand projet de Robbie Barratt. Le développeur affirme qu'il a écrit la plupart du code source dans la soirée, et a passé les prochains jours à optimiser les résultats. La dernière itération a été entraînée sur 6 000 pistes de Kanye West et a pu générer des discours et des pauses qui sonnaient presque toujours chez le sujet.
"Initialement, l'IA a simplement échangé des phrases de chansons, mais maintenant elle peut écrire ses propres mots", a déclaré Barrat.
Lien vers le projet open source sur GitHub - ici .Couturier AI et défilé de mode de Balenciaga
Les chansons n'étaient que le début. En août 2018, Robbie a publié sur Twitter ses nouvelles meilleures pratiques - une collection de vêtements créée par l'IA basée sur des photos de modèles du défilé Balenciaga.
Robbie Barratt a collecté des images de modèles de vêtements Balenciaga dans des lookbooks, des campagnes publicitaires, des impressions et des catalogues en ligne au cours des deux derniers mois, puis les a utilisées pour former le réseau neuronal pix2pix.
La sortie ne s'est pas avérée pire que les originaux de Balenciaga. «Puisque le réseau neuronal ne se limite pas au goût, au style et à l’histoire de l’homme, il propose des choses qui n’auraient jamais traversé la tête d’une personne. J'aime la façon dont le réseau ignore la symétrie », écrit Barrat sur Twitter.
Par exemple, le réseau neuronal proposait un pantalon dans lequel la poche serait située en bas de la jambe. Robbie a tellement aimé cette idée qu'il a décidé d'en coudre pour lui-même et d'autres connaisseurs de mode.
Même si les idées de l'IA ne semblent pas toujours réalistes, Barrat pense que les concepteurs peuvent utiliser un tel outil pour trouver l'inspiration.
Gros plis et nombrils: quel type d'IA voit des personnes nues
Même avant le projet avec Balenciaga, Robbie a créé un réseau de neurones qui peut générer des images. Au début, il s'agissait de paysages et de portraits de personnes. Ils ont été suivis par une collection intitulée Nus, générée à partir d'échantillons de peintures avec des personnes nues.
Les réseaux de neurones peuvent créer des images, inventer des vêtements et écrire des chansons grâce en grande partie à Jan Goodfellow. Le document GAN de Goodfellow, publié en 2014, est une légende de l'IA. Ils disent que l'idée de créer des réseaux génératifs-compétitifs est venue à Jan après quelques verres de bière alors qu'il était assis avec des amis dans un pub. Goodfellow s'est alors demandé: et si les réseaux de neurones pouvaient rivaliser?
Les images créées à l'aide de GAN ont une esthétique particulière. Avec leur aide, nous pouvons voir comment les algorithmes traitent les informations.
Les réseaux savent copier des modèles visuels de base, mais ne savent pas comment les combiner les uns avec les autres. Cela se reflète également dans les peintures du réseau neuronal de Barrat - à première vue, il est quelque peu similaire aux corps humains, mais leurs frontières sont floues, les figures se fondent les unes dans les autres et les règles de l'anatomie sont en principe absentes.
«La création de bonnes peintures à haute résolution prend environ deux semaines. Le discriminateur a scanné encore et encore 30 000 tableaux. Il a probablement scanné l'ensemble des données au moins 10 000 fois. Il a donc fallu plusieurs millions d'échantillons pour former le réseau neuronal », a expliqué Barrat.
«Au début de la formation, les réseaux de neurones ne fonctionnaient pas bien. Le discriminateur n'a pas distingué l'image et le générateur a simplement créé du bruit. Mais alors que le générateur a reçu des commentaires du discriminateur, ce dernier s'est également entraîné: il a eu accès à la fois à de vraies images et à de fausses images créées par le générateur.
La collection de peintures de Nus était terrible, mais dans le bon sens. Le générateur essayait simplement d'obtenir un bon score du discriminateur. Il a constaté que le discriminateur ne faisait attention qu'aux fonctions de bas niveau - par exemple, les plis de graisse et le nombril. Lorsque le générateur a donné au discriminateur une image avec de tels composants, le réseau de test l'a considérée comme réelle. Le générateur a trompé le discriminateur en le nourrissant de ces terribles gouttes de chair à plis. Le discriminateur a dit: "oui, c'est un portrait d'un corps nu", et à ce moment la formation s'est arrêtée. Le générateur n'avait plus besoin de s'améliorer.
Quand les photos n'ont pas fonctionné, j'étais bouleversé. Mais il vaut la peine de reconnaître que les résultats sont assez divertissants. Si le discriminateur ne sautait que de belles images, elles attireraient l'attention de dix minutes. Nous avons déjà vu de nombreux portraits nus - les gens les ont peints la plupart de l'histoire. Le réseau de neurones crée un nouveau style de peinture, bien qu'il soit inhabituel. »
Lien vers le projet open source sur GitHub - ici .Alors, quel code?
Les images dessinées par AI ne sont pas une nouvelle direction, mais ne sont annoncées que récemment comme art. Le 25 octobre, le portrait d'Edmond de Belami, de la famille de Belami, créé par GAN, a été vendu chez Christie's pour 432 500 dollars. Des représentants de la maison de vente aux enchères ont déclaré que ce montant était presque 45 fois plus élevé que celui qui estimait le travail à l'avance.
Les auteurs de l'ouvrage étaient un groupe de trois étudiants français appelé Obvious. Comme ils l'ont noté après la vente aux enchères, le tableau était dédié à Jan Goodfellow: du français «bel ami» signifie «bon ami». À propos, l'auteur du code original, Robbie Barrata, a également été mentionné dans un discours de remerciement, mais de manière très indirecte.
«Nous tenons à remercier la communauté de l'IA, en particulier ceux qui ont utilisé la technologie pour la première fois. Il s'agit de Jan Goodfellow, le créateur de l'algorithme GAN, qui nous a inspiré le nom de la série Famille de Belamy, et Robbie Barrat, qui a eu une grande influence sur nous. C'est un moment passionnant, et nous espérons que cette vente attirera l'attention sur le travail que nos prédécesseurs et collègues font », a déclaré Hugo Kassel-Dupre, responsable technique chez Obvious.
Mais alors qu'Obvious était intrigué par les connaisseurs d'art, cela laissait plutôt perplexe les développeurs d'IA.
Dans une interview pour The Verge, Robbie a
déclaré qu'Obvious lui avait demandé d'utiliser le «composant» de son code. Mais après accord, ils ont commencé à produire des œuvres identiques à celles publiées sur son GitHub. À partir de ce moment, les développeurs d'IA ont commencé à raisonner à qui appartient le code: Barrat ou Obvious?
Le portail américain The Verge a consacré une enquête complète à cette question. D'autres artistes de l'IA l'ont rejoint.
Mario Klingemann, un artiste IA d'Allemagne, a été choqué que la vente aux enchères ait vendu le tableau pour des centaines de milliers de dollars. Dans une interview accordée au Washington Post, il a déclaré que pendant un certain temps, il considérait cela comme une "plaisanterie parmi les oligarques".
"Pour moi, il s'agit d'un travail amateur équivalent à des projets pour enfants que seuls les parents peuvent évaluer", a déclaré Klingemann. "Mais je pense que pour des gens qui n'ont jamais vu quelque chose comme ça auparavant, cela peut sembler intéressant."
Dans une lettre à The Verge, l'artiste a écrit: "Probablement 90% du travail réel a été réalisé par Barrat." Tom White, un universitaire et artiste en IA de Nouvelle-Zélande, a également déclaré à The Verge que le travail était très similaire.
«Je savais que les gens utiliseraient mon code comme composants de leurs projets. Mais je n'ai jamais pensé que quelqu'un le vendrait - ne serait-ce que parce que mon travail n'est pas encore d'une telle qualité. J'ai écrit ce code pendant mon temps libre quand j'étais encore à l'école », a déclaré Barrat dans un
commentaire au Washington Post.
Pourquoi, alors, Obvious gagne de l'argent sur les peintures, mais Robbie Barrath - pas?
Soit dit en passant, Obvious n'a jamais nié que son travail reposait sur le code de quelqu'un d'autre. Hugo Kassel-Dupre a confirmé que les éléments avaient été empruntés à Barrat: "En parlant du code, il n'a pas fait de gros changements, mais nous avons consacré beaucoup d'efforts à travailler avec le réseau neuronal lui-même."
De tout cela, la question se pose: comment une œuvre semi-amateur, semi-empruntée pourrait-elle généralement tomber entre les mains de Christie? Après tout, ce n'est pas seulement une maison de vente aux enchères - c'est le leader du marché mondial de l'art, dont le chiffre d'affaires total à la fin de 2015 s'élevait à 4,8 £ (7,4 milliards de dollars).
L'une des raisons du succès d'Obvious était probablement leur capacité à se déposer.
Dans les documents de presse que le trio a envoyés début 2018, des devises similaires retentissaient: «La créativité n'est pas seulement pour les gens», ainsi que «L'intelligence artificielle a réussi à créer de l'art». Ces nouvelles des médias étaient très demandées.
La première page du communiqué de presse, qu'Obvious a envoyé aux médias. Source: The VergeBien que les belles phrases ne soient pas entièrement vraies, Christie's était prête à l'acheter. Et, il s'est avéré qu'ils n'ont pas échoué.
Très probablement, Barrat, s'il le souhaite, ne prouvera rien de toute façon - mais il ne veut pas vraiment. À moins qu'il ne poste des messages piquants sur Twitter:
PS L'utilisation de l'intelligence artificielle sera discutée lors de deux de nos conférences.Tout d'abord, lors de la
Conférence d'Amnesty International de Kiev , qui se tiendra le 14 novembre.
Puis à la
conférence AI à Moscou , qui se tiendra le 22 novembre.