Google a récemment organisé une conférence au cours de laquelle a présenté les dernières nouvelles, parmi lesquelles la caméra Google Clips a fait sensation. Imaginez un appareil photo numérique ordinaire: regardez l'écran, ajustez les paramètres, appuyez sur le bouton pour faire une photo ... Donc, dans Clips, rien de tout cela! Au lieu d'une personne, l'intelligence artificielle est responsable de la photo, et il suffit de regarder les clips qui se sont finalement révélés. L'appareil photo n'a pas du tout d'affichage - il regarde le monde avec son propre objectif et pense qu'il serait retiré.
GoPro partage le lendemain de la présentation de Google Clips une baisse de 5% et n'est toujours pas revenu aux niveaux précédents. Et l'IA dans la chambre a déjà choqué Ilon Mask - du fait qu'il n'essaye même plus de paraître innocent. Le colis regarde d'où vient tout ce bruit.
Quelle bête
Google Clips - un petit appareil en plastique, un carré avec des côtés de cinq centimètres, qui peut être fixé sur une chemise comme un clip ou posé sur une table. Extérieurement, la caméra ressemble à une icône Instagram qui est apparue dans le monde réel. Couleur - blanc à l'avant et turquoise à l'arrière.
Pour allumer l'appareil, il vous suffit de faire pivoter l'objectif. De plus, selon Google, vous pouvez oublier la caméra. Clips elle-même suit tout ce qui se passe dans son champ de vision de 130 degrés et enregistre des clips de sept secondes de ce qu'elle trouve intéressant. Au fil du temps, l'appareil se souvient des visages et essaie de prendre plus de photos de personnes «familières» et moins de photos de passants aléatoires. La même IA s'applique aux animaux. Les clips ne photographieront pas un chat étranger inconnu, brûlé par, s'il n'a rien fait de spécial. Et voici votre animal préféré - s'il vous plaît, il suffit de tourner magnifiquement la tête ou de lever la patte.
Google pense que ce sera très agréable: laissez l'appareil photo pour prendre soin des enfants ou des animaux domestiques et revenez aux clips cliqués avec les moments les plus drôles. De plus, la caméra reprend les habitudes de ses propriétaires et reconnaît finalement les visages des personnes et des animaux qui tombent souvent dans son objectif.L'appareil est similaire à un appareil photo traditionnel, sauf par la présence d'un objectif. Il n'y a pas d'obturateur et de viseur familiers, l'appareil n'est pas conçu pour être tenu en main. Tout ce qui est un clip en silicone, grâce auquel l'appareil peut être placé sur une surface horizontale ou attaché aux vêtements à n'importe quel angle, et le port ci-dessous pour la recharge. Les clips sont transférés sur le smartphone via Wi-Fi et y sont ouverts dans une application spéciale. Entre eux, vous pouvez glisser pour laisser les images que vous aimez. Il y a aussi une section avec ces images que le système considère comme «moins intéressantes». Les clips sont exportés aux formats JPEG, GIF, vidéo et Motion Photos (pour les smartphones Samsung).
Comment l'intelligence artificielle dans Google Clips prend-elle la décision de tirer? Lors de la présentation, Juston Payne , le chef de l'équipe de développement de l'appareil, a décrit le courant de pensée de la machine comme suit:
Tout commence par la question: «Y a-t-il un visage dans le cadre? Est-ce que je connais ce visage? Cette personne a-t-elle certaines propriétés? Ouvrez les yeux, souriez, etc. » Ensuite, l'IA réfléchit à la qualité du cadre. L'éclairage est-il adapté? Le cadre sera-t-il flou?
En fait, tout est bien sûr un peu plus compliqué. Par exemple, Clips a un besoin de nouveauté: elle essaiera de ne pas vous donner la même chose et tiendra compte des photos que vous avez aimées.
L'utilisateur peut également agir comme opérateur. Devant, sous l'objectif, il y a un petit obturateur, quand on appuie dessus, un clip est fait. Et dans l'application sur le smartphone fonctionne "diffusion en direct". Vous pouvez voir tout ce que l'appareil photo regarde et le commander à distance pour commencer la prise de vue.
Big Brother vous regarde
Après la présentation aux États-Unis, il y a eu naturellement une agitation au sujet de l'espionnage de Google. Par exemple, mettre un œil qui voit tout dans votre chambre, qui pense aussi quelque chose là-bas, est effrayant. Il y a un autre camp - ceux qui trouvent les caméras de conception très mignonnes, alors ils soupçonnent un joli objet en surveillance comme le blasphème. Google dit qu'il vous sera toujours clair si l'appareil photo prend des photos, car il clignotera une LED blanche.
Essayant d'éviter les rumeurs inutiles, les développeurs ont également fait tout leur possible pour protéger les informations personnelles de l'utilisateur. Tout d'abord, tout le travail des clips est effectué localement. Il n'envoie aucune donnée au «cerveau» de Google, à l'exception des images que vous enregistrez vous-même dans Google Photos. La reconnaissance faciale est également effectuée par l'appareil photo lui-même. Elle ne sait pas où vit une personne et ne compare les visages aux noms d'aucune base de données. Deuxièmement, les clips créés ne sont envoyés nulle part. Ils sont stockés sur l'appareil photo - jusqu'à ce qu'il soit synchronisé avec votre smartphone et que vous ne demandiez pas vous-même de les visualiser. Troisièmement, ces clips sont cryptés. Si le clip vous tombe soudainement pendant une promenade, les gens ne pourront pas voir ce qui se trouve sous sa boîte.
En parlant de ça ...
À l'intérieur
Contrairement à la colonne intelligente de Google Home, qui repose entièrement sur la connexion au cloud, Google Clips est un objet complètement autonome. Elle regarde ce qui se passe autour d'elle, choisit un moment, prend une photo, l'envoie à un smartphone - et tout cela par elle-même. Pour un appareil un peu plus grand qu'une boîte d'allumettes, les possibilités sont très impressionnantes. Cela a été dit par Remy El-Ouzzana, le chef de l'équipe Intel, qui a travaillé sur un processeur de traitement d'image basse consommation (VPU) pour Clips:
Nous avons tous été surpris de voir à quel point Google pouvait intégrer un si petit appareil. Cette caméra intelligente montre le niveau d'IA intégré dont nous ne pouvions que rêver auparavant.
Pour que le cerveau électronique travaillant à l'intérieur de Clips apprenne à distinguer la bonne de la mauvaise photographie, Google a collaboré avec des éditeurs professionnels et toute une armée d'évaluateurs d'images. "Il n'y a pas de modèle d'apprentissage automatique qui pourrait dire: un enfant rampe par terre, ça a probablement l'air bien", a expliqué Juston Payne. Par conséquent, Google a collecté des téraoctets de sa propre vidéo. Et puis les évaluateurs lui ont donné des points, c'était marqué et est devenu une base de formation à l'intelligence artificielle. Au fil du temps, l'appareil a commencé à comprendre la psychologie des gens, à sentir qu'ils aiment, qu'ils sont intéressés. Ce processus n'est pas terminé: les Google Clips fournis par l'usine sont toujours en cours d'apprentissage. Si vous livrez deux caméras identiques à vous et à votre ami, dans quelques semaines, ils commenceront à tirer des choses différentes.
L'apprentissage automatique de Google présente un inconvénient. Jusqu'à présent, Clips ne reconnaît que bien les personnes et les animaux (en fait, seuls les chats et les chiens - les hamsters ou les porcs domestiques ne sont pas intéressants pour la caméra). Vous ne pouvez pas prendre l'appareil en vacances et espérer qu'elle sera ravie du coucher du soleil ou faire des clips avec des palmiers qui se balancent. Au fil du temps, Google va étendre le modèle d'apprentissage automatique, le faire prendre en charge plus de situations, être capable de comprendre le monde.
Quant aux spécifications techniques , l'appareil est équipé d'un capteur de 12 mégapixels; il est capable d'enregistrer une série d'images à une vitesse de 15 ips. Le stockage interne - 16 Go semble très modeste, mais en fait il suffit de stocker deux jours complets de clips. Il n'y a pas de microphone, l'appareil ne peut enregistrer que des images. La batterie dure plus ou moins trois heures de travail actif - cela dépend s'il y a quelque chose d'intéressant qu'elle peut tirer. S'il n'y a rien, la caméra, comme disent les représentants de Google, "s'ennuie".
Résidu sec
Jusqu'à présent, les clips ne peuvent fonctionner qu'avec les smartphones Pixel, iPhone, Samsung Galaxy S7 et Galaxy S8. Les chefs de projet promettent que la prise en charge d'autres smartphones est imminente. La date de sortie officielle de la caméra lors de la présentation n'a pas été annoncée. Nous savons seulement que cela coûtera 249 $ et sera disponible aux États-Unis dans un "avenir proche".

Google s'attend à ce que l'appareil soit demandé par les jeunes familles, les propriétaires de chiens ou de chats et seulement ceux qui veulent des photos intéressantes, mais qui sont trop occupés pour s'asseoir et attendre la photo parfaite. Clips a le potentiel de combiner les fonctions de GoPro, une «boîte à savon» ordinaire et une caméra pour «lifelogging». Ne confond que la faible qualité des images. Mais tous les examinateurs qui ont eu accès à l'appareil conviennent que l'intelligence artificielle qu'il contient n'est pas un stratagème de marketing, mais un assistant vraiment très utile et intéressant. Vous mettez la caméra dans la pièce et jouez calmement avec vos enfants, oubliant tout ce qui est superflu. Et après quelques heures, la caméra est pleine de clips avec les moments les plus intéressants.
À propos de la fourniture de Google Clips à la Russie ne parle pas. Mais tous les autres gadgets populaires, y compris le "septième" moins cher ou le nouveau "huitième" iPhone , provenant des États-Unis aux meilleurs tarifs, livrent un colis . Économisez de l'argent en achetant des appareils directement en Amérique. Jusqu'au 31 octobre, nous aidons à passer des commandes dans 7 magasins américains gratuitement (vous pouvez par exemple acheter de bons vêtements à des prix raisonnables). Et les lecteurs Geektimes qui s'inscrivent sur ce lien bénéficient d'une remise de 7% sur leur première livraison. Le Black Friday est en avance, il est temps de commencer à se préparer!

Quelques autres articles du Parcel: