Comment Gcam a créé le mode HDR + pour les caméras de smartphones

image

Gcam a développé une solution pour l'appareil photo Google Pixel et un certain nombre d'autres produits contenant Alphabet liés au traitement d'image d'une manière ou d'une autre. La société est apparue en 2011 lorsque Sebastian Trun , alors à la tête de Google X , cherchait une caméra qui pourrait être installée dans Google Glass . Avec ces lunettes, l'appareil photo permet de prendre des photos «à la première personne» et de partager des moments lumineux avec les autres sans avoir besoin d'un appareil photo ou d'un smartphone.

Cette fonctionnalité peut être utile pour tout utilisateur, des parents avec de jeunes enfants aux médecins effectuant des chirurgies. Cependant, pour que les gens souhaitent utiliser le verre, les capacités de prise de vue des lunettes doivent être au moins au niveau des smartphones phares existants.

Aux premières étapes du développement de Glass, il y a eu des problèmes avec la caméra. Elle était trop petite et manquait de lumière, donc les photos dans l'obscurité ou à contraste élevé étaient de mauvaise qualité. Comparé aux mêmes smartphones, le capteur de l'appareil photo s'est avéré trop petit, ce qui a encore réduit les performances dans des conditions de faible luminosité et de plage dynamique. De plus, les lunettes avaient une puissance de traitement et une batterie très limitées.

Étant donné que les lunettes doivent s'avérer légères et adaptées à une usure constante, il n'est pas possible de trouver un appareil photo plus grand pour résoudre ce problème. Par conséquent, l'équipe a commencé à chercher d'autres moyens. Ensuite, les créateurs se sont posé la question: que faire si, au lieu d'essayer de résoudre le problème au niveau matériel, essayez de le faire en utilisant des produits logiciels?

image

L'entreprise a participé au développement de Google Glass, Marc Levoy, maître de conférences en informatique à l'Université de Stanford , qui est également un expert en photographie informatique . Il s'intéresse particulièrement aux technologies logicielles de capture et de traitement d'image.

En 2011, Livoy a créé une équipe dans Google X, connue sous le nom de Gcam. Sa tâche était d'améliorer les photographies sur les appareils mobiles en utilisant les techniques informatiques de la photographie. À la recherche d'une solution aux problèmes posés par le projet Glass, l'équipe de Gcam a exploré une méthode appelée Image Fusion , qui prend une série rapide de photographies puis les combine pour créer une meilleure prise de vue. Cette technologie a "tiré" les détails des images avec un éclairage tamisé. Et en général, les photos étaient plus lumineuses et plus nettes.

Image Fusion a fait ses débuts dans Glass en 2013, et il est vite devenu clair que la technologie pouvait être appliquée aux produits d'autres lignes. Comme les gens ont commencé à prendre des photos plus souvent afin de partager des points importants avec d'autres, le logiciel sur lequel les caméras fonctionnaient devrait fournir une belle image indépendamment de l'éclairage.

La prochaine version d'Image Fusion a reçu le nouveau nom HDR +, a dépassé le cadre du projet Glass et a été lancée dans l'application pour la caméra Android dans le Nexus 5, puis dans le Nexus 6.

Aujourd'hui, cette fonctionnalité s'est répandue parmi de nombreuses applications et produits, et l'équipe Gcam est passée à Google Research en 2015. Gcam développe actuellement une technologie pour Android, YouTube, Google Photos et Jump VR. Certaines des solutions de l'équipe sont incluses dans Lens Blur , une application pour l'appareil photo de Google, ainsi qu'un logiciel qui assemble des vidéos dans des panoramas dans Jump Virtual Reality.

Il n'y a pas si longtemps, la technologie HDR + était entrée par défaut dans le smartphone Google Pixel comme mode. L'équipe DxOMark, l'une des évaluations de caméras les plus objectives, a déclaré que le Pixel était «le meilleur appareil photo pour smartphone jamais créé».

En 2016, réfléchissant à la poursuite du développement du projet, Marc Livoy a déclaré: «Il a fallu cinq ans pour tout faire vraiment bien. Nous avons la chance que Google X ait donné à notre équipe une direction pour le développement et l'indépendance à long terme. "

Que se passera-t-il ensuite avec Gcam? Marc Livoy, qui a commencé sa carrière avec le développement du système d'animation animé utilisé par Hanna-Barbera, est ravi de la future équipe. L'un des domaines où il sera mis en œuvre à l'avenir est la technologie d'apprentissage automatique.

«Il existe de nombreux produits qui modifient réellement la perception et la sensation de l'image. Il peut même être si simple à première vue des choses comme un filtre pour régler la balance des blancs. Ou ceux qui peuvent faire quelque chose avec le fond - l'assombrir, l'éclaircir ou le styliser. Nous sommes au meilleur endroit au monde en termes de développement de la technologie dans le domaine de l'apprentissage automatique, nous avons donc une réelle opportunité de combiner le monde créatif avec le monde de la photographie informatique », a déclaré Livoy.

Source: https://habr.com/ru/post/fr402731/


All Articles