Google développe un microscope AR pour la détection rapide du cancer

De nombreuses entreprises de télécommunications de notre époque se développent dans l'un des domaines actuellement populaires: intelligence artificielle, réalité augmentée ou virtuelle, robots, IoT. Les géants tels que Google ne sont pas intéressés par un seul sujet, mais dans plusieurs, mettant en évidence dans certains cas une unité entière pour travailler dans un certain domaine. Dans le cas de la société, Waymo est engagée dans les véhicules robotiques, Deepmind, l'intelligence artificielle et les réseaux de neurones. Il existe d'autres filiales, et beaucoup.

Dans certains cas, la société crée des projets hybrides qui utilisent des développements dans divers domaines. Par exemple, le nouveau projet Google utilise les réalisations de la science et de la technologie dans des domaines tels que l'intelligence artificielle, la réalité augmentée, l'optique, l'apprentissage automatique, la médecine. L'entreprise a décidé d'utiliser tout cela pour créer un microscope à réalité augmentée. Le système, selon les développeurs, aide à identifier le cancer. Pas tous, mais avec une vitesse et une précision élevées.

Une équipe de chercheurs a présenté les résultats de leurs travaux lors d'une réunion de l' American Association for Cancer Research . Des réunions ont lieu chaque année, les plus grands experts dans ce domaine partagent leur expérience, qui ont quelque chose à dire, même s'ils ne sont pas gênés par l'écoute. Les chercheurs ont publié un article sur le sujet du discours, racontant en détail la création d'un «microscope de réalité augmentée» .

Selon les scientifiques, leur développement aidera les médecins à diagnostiquer rapidement et avec précision la présence d'un cancer. Un autre rôle du projet est de stimuler l'adoption de nouvelles technologies par les communautés scientifiques traditionnelles. Dans ce cas, nous parlons de machine learning profond.

Le système en question consiste en un microscope optique modifié, qui vous permet d'analyser l'image visible en temps réel. De plus, il n'est pas nécessaire de créer un nouveau microscope - les solutions existantes peuvent également être modifiées. La conception est assemblée à partir de composants relativement peu coûteux qui peuvent servir assez longtemps. Dans le même temps, vous n'avez pas besoin d'acheter des appareils numériques coûteux, qui sont très chers pour la recherche et les organisations médicales.


Le microscope augmente non seulement ce qui se trouve dans le champ de vision, mais aide également une personne à déterminer exactement ce qui se trouve dans l'oculaire. Pour autant que vous puissiez comprendre, ce système d'identification d'objet est basé sur TensorFlow . En formant un réseau neuronal (il fait partie de l'ensemble du système), vous pouvez obtenir un hybride très efficace d'un microscope conventionnel et d'un système numérique. De plus, le travail est effectué en temps réel.


Schéma général du système et sa photo. Un élément de la conception du microscope est un appareil photo numérique avec un champ de vision, comme un œil humain. L'image est transférée sur un ordinateur, où elle est traitée à l'aide d'un réseau neuronal. Les résultats sont affichés sur l'oculaire à l'aide d'un écran AR spécialisé. En conséquence, il semble que la personne regarde l'objet lui-même avec des explications toutes faites pour ce qui est exactement tombé entre les mains du chercheur

Le système met en évidence les éléments importants de l'image avec des flèches, contour, texte, il y a aussi un retour visuel. À l'heure actuelle, le microscope fonctionne avec deux algorithmes de détection du cancer: le premier détecte les métastases dans le cancer du sein, le second essaie de détecter le cancer de la prostate. Ces modèles fonctionnent avec une augmentation de 4 à 40 fois. Si un problème est identifié, le microscope trace un contour vert autour de la zone à problème.



La précision de la détermination du cancer est assez élevée - 98% pour le cancer du sein et 96% pour le cancer de la prostate. C'est plus élevé qu'avec l'analyse traditionnelle.

Selon les représentants de Google, tout cela peut être utile aux médecins de n'importe quel pays. Désormais, la détection du cancer n'est pas une tâche facile, mais la plate-forme matérielle et logicielle permet de la résoudre sans aucun problème. Si la technologie est adoptée partout dans le monde, le nombre de cancers détectés avec succès à un stade précoce peut augmenter, ce qui augmentera l'espérance de vie des personnes.