
Muitas empresas de telecomunicações de nosso tempo estão se desenvolvendo em qualquer uma das áreas atualmente populares: inteligência artificial, realidade aumentada ou virtual, robôs, IoT. Gigantes como o Google não estão interessados em apenas um tópico, mas em muitos, destacando em alguns casos uma unidade inteira para trabalhar em uma determinada área. No caso da corporação, a Waymo está envolvida em veículos robóticos, Deepmind, inteligência artificial e redes neurais. Existem outras subsidiárias e muitas.
Em alguns casos, a corporação cria projetos híbridos que usam desenvolvimentos de vários campos. Por exemplo, o novo projeto do Google utiliza as conquistas da ciência e da tecnologia em áreas como inteligência artificial, realidade aumentada, óptica, aprendizado de máquina e medicina. A empresa decidiu usar tudo isso para criar um microscópio com realidade aumentada. O sistema, de acordo com os desenvolvedores, ajuda a identificar o câncer. Nem todos, mas com alta velocidade e precisão.
Uma equipe de pesquisadores apresentou os resultados de seu trabalho em uma reunião da
Associação Americana de Pesquisa do Câncer . As reuniões são realizadas anualmente, os maiores especialistas neste campo compartilham sua experiência, que têm algo a dizer, embora também não se importem em ouvir. Os pesquisadores publicaram um artigo sobre o tema do discurso, detalhando a criação de um
"microscópio de realidade aumentada" .
Segundo os cientistas, seu desenvolvimento ajudará os médicos a diagnosticar com rapidez e precisão a presença de câncer. Outro papel do projeto é estimular a adoção de novas tecnologias pelas comunidades científicas tradicionais. Nesse caso, estamos falando de um profundo aprendizado de máquina.
O sistema em questão consiste em um microscópio óptico modificado, que permite analisar a imagem visível em tempo real. Além disso, não é necessário criar um novo microscópio - as soluções existentes também podem ser modificadas. O design é montado a partir de componentes relativamente baratos, capazes de servir por um longo período de tempo. Ao mesmo tempo, você não precisa comprar dispositivos digitais caros, muito caros para organizações médicas e de pesquisa.
O microscópio não apenas aumenta o que está no campo de visão, mas também ajuda a pessoa a determinar o que exatamente está na ocular. Tanto quanto você pode entender, esse sistema de identificação de objetos é baseado no
TensorFlow . Ao treinar uma rede neural (faz parte de todo o sistema), você pode obter um híbrido muito eficaz de um microscópio convencional e um sistema digital. Além disso, o trabalho é realizado em tempo real.
Esquema geral do sistema e sua foto. Um elemento do design do microscópio é uma câmera digital com um campo de visão, como um olho humano. A imagem é transferida para um computador, onde é processada usando uma rede neural. Os resultados são exibidos na ocular usando uma tela AR especializada. Como resultado, parece que a pessoa está olhando para o objeto em si com explicações prontas para o que exatamente caiu nas mãos do pesquisadorO sistema destaca os elementos importantes da imagem com setas, contorno, texto, há também um feedback visual. No momento, o microscópio está trabalhando com dois algoritmos de detecção de câncer: o primeiro detecta metástases no câncer de mama, o segundo tenta detectar o câncer de próstata. Esses modelos funcionam com um aumento de 4-40 vezes. Se um problema for identificado, o microscópio desenha um contorno verde ao redor da área do problema.

A precisão da determinação do câncer é bastante alta - 98% para o câncer de mama e 96% para o câncer de próstata. Isso é maior do que com a análise tradicional.
Segundo representantes do Google, tudo isso pode ser útil para médicos de qualquer país. Agora, a detecção de câncer não é uma tarefa fácil, mas a plataforma de hardware e software permite que ela seja resolvida sem problemas. Se a tecnologia for adotada em todo o mundo, o número de cânceres detectados com sucesso em um estágio inicial pode aumentar, o que aumentará a expectativa de vida das pessoas.