
Banyak perusahaan telekomunikasi di zaman kita berkembang di salah satu bidang yang sedang populer: kecerdasan buatan, augmented reality atau virtual, robot, IoT. Raksasa seperti Google tidak hanya tertarik pada satu topik, tetapi dalam banyak hal, menyoroti dalam beberapa kasus seluruh unit untuk bekerja di area tertentu. Dalam kasus korporasi, Waymo terlibat dalam kendaraan robot, Deepmind, kecerdasan buatan dan jaringan saraf. Ada anak perusahaan lain, dan banyak.
Dalam beberapa kasus, perusahaan menciptakan proyek hibrida yang menggunakan pengembangan dari berbagai bidang. Misalnya, proyek Google baru menggunakan pencapaian sains dan teknologi dari berbagai bidang seperti kecerdasan buatan, augmented reality, optik, pembelajaran mesin, kedokteran. Perusahaan memutuskan untuk menggunakan semua ini untuk membuat mikroskop dengan augmented reality. Sistem, menurut pengembang, membantu mengidentifikasi kanker. Tidak semua, tetapi dengan kecepatan dan akurasi tinggi.
Sebuah tim peneliti mempresentasikan hasil pekerjaan mereka pada pertemuan
American Association for Cancer Research . Rapat diadakan setiap tahun, para ahli terbesar di bidang ini berbagi pengalaman mereka, yang memiliki sesuatu untuk diceritakan, meskipun mereka juga tidak keberatan mendengarkan. Para peneliti menerbitkan sebuah artikel tentang topik pidato, menceritakan secara rinci tentang penciptaan
"mikroskop augmented reality" .
Menurut para ilmuwan, perkembangan mereka akan membantu dokter dengan cepat dan akurat mendiagnosis keberadaan kanker. Peran lain dari proyek ini adalah untuk merangsang adopsi teknologi baru oleh komunitas ilmiah tradisional. Dalam hal ini, kita berbicara tentang pembelajaran mesin yang mendalam.
Sistem yang dimaksud terdiri dari mikroskop cahaya yang dimodifikasi, yang memungkinkan Anda untuk menganalisis gambar yang terlihat secara real time. Selain itu, tidak perlu membuat mikroskop baru - solusi yang ada juga dapat dimodifikasi. Desainnya dirakit dari komponen yang relatif murah yang mampu melayani untuk waktu yang cukup lama. Pada saat yang sama, Anda tidak perlu membeli perangkat digital yang mahal, yang sangat mahal untuk organisasi riset dan medis.
Mikroskop tidak hanya meningkatkan apa yang ada di bidang penglihatan, tetapi juga membantu seseorang menentukan apa yang sebenarnya ada di lensa mata. Sejauh yang Anda bisa mengerti, sistem identifikasi objek ini didasarkan pada
TensorFlow . Dengan melatih jaringan saraf (itu adalah bagian dari keseluruhan sistem), Anda bisa mendapatkan hibrida yang sangat efektif dari mikroskop konvensional dan sistem digital. Apalagi pekerjaan itu dilakukan secara real time.
Skema umum sistem dan fotonya. Unsur desain mikroskop adalah kamera digital dengan bidang pandang, seperti mata manusia. Gambar ditransfer ke komputer, di mana ia diproses menggunakan jaringan saraf. Hasilnya ditampilkan pada lensa mata menggunakan layar AR khusus. Akibatnya, tampaknya orang tersebut melihat objek itu sendiri dengan penjelasan siap pakai untuk apa yang sebenarnya jatuh ke tangan peneliti.Sistem menyoroti elemen-elemen penting dari gambar dengan panah, kontur, teks, ada juga umpan balik visual. Saat ini, mikroskop bekerja dengan dua algoritma pendeteksi kanker: yang pertama mendeteksi metastasis pada kanker payudara, yang kedua mencoba untuk mendeteksi kanker prostat. Model-model ini bekerja dengan peningkatan 4-40 kali. Jika masalah teridentifikasi, mikroskop menggambar garis hijau di sekitar area masalah.

Keakuratan menentukan kanker cukup tinggi - 98% untuk kanker payudara dan 96% untuk kanker prostat. Ini lebih tinggi daripada dengan analisis tradisional.
Menurut perwakilan Google, semua ini dapat bermanfaat bagi dokter dari negara mana pun. Sekarang deteksi kanker bukanlah tugas yang mudah, tetapi platform perangkat keras dan lunak memungkinkannya untuk dipecahkan tanpa masalah. Jika teknologi diadopsi di seluruh dunia, jumlah kanker yang berhasil terdeteksi pada tahap awal dapat meningkat, yang akan meningkatkan harapan hidup orang.