Kacamata AR beraksi. Kasus nyata tentang bagaimana augmented reality menemukan aplikasi di berbagai bidang bisnis

Berbicara tentang kacamata video Epson Moverio , kita sering menghadapi skeptisisme (baik dalam komentar maupun dalam pesan PM): “Kacamata Anda hanyalah mainan mahal. Atau mainkan Pokemon go, mungkin . Atau, seperti yang dicatat oleh salah satu pembaca kami dengan anggun, “peluit perhiasan”:




Oleh karena itu, menggali di Internet, saya memutuskan untuk mengumpulkan kasus nyata dari seluruh dunia yang menunjukkan bagaimana perangkat seperti itu ( tidak harus dibuat oleh Epson ) dapat berguna di mana Anda perlu membebaskan tangan karyawan, meningkatkan efisiensi kerja, dan mengurangi risiko "kesalahan manusia".


Saya mencoba memilih proyek yang paling menarik dari beberapa bidang: logistik, kedokteran, dukungan teknis, pembuatan pesawat terbang dan membantu orang-orang cacat.




VR atau AR?


Untuk jaga-jaga, saya akan mulai dengan memisahkan konsep VR dan AR. Kedua teknologi mengejar tujuan mereka dan cocok untuk tugas yang berbeda.


Tugas dari realitas virtual adalah untuk mentransfer pengguna ke dunia yang sepenuhnya dibuat secara artifisial. Ini paling sering digunakan untuk proyek simulasi dan permainan. Itulah sebabnya efek maksimum perendaman terasa di helm khusus yang menghalangi sebagian besar sinyal dari luar. VR bisa stasioner dan mobile, termasuk penggunaan gadget yang tidak biasa seperti kacamata dengan cermin .




Augmented reality - mudah ditebak tentang apa itu, jika Anda mengingat film "Iron Man". Semua indikator yang diperlukan ditampilkan pada kaca helm Tony, sementara layar itu sendiri transparan.




Mari kita bawa poin utama ke tabel sederhana:

VRAR
PerangkatHelm (+ smartphone), pengontrol (+ pelacak)Telepon pintar, tablet, kacamata video
Arah utamaGame, simulasi, pengembangan keterampilanGame, panduan visual, inspeksi visual, pemeliharaan peralatan
MobilitasKebanyakan helm VR stasioner memiliki kabel. Mereka harus cukup panjang agar tidak terlalu membatasi pergerakan, dan kuat, karena itu jelas mengapa.

Untuk bergerak, diperlukan penyesuaian tambahan untuk parameter ruangan. Penempatan sensor yang tepat, kalibrasi dan pemasangan helm selanjutnya diperlukan.

Helm VR seluler bebas dari masalah ini, tetapi Anda dapat menabrak sesuatu. Situasi berubah menjadi lebih baik dengan rilis Oculus Quest dan Rift S dengan kamera terintegrasi. Kami mengamati dengan cermat.
Layar kacamata transparan, sehingga pengguna melihat segala sesuatu terjadi di sekitarnya.

Namun, petunjuk untuk kacamata kita, misalnya, menyatakan bahwa dilarang mengendarai mobil di dalamnya. Meskipun, jika Anda memikirkannya, saya bahkan tidak akan mengendarai helm ...

Sebuah tablet atau telepon harus disimpan di depan mata Anda ketika melihat layar proyeksi di atas gambar kamera.
Kenyamanan fisikBanyak ketidaknyamanan, dimulai dengan keengganan untuk memanjakan rambut, berakhir dengan fakta bahwa banyak pengguna memiliki wajah berkeringat di bawah topeng.

Mengenakan helm VR untuk waktu yang lama membuat mata dan leher Anda sangat lelah. Saya tidak akan bercerita tentang pusing dan goncangan aparat vestibular ketika bergerak di ruang virtual tanpa bergerak secara nyata - siapa pun yang mencobanya, mereka tahu bagaimana rasanya bertahan dari "mabuk perjalanan" seperti itu.
Kacamata AR jauh lebih mudah, mengenakan / lepas landas lebih cepat, dalam rilis terbaru kami, misalnya, mereka terpasang dengan baik, sehingga mereka tidak "terbang" dari kepala bahkan dengan memiringkan kepala yang paling parah. Karena kenyataan bahwa itu transparan, tidak ada efek "bue-e" ketika bergerak, karena ruang di sekeliling nyata selalu ada di depan mata Anda. Ngomong-ngomong, inilah alasan mengapa kacamata AR digunakan di lingkungan profesional, bukan helm: Anda tidak perlu mencari orang dengan "vestibular" yang kuat - hampir semua orang dapat menanganinya.

Saya tidak akan mempelajari deskripsi kacamatanya sendiri, mereka telah diberitahu tentang mereka berkali-kali. Misalnya, di sini (Epson BT-200) , di sini (Epson BT-300) dan di sini (Epson BT-35E) .


Dua jenis utama penggunaan AR "dalam aksi"


Yang pertama adalah demonstrasi informasi. Operator bekerja dengan manual pra-instal yang dengan jelas menunjukkan proses perakitan, pembongkaran, pemeliharaan sesuatu atau melihat data yang dimuat sebelumnya, yang dalam arti harfiah seharusnya ada di depan mata Anda.


Yang kedua adalah dukungan jarak jauh dalam situasi darurat. Dalam waktu nyata, spesialis jarak jauh melihat gambar dari kamera internal dan mengirimkan tip interaktif dan memandu pengguna dalam tindakannya.


Penting untuk dicatat bahwa kemampuan aplikasi hanya bergantung pada perangkat lunak yang dikembangkan untuk tugas tertentu. Itulah sebabnya semua versi kacamata Epson, misalnya, memiliki SDK terbuka.


Mari kita beralih ke kasus-kasus menarik dalam kategori utama, kalau tidak saya sudah lelah!


Logistik


Beberapa tahun yang lalu, DHL menguji augmented reality di sebuah gudang di Bergen op-Som (Belanda), di mana karyawan diberi kacamata pintar. Pada tampilan titik-titik, rute ke barang ditampilkan dan hanya barang-barang yang perlu dikumpulkan dalam urutan tertentu. Proyek percontohan menunjukkan hasil yang sangat baik: logistik dan proses seleksi menjadi 25% lebih efisien.



Omong-omong, kacamata pintar dengan fungsi augmented reality juga akan berguna di perusahaan yang memiliki banyak artikel dengan nama berbeda di gudang mereka, atau tempat pekerja sementara sering dipekerjakan. Agar merasa nyaman dan mencari tahu di mana dan berapa waktu yang dibutuhkan, masing-masing, penggunaan "asisten" seperti itu memiliki potensi besar.



Ngomong-ngomong, solusi hebat untuk Pos Rusia ...


ST Logistik dan Perangkat Lunak MGG telah mengembangkan aplikasi yang hanya menyediakan fitur-fitur ini:



Obat-obatan




Pada 2017, ahli bedah di Gregorio Marañon Spanish Clinic adalah yang pertama di dunia yang menggunakan kacamata augmented reality untuk melakukan operasi. Dokter dapat melihat riwayat medis, data analisis dan monitor pasien, gambar sinar-X, MRI, CT, serta mengontrol gerakan tangan ini. Kamera internal merekam apa yang terjadi di ruang operasi dan menyiarkan aliran video ke monitor untuk magang pelatihan.


Kasus lain yang menarik juga dari bidang pembedahan adalah penerapan pembedahan endovaskular dalam kacamata video augmented reality ( video dengan referensi , karena untuk beberapa alasan menanamkan pada sumber daya pihak ketiga dilarang untuk itu).




Omong-omong, operasi dilakukan menggunakan Epson Moverio BT-35E , yang baru-baru ini kita bicarakan di Habré .


Pembedahan endovaskular adalah bidang yang relatif baru, tetapi sangat menjanjikan dalam pengobatan modern. Keuntungan utamanya adalah invasif minimal , ketika hanya sayatan kulit kecil dan pengenalan konduktor melalui pembuluh cukup untuk mengakses struktur anatomi kompleks atau organ internal.


Sayangnya, karena topik itu sendiri sepenuhnya non-inti bagi saya, sulit untuk berkomentar. Mungkin Habraexperts akan membantu dalam komentar di pos.


Dokter gigi juga "dalam subjek"


Dokter gigi tidak jauh di belakang rekannya dan menggunakan augmented reality dalam prosedur sehari-hari. Misalnya dengan prosthetics. Dokter menggunakan tongkat khusus dengan kamera video HD untuk memindai area yang membutuhkan prosthetics. Berdasarkan model tiga dimensi yang dipindai, prosthetist menciptakan gambar mahkota dan jembatan dari komputer.


Ketidaknyamanan proses adalah bahwa gambar dari kamera ditransmisikan ke monitor eksternal, biasanya terletak di sisi dokter (tampaknya, tidak semua dokter memiliki kesempatan untuk meletakkannya di depan matanya): oleh karena itu, ia perlu terus-menerus beralih ke pasien, lalu ke layar selama pemindaian . Ini mengganggu dan dapat menyebabkan ketidaknyamanan tertentu pada pasien. Perangkat lunak EyeCad menampilkan gambar dari kamera pemindai langsung pada layar kacamata, sehingga dokter melihat pasien dan melihat area kerja. Pengembang juga menyediakan kontrol gerakan.



Contoh lain, aplikasi ICNOS, memungkinkan pasien untuk berkomunikasi dengan dokter. Jika selama perawatan pasien perlu memberi tahu dokter sesuatu, misalnya, bahwa ia perlu istirahat, atau bertanya berapa banyak waktu yang tersisa sampai akhir prosedur, maka ia dapat melakukan ini menggunakan aplikasi khusus yang mereproduksi teks yang ditentukan menggunakan koneksi Bluetooth dengan pembicara. .


Dan, jika pasien bosan, maka dia bisa menonton serial baru serial favoritnya atau "berselancar" di Internet.


Dukungan teknis dan pemeliharaan jarak jauh


Raksasa industri Rusia SIBUR sedang mengembangkan platform AR industri berdasarkan teknologi augmented reality. Menurut pengembang, solusi ini akan memungkinkan spesialis untuk menerima dukungan operasional selama pemeliharaan dan perbaikan dari para ahli internal dan eksternal yang secara geografis terpencil.



Di blog mereka, Digital SIBUR, mereka berbicara secara rinci tentang prospek dan kesulitan yang mereka hadapi dalam mengimplementasikan solusi.


Dan karyawan Universitas Columbia melakukan penelitian untuk menilai manfaat dari augmented reality ketika melayani menara pengangkut personel lapis baja (" Mengevaluasi Manfaat Augmented Reality untuk Pelokalan Tugas dalam Pemeliharaan Menara Pengangkut Personil Lapis Baja "). Tampaknya bahkan berhasil.



Industri pesawat terbang


Perusahaan industri militer Lockheed Martin (AS), yang memproduksi peralatan penerbangan, telah memperkenalkan kacamata augmented reality dengan aplikasi yang dikembangkan secara khusus ke dalam gudang para insinyurnya. Dengan bantuan mereka, tugas dukungan informasi untuk spesialis sangat disederhanakan - selama proses perakitan, teknisi melihat pada layar data di mana dan bagaimana menghubungkan bagian yang diperlukan. Perusahaan NGRAIN, yang terlibat dalam implementasi peralatan ini, memperkirakan bahwa berkat solusi ini, pekerja menghabiskan waktu 30% lebih sedikit untuk tugas-tugas, dan keakuratan kerja meningkat sebanyak 96%.



Bantuan untuk para penyandang cacat


Untuk orang dengan gangguan pendengaran, menggunakan perangkat AR dimungkinkan untuk memvisualisasikan atau menerjemahkan informasi audio ke dalam format teks. Jadi di Astrakhan Museum of Local Lore, tersedia versi tur dengan terjemahan bahasa isyarat.


Dan British National Theatre, bersama dengan mitra inovasinya Accenture dan StageText, mengembangkan sebuah proyek di mana kacamata video augmented reality Epson Moverio BT-350 digunakan untuk menghasilkan transkripsi dialog dan suara yang disinkronkan dengan produksi pada layar kacamata.



Teknologi Open Access Smart Capture menggunakan perangkat lunak pengenal ucapan dan menyinkronkan teks dengan pementasan teks. Untuk kalibrasi yang akurat, program membaca tag cahaya, suara, dan video yang unik untuk setiap pengaturan. Pemirsa dapat menyesuaikan ukuran font, warna, dan lokasi teks sesuai keinginan mereka.


Spesialis terus meningkatkan proyek. Perangkat lunak ini sedang diselesaikan sehingga kacamata dapat digunakan untuk menghasilkan teks secara real time.


Bagi para penyandang cacat fisik, perangkat augmented reality akan dapat membuat peta informasi dari lingkungan yang dapat diakses, memungkinkan untuk menyusun rute yang nyaman, dan memperingatkan tentang tempat-tempat yang sulit atau sulit.


Alih-alih output


Contoh-contoh yang ditemukan hanyalah demonstrasi sebagian kecil dari kemungkinan yang memperbesar gadget realitas. Epson menawarkan kacamata video augmented reality , dengan bantuan yang memungkinkan untuk mewujudkan banyak hal yang dijelaskan dalam pos.

Mungkin Anda akan menemukan mereka untuk digunakan dalam proyek AR Anda berikutnya?

Source: https://habr.com/ru/post/id457444/


All Articles