Halo, Habr! Ini adalah Sergey Lukashkin, dan hari ini kita akan berbicara tentang teknologi yang mendalam.
Istilah "immersive" kini telah menjadi umum, dapat ditemukan dalam laporan perusahaan penelitian terkemuka seperti (pencarian masa depan strategis) sebagai
Gartner (pengalaman mendalam) atau
CBInsights .

Teknologi imersif juga disebut teknologi augmented reality. Daftar mereka termasuk realitas virtual dan augmented, serta video 360 °. Mereka memberikan efek kehadiran penuh atau sebagian di ruang alternatif dan dengan demikian mengubah pengalaman pengguna di bidang yang sama sekali berbeda. Dalam posting ini kita akan berbicara tentang apa tingkat teknologi ini hari ini, bagaimana mereka diimplementasikan dan digunakan untuk bisnis.
Pertama, mari kita mendefinisikan istilah dan singkatan yang dapat Anda lihat di laporan, artikel, dan presentasi:
- Immersive (ind. Immersive - to immmers) - teknologi untuk pencelupan penuh atau sebagian di dunia virtual atau berbagai jenis pencampuran realitas nyata dan virtual.
- RR (realitas nyata) - secara harfiah "realitas nyata" atau realitas objektif di mana kita berada dan yang kita rasakan dengan indera kita. Perlu dicatat bahwa kenyataan harus ditentukan. Tetapi Anda harus memahami apa yang kami membingungkan realitas virtual.
- VR (realitas virtual) - realitas virtual - realitas yang disimulasikan sepenuhnya menggunakan teknologi modern. Ini bukan hanya adegan 3D atau 360, itu juga suara, sensasi sentuhan dan bahkan bau. Lebih lanjut tentang ini nanti.
- AR (augmented reality) - augmented reality - augmented harus diterjemahkan lebih seperti "ditambahkan." Artinya, kami menambahkan elemen virtual, realitas simulasi ke realitas nyata kami (RR).
- MR (realitas campuran) - realitas campuran - istilah ini muncul karena peluncuran Windows Mixed Reality. Di satu sisi, istilah itu sendiri memungkinkan, menurut pendapat saya, untuk dibangun kembali dari pesaing. Di sisi lain, ini berbicara tentang beberapa jenis perangkat khusus dan metode pencampuran realitas. Meskipun sebenarnya itu adalah VR dengan beberapa tambahan RR. Atau AR menggunakan Hololens.
- XR (extended reality) - augmented reality adalah nama umum untuk teknologi AR dan VR.
- 360 foto, video - konten yang terdiri dari satu 360 ° - atau beberapa foto dan video yang dijahit. Siaran 360 ° juga umum. Russia Today membuat banyak konten seperti itu , Anda dapat melihatnya di kardus dengan ponsel yang lebih atau kurang kuat.
Sekarang kita akan menganalisis secara lebih rinci apa yang tersembunyi di bawah singkatan ini.
Foto atau video panorama dan 360 °
Kamera telah tersedia untuk beberapa waktu, sejak 2018 mereka telah didukung oleh Facebook. Bahkan, ini adalah set gambar berurutan yang dijahit menggunakan algoritma. Anda dapat menjadikannya sebagai kamera tunggal, atau kamera 360 ° khusus. Ini adalah format yang sangat nyaman di mana Anda, misalnya, dapat melakukan
tur virtual di Pushkin Museum.
Video 360 °
Bagaimana penerapannya. Kamera 360 ° memotret area sekitarnya, setelah itu video yang dihasilkan dijahit dalam program khusus. Solusi mulus ada, tetapi mereka lebih mahal untuk bisnis. Terkadang grafik tambahan ditambahkan ke video yang sudah selesai.
Sekarang juga tersebar luas siaran online "panoramik". Ketika Anda memiliki beberapa titik dengan tampilan panorama, cukup instal peralatan dan mulai memotret. Tetapi format ini memiliki persyaratan yang agak tinggi untuk perangkat keras, dan juga membutuhkan penyetelan suara yang cermat.
Dimana digunakan. Teknologi ini banyak digunakan dalam demonstrasi real estat. Pencarian Google sederhana memberi Anda banyak agen B2B yang membuat tur virtual untuk kebutuhan agen penjual dan pengembang:
360 Real Estate ,
360walkthruproperty ,
Forj , dan lainnya.
Video panorama juga digunakan di media. Di atas, saya sudah memberikan tautan ke
proyek RT 360 , yang memberikan kesempatan kepada pemirsa untuk "hadir pada saat ini" - baik itu
perayaan Tahun Baru di Berlin atau
piala superbike internasional . Selain memposting di Internet, materi imersif tersebut juga
dipajang di pameran permanen Kantor PBB untuk Luar Angkasa di Wina.

Augmented Reality
Seperti banyak teknologi inovatif, augmented reality muncul di pertengahan abad terakhir untuk perkembangan militer. Direncanakan dan kemudian mulai digunakan untuk memproyeksikan pembacaan instrumen penting ke helm pesawat tempur atau kaca depan pesawat tempur, untuk mengurangi waktu menerima informasi dan meningkatkan kecepatan reaksi pilot.
Saat ini, beberapa bidang augmented reality sedang berkembang. Yang paling umum adalah
AR di smartphone . Apple telah mengembangkan kit AR-nya selama beberapa tahun. Saat ini, ada
lebih dari 5 miliar smartphone di dunia, dan berpotensi cakupan yang sangat besar untuk produk-produk dengan AR. Contoh sukses yang mencolok adalah permainan Pokemon Go, yang telah gemuruh di seluruh dunia. Ada proyek pemasaran di mana, misalnya, koin tersebar di AR, dan pengguna harus mencari dan mengumpulkannya untuk mendapatkan diskon. Koin tersebar sehingga pada mereka seperti di remah-remah pengguna datang ke ambang toko. Penting juga mengingat proyek Google Street yang baru diluncurkan di AS, yang membantu navigasi. Skenario yang lebih sederhana juga diminati: misalnya, pada tahun 2017 Positive Technologies merilis kalender dan buku harian di mana gambar menjadi hidup ketika ponsel sedang melayang.
Perangkat lain untuk bekerja dengan augmented reality adalah
kacamata augmented reality . Google Glass adalah proyek yang tidak terlalu sukses. Hololens, sebuah proyek Microsoft, adalah solusi yang mahal, tetapi keuntungannya adalah ia segera diintegrasikan dengan ekosistem perusahaan. Selain itu, pasar memiliki banyak kacamata augmented reality lainnya - dari Ericsson, Huawei dan banyak perusahaan besar lainnya serta perusahaan pemula.
Solusi terpisah diterapkan untuk industri sesuai dengan model berlangganan, yang mencakup konsultasi dan perbaikan peralatan.
Bagaimana penerapannya. Memproyeksikan objek virtual ke dunia nyata dapat dilakukan menggunakan telepon. Tanda yang sering digunakan, proyeksi ke kaca mobil, pesawat terbang, kacamata - misalnya, dalam kacamata Microsoft Hololens. Jika Anda menggunakan teknologi realitas virtual di jalan, Anda perlu memberi perhatian khusus pada pencahayaan, karena dalam objek AR yang terlalu terang cahaya bisa terlihat kusam. Secara umum, meskipun ini bukan teknologi paling canggih, bahkan memungkinkan Anda untuk membuat aplikasi hiburan.
Dimana digunakan. Hologram, overlay gambar di udara saluran televisi, penggunaan monitor interaktif - ini adalah inkarnasi dari AR yang tampaknya akrab bagi kita. Namun, ada contoh yang lebih tak terduga dari penggunaan teknologi.
Misalnya, Pepsi Max menggunakan teknologi AR untuk membuat
komersialnya sendiri. Perusahaan memasang monitor augmented reality khusus di salah satu halte London dan memfilmkan reaksi orang yang lewat secara acak.
Contoh lain adalah perencanaan interior IKEA:
Augmented reality adalah, seperti yang saya katakan, salah satu rahasia kesuksesan PokemonGo, juga fitur aplikasi
Argon4 pada AR Browser SDK, yang dengannya Anda dapat, misalnya, memberikan informasi referensi tentang pemandangan ketika Anda mengarahkan kamera smartphone kepada mereka.
Sedangkan untuk kacamata AR, area ini masih kurang berkembang, karena model saat ini cukup besar dan mahal. Namun setiap tahun, kacamata menjadi lebih mudah dan lebih cantik. Arah AR lainnya adalah proyeksi ke lensa kontak. Kekurangannya sejauh ini adalah kisi terlihat pada lensa. Tetapi pada saat yang sama, ada banyak keuntungan dari metode ini.
Realitas virtual
Bagaimana penerapannya. Realitas virtual terutama konten visual dan suara. Suara dalam hal ini sangat penting: suara melengkapi keutamaan dan menciptakan efek berada di lokasi yang tidak realistis dengan mensimulasikan refleksi dan arah gelombang suara.
Anda dapat masuk ke dalam suatu alternatif, realitas virtual, misalnya, mengenakan kacamata khusus. Membagi gambar di depan mata menjadi dua bagian, mereka menciptakan efek stereoskopik. Jika ada pelacakan untuk posisi tubuh, ruang virtual juga akan memperhitungkan pergerakan kepala dan tubuh.
Ada cara lain untuk masuk ke realitas virtual:
- Sebuah smartphone dengan aplikasi VR khusus, yang dimasukkan ke case khusus dengan lensa. Solusi termudah adalah Google Cardboard Cardboard. Jika Anda memiliki perangkat Samsung Galaxy, maka Anda dapat membeli Gear VR - kasing canggih, dilengkapi dengan giroskop dan kontrol.
- Sistem pelacakan. Memungkinkan Anda memindahkan pengguna ke ruang virtual. Kostum juga sedang dikembangkan yang menyampaikan sensasi dari realitas virtual - misalnya, wewangian - tetapi sejauh ini ini adalah produk yang mahal dan tidak terlalu sempurna.
- Sarung tangan khusus bukan joystick yang biasa. Elemen ini diperlukan agar tangan manusia berinteraksi secara alami dengan dunia virtual. Sarung tangan sekarang lebih rendah daripada joystick dalam kualitas kalibrasi, tetapi kualitasnya terus bertambah.
- Helm VR seluler dengan monitor internal (HTC Vive, Oculus Go, dan lainnya) . Perangkat seperti itu lebih dioptimalkan untuk bekerja di VR dibandingkan dengan kasus untuk smartphone, mereka memiliki grafis berkualitas tinggi, ada suara terintegrasi dan joystick untuk kontrol.
- Helm “VR Berat” (seperti Oculus Rift). Grafik yang diproses ditransmisikan ke helm melalui kabel dari komputer gaming dengan kartu grafis yang kuat. Kebutuhan untuk berkomunikasi dengan PC menciptakan batasan untuk digunakan, tetapi pada saat yang sama, helm VR yang berat memiliki grafik yang lebih baik dan pengalaman pengguna yang lebih kaya. Kamera pelacak merekam posisi joystick dan posisi seseorang, membenamkannya dalam realitas virtual dengan lebih realistis. Termasuk juga helm seperti itu adalah pengendali.
Hampir semua produsen utama ponsel dan laptop telah merilis helm realitas virtual mereka: HTC, Lenovo, Xiaomi, Samsung, Oculus dan perusahaan lain memilikinya. Ada yang mencoba membuat ekosistem: misalnya, HP mempromosikan jajaran laptop dan helm dengan manipulator dan pelacakan eksternal.
Untuk keputusan seperti itu, nama lain digunakan -
realitas campuran . Bahkan, ini lebih pemasaran, muncul bersamaan dengan rilis Windows Mixed Reality - platform pengembangan aplikasi. Pada intinya, itu adalah konstruktor dengan model 3D, satu set aset tertentu dalam kit. Dalam hal kualitas produk yang dibuat, solusi Windows jauh lebih lemah daripada mesin Unreal Engine dan Unity. Mereka, tidak seperti platform Windows Mixed Reality, tidak hanya memiliki kemampuan untuk merancang dan membuat objek virtual, bekerja dengan tekstur dan cahaya, tetapi juga membuat logika bisnis tertentu.
Dimana digunakan. Sebuah proyek menarik di bidang VR dibuat oleh IKEA. Perusahaan
mengundang pelanggannya untuk memakai kacamata khusus dan berada di dapur virtual. Di sini, dengan bantuan joystick, mereka bisa membaca buku resep, memasak bakso, mengirim makanan untuk diproses.
Operator Jerman, Deutsche Bahn, juga bereksperimen dengan realitas virtual. Selama empat tahun, perusahaan
telah menawarkan karyawan potensial untuk memakai kacamata VR dan menunjukkan kemampuan mereka dalam mensimulasikan hari kerja nyata.

Perusahaan teknologi Actiview Israel telah mengembangkan
platform untuk perekrutan karyawan jarak jauh menggunakan teknologi VR. “Simulasi dalam realitas virtual memungkinkan kita untuk mengontrol apa yang dilihat, didengar, dirasakan pengguna. Kami melihat perilakunya dan dapat mengumpulkan data ini, ”komentar Roy Elishkov, wakil presiden strategi dan pengembangan bisnis.
Perusahaan VR di berbagai bidang juga terlibat dalam perusahaan Rusia. Misalnya,
Modum Lab membuat proyek VR untuk pelatihan dan skenario lainnya.
Pengembangan VTB
Kami di VTB juga mengerjakan beberapa kasus "virtual". Yang pertama adalah layanan pemungutan suara VR untuk pemegang saham dalam format realitas virtual, terintegrasi dengan robot konsultan. Kami menggunakan produk ini sebagai bagian dari rapat pemegang saham tahunan bank pada Juni 2019. Layanan ini mudah diubah: kami berharap dapat disesuaikan untuk pemungutan suara oleh pemegang saham di organisasi besar mana pun yang sebanding dalam skala dengan VTB. Dan itu dikembangkan untuk anak perusahaan dari VTB Registrar, anggota dari VTB Group.
Kasus kedua, yang saat ini sedang dalam tahap proyek percontohan, adalah investasi VR, yang tujuan utamanya adalah onboarding klien untuk layanan broker. Di sini VR adalah cara untuk memberikan konsultasi otomatis awal dari jarak jauh dalam format pencarian. Dalam 5 menit sesi VR, pengguna benar-benar "terbenam" di dunia investasi, memilih tujuan menyusun portofolio, dan mempelajari peluang apa yang disediakan produk broker VTB. Setelah itu, manajer membantu klien membuka akun pialang dan mentransfer dana ke sana. Dari sudut pandang bisnis, kasus ini memungkinkan Anda untuk mengoptimalkan biaya pelatihan karyawan dan jumlah manajer yang diperlukan untuk menjual layanan broker.

VR memiliki potensi besar untuk bisnis hipotek bank. Kami meluncurkan platform VR-mortgage VTB, platform yang menyatukan pengembang dan pelanggan. Ini menyediakan layanan konsultasi jarak jauh dan melihat real estat dari jauh. Platform ini memungkinkan Anda untuk membuat ruang virtual dengan opsi untuk memilih konfigurasi apartemen, kalkulator hipotek, dan alat penjualan bawaan, serta menghubungkan konsultan yang akan berkonsultasi dengan pembeli potensial dari jarak jauh dari wilayah lain.
AR dapat menjadi alat universal untuk menyiarkan penawaran pemasaran yang dipersonalisasi kepada pelanggan kami. Benar, sementara pengguna secara keseluruhan masih jauh dari, misalnya, mengarahkan kamera ponsel cerdas mereka ke poster yang tertarik di cabang bank. Jadi kita harus mengingat hal ini ketika mengembangkan strategi implementasi AR dan menawarkan skenario permainan non-sepele kepada pelanggan, mendorong mereka ke format interaksi baru.
Tren umum
Pada akhirnya, saya akan mencoba merangkum pengalaman industri dan menyarankan apa yang akan terjadi selanjutnya. Berusaha keras untuk mendapatkan gambar yang realistis, kami akan menghadapi keterbatasan dalam kecepatan pemrosesan grafis dan informasi. Sistem hibrida dengan partisipasi cloud bisa menjadi jalan keluar. Pada saat yang sama, gambar "kartun" saat ini masih memungkinkan Anda untuk membuat konten "immersive", karena ini sudah cukup untuk otak. Coba berjalan di papan VR di atas jurang VR.
Penetrasi helm VR sekarang kecil, jadi kami membuat instalasi VR di kantor kami dan mengundang konsumen di sana. Jelas bahwa pendekatan ini memiliki prospek untuk menjual produk yang mahal dan kompleks - real estat, kapal pesiar, mobil, wisata keliling kota. Kuncinya di sini adalah transisi dari solusi adhoc, yaitu, aplikasi yang menerapkan kasus tertentu, ke seluruh platform XR yang akan memungkinkan pembeli dan penjual untuk menemukan satu sama lain.
Di bidang teknologi imersif, monetisasi yang tajam belum terlihat, pemain bertindak seolah-olah dengan sentuhan. Alasannya adalah bahwa tidak banyak orang menggunakan Augmented Reality dalam
kehidupan sehari-hari. Untuk mencobanya, Anda setidaknya harus mengunduh aplikasi tambahan - ini mempersulit cara konsumen mendapatkan teknologi.

Dalam semua perkembangan ini tidak ada gamifikasi yang signifikan, sebaliknya, ada keinginan untuk realisme. Membuat alat interaksi yang mudah hanyalah tugas utama bagi pengembang, pengembangan konten sekarang menjadi sekunder untuk pengembangan UX / UI. Resolusi gambar masih rendah dan tidak fotorealistik, sehingga teknologi memiliki ruang untuk tumbuh dan berkembang. Meningkatkan pengalaman pengguna dikaitkan dengan kinerja prosesor, dengan kecepatan transfer dan pemrosesan data.
Kemungkinan, solusi hybrid akan segera muncul: misalnya, pemrosesan gambar akan dilakukan di server online dan kemudian akan dikirim melalui radio, Wi-Fi atau saluran Bluetooth ke helm seluler pengguna. Namun, sejauh ini hanya spekulasi. Bagaimanapun, kami yakin bahwa teknologi immersive akan menemukan aplikasi di banyak industri, termasuk di industri keuangan kami.