Wo immersive Technologie uns eintaucht

Hallo Habr! Dies ist Sergey Lukashkin, und heute werden wir über immersive Technologien sprechen.
Der Begriff "immersiv" ist mittlerweile weit verbreitet und findet sich in Berichten von so bedeutenden Forschungsunternehmen (strategische Zukunftssuche) wie Gartner (immersive Erfahrung) oder CBInsights .



Immersive Technologie wird auch als Augmented Reality-Technologie bezeichnet. Ihre Liste umfasst virtuelle und erweiterte Realität sowie 360 ​​° -Videos. Sie bewirken den Effekt einer vollständigen oder teilweisen Präsenz in einem alternativen Raum und verändern dadurch die Benutzererfahrung in völlig unterschiedlichen Bereichen. In diesem Beitrag werden wir darüber sprechen, auf welchem ​​Niveau diese Technologien heute sind, wie sie implementiert und für Unternehmen verwendet werden.

Definieren wir zunächst die Begriffe und Abkürzungen, die Sie in Berichten, Artikeln und Präsentationen sehen können:

• Immersive (dt. Immersive - Immersive ) - Technologien zum vollständigen oder teilweisen Eintauchen in die virtuelle Welt oder verschiedene Arten der Vermischung von realer und virtueller Realität.
  
• RR (reale Realität) - wörtlich "reale Realität" oder objektive Realität, in der wir uns befinden und die wir mit unseren Sinnen wahrnehmen. Es ist bemerkenswert, dass die Realität bestimmt werden muss. Aber Sie müssen verstehen, womit wir die virtuelle Realität verwechseln.
  
• VR (Virtual Reality) - Virtual Reality - eine vollständig simulierte Realität mit moderner Technologie. Dies sind nicht nur 3D- oder 360-Szenen, sondern auch Geräusche, taktile Empfindungen und sogar Gerüche. Dazu später mehr.
  
• AR (Augmented Reality) - Augmented Reality - Augmented sollte eher wie "hinzugefügt" übersetzt werden. Das heißt, wir fügen unserer realen Realität (RR) Elemente der virtuellen, simulierten Realität hinzu.
  
• MR (Mixed Reality) - Mixed Reality - Der Begriff tauchte aufgrund der Einführung von Windows Mixed Reality auf. Einerseits erlaubt der Begriff selbst meiner Meinung nach den Wiederaufbau gegenüber Wettbewerbern. Auf der anderen Seite spricht es von einer bestimmten Art von Geräten und Methoden zum Mischen der Realität. Obwohl es in der Tat VR mit einigen Ergänzungen von RR ist. Oder AR mit Hololens.
  
• XR (Extended Reality) - Augmented Reality ist ein gebräuchlicher Name für AR- und VR-Technologien.
  
• 360-Foto, Video - Inhalt bestehend aus einem 360 ° - oder mehreren zusammengefügten Fotos und Videos. 360 ° -Sendungen sind ebenfalls üblich. Russia Today stellt viele solcher Inhalte her , die Sie mit jedem mehr oder weniger leistungsstarken Telefon auf einem Karton sehen können.
  

Jetzt werden wir genauer analysieren, was unter diesen Abkürzungen verborgen ist.

Panorama und 360 ° Foto oder Video

Kameras sind seit geraumer Zeit verfügbar, seit 2018 werden sie von Facebook unterstützt. Tatsächlich sind dies aufeinanderfolgende Sätze von Bildern, die unter Verwendung von Algorithmen zusammengefügt wurden. Sie können sie als einzelne Kamera oder als spezielle 360 ​​° -Kameras erstellen. Dies ist ein sehr praktisches Format, mit dem Sie beispielsweise einen virtuellen Rundgang durch das Puschkin-Museum unternehmen können .

360 ° Video

Wie wird es umgesetzt? 360 ° -Kameras nehmen die Umgebung auf, woraufhin die resultierenden Videos in speziellen Programmen zusammengefügt werden. Es gibt nahtlose Lösungen, die jedoch für das Unternehmen teurer sind. Manchmal werden dem fertigen Video zusätzliche Grafiken hinzugefügt.

Jetzt auch weit verbreitete "Panorama" Online-Sendungen. Wenn Sie mehrere Punkte mit Panoramablick haben, installieren Sie einfach das Gerät und beginnen Sie mit der Aufnahme. Dieses Format stellt jedoch hohe Anforderungen an die Hardware und erfordert auch eine sorgfältige Abstimmung des Klangs.

Wo verwendet. Diese Technologie wird häufig bei der Demonstration von Immobilien eingesetzt. Mit einer einfachen Google-Suche erhalten Sie viele B2B-Agenturen, die virtuelle Touren für die Bedürfnisse von Maklern und Entwicklern durchführen: 360 Real Estate , 360walkthruproperty , Forj und andere.

Panorama-Videos werden auch in den Medien verwendet. Oben habe ich bereits einen Link zum RT 360-Projekt gegeben , der dem Betrachter die Möglichkeit gibt, "im Moment präsent zu sein" - sei es die Neujahrsfeier in Berlin oder der internationale Superbike-Cup . Solche immersiven Materialien werden nicht nur im Internet veröffentlicht, sondern auch auf der Dauerausstellung des UN-Büros für Weltraumangelegenheiten in Wien ausgestellt.

Augmented Reality

Wie viele innovative Technologien erschien Augmented Reality Mitte des letzten Jahrhunderts für militärische Entwicklungen. Es wurde geplant und dann erfolgreich eingesetzt, um wichtige Instrumentenablesungen auf den Kampfhelm oder die Windschutzscheibe eines Jägers zu projizieren, um die Zeit für den Empfang von Informationen zu verkürzen und die Reaktionsgeschwindigkeit der Piloten zu erhöhen.

Heute entwickeln sich mehrere Bereiche der Augmented Reality. Am häufigsten ist der AR im Smartphone . Apple entwickelt sein AR-Kit seit mehreren Jahren. Heutzutage gibt es weltweit mehr als 5 Milliarden Smartphones , und dies ist möglicherweise eine sehr große Abdeckung für Produkte mit AR. Ein eindrucksvolles Beispiel für Erfolg ist das Pokemon Go-Spiel, das weltweit donnerte. Es gibt Marketingprojekte, bei denen beispielsweise Münzen in AR verstreut sind und der Benutzer sie suchen und sammeln muss, um einen Rabatt zu erhalten. Münzen werden so verstreut, dass der Benutzer wie in Krümeln an die Schwelle des Ladens kommt. Denken Sie auch an das kürzlich gestartete Google Street-Projekt in den USA, das bei der Navigation hilft. Einfachere Szenarien sind ebenfalls gefragt: So veröffentlichte Positive Technologies 2017 einen Merch-Kalender und ein Tagebuch, auf denen Bilder zum Leben erweckt wurden, als das Telefon schwebte.

Andere Geräte für die Arbeit mit Augmented Reality sind Augmented Reality-Brillen . Google Glass ist ein nicht so erfolgreiches Projekt. Hololens, ein Microsoft-Projekt, ist eine teure Lösung, hat jedoch den Vorteil, dass es sofort in das Ökosystem des Unternehmens integriert wird. Darüber hinaus verfügt der Markt über viele andere Augmented-Reality-Brillen - von Ericsson, Huawei und vielen anderen großen Unternehmen und Startups.

Für die Branche werden separate Lösungen gemäß dem Abonnementmodell implementiert, das Beratung und Reparatur von Geräten umfasst.

Wie wird es umgesetzt? Das Projizieren eines virtuellen Objekts in die reale Welt kann über ein Telefon erfolgen. Oft verwendete Markierungen, Projektion auf das Glas eines Autos, Flugzeugs, Brille - zum Beispiel in Microsoft Hololens-Brille. Wenn Sie auf der Straße Virtual-Reality-Technologie verwenden, müssen Sie besonders auf die Beleuchtung achten, da bei zu hellem Licht AR-Objekte stumpf aussehen können. Obwohl dies nicht die fortschrittlichste Technologie ist, können Sie im Allgemeinen auch Unterhaltungsanwendungen erstellen.



Wo verwendet. Hologramme, Überlagerung von Bildern in der Luft von Fernsehkanälen, die Verwendung interaktiver Monitore - dies sind die Inkarnationen von AR, die uns bekannt vorkommen. Es gibt jedoch unerwartetere Beispiele für den Einsatz von Technologie.

Zum Beispiel verwendete Pepsi Max die AR-Technologie, um einen eigenen Werbespot zu erstellen. Das Unternehmen installierte an einer der Londoner Haltestellen spezielle Augmented-Reality-Monitore und filmte die Reaktion von zufälligen Passanten.


Ein weiteres Beispiel ist die Innenplanung von IKEA:


Augmented Reality ist, wie ich bereits sagte, eines der Erfolgsgeheimnisse von PokemonGo, auch eine Funktion der Argon4- Anwendung im AR Browser SDK, mit der Sie beispielsweise Referenzinformationen zu den Sehenswürdigkeiten bereitstellen können, wenn Sie die Kamera auf Ihr Smartphone richten.

Bei AR-Brillen ist dieser Bereich noch weniger entwickelt, da aktuelle Modelle recht sperrig und teuer sind. Aber jedes Jahr wird die Brille einfacher und schöner. Eine andere Richtung von AR ist die Projektion auf Kontaktlinsen. Sein bisheriger Nachteil ist, dass das Gitter auf der Linse sichtbar ist. Gleichzeitig bietet diese Methode viele Vorteile.

Virtuelle Realität

Wie wird es umgesetzt? Virtuelle Realität besteht hauptsächlich aus visuellen und akustischen Inhalten. Schall ist in diesem Fall von zentraler Bedeutung: Er ergänzt die Virtualität und erzeugt den Effekt, an einem unrealistischen Ort zu sein, indem er die Reflexion und Richtung von Schallwellen simuliert.

Sie können in eine alternative virtuelle Realität eintreten, indem Sie beispielsweise eine spezielle Brille tragen. Sie teilen das Bild vor den Augen in zwei Teile und erzeugen einen stereoskopischen Effekt. Wenn die Positionen des Körpers verfolgt werden, berücksichtigt der virtuelle Raum auch die Bewegungen von Kopf und Körper.

Es gibt andere Möglichkeiten, in die virtuelle Realität zu gelangen:

• Ein Smartphone mit einer speziellen VR-Anwendung, die mit Objektiven in einen Sonderfall eingesetzt wird. Die einfachste Lösung ist Google Cardboard Cardboard. Wenn Sie ein Samsung Galaxy-Gerät besitzen, können Sie Gear VR erwerben - eine fortschrittliche Hülle, die durch Gyroskope und Bedienelemente ergänzt wird.
  
• Tracking-Systeme. Ermöglicht das Verschieben des Benutzers in den virtuellen Raum. Es werden auch Kostüme entwickelt, die Empfindungen aus der virtuellen Realität vermitteln - zum Beispiel Düfte -, aber bisher ist dies ein teures und nicht sehr perfektes Produkt.
  
• Spezielle Handschuhe anstelle des üblichen Joysticks. Dieses Element wird benötigt, damit menschliche Hände auf natürliche Weise mit der virtuellen Welt interagieren können. Handschuhe sind Joysticks in der Kalibrierungsqualität unterlegen, aber ihre Qualität wächst.
  
• Mobile VR-Helme mit eingebauten Monitoren (HTC Vive, Oculus Go und andere) . Solche Geräte sind im Vergleich zu Smartphones besser für die Arbeit in VR optimiert, sie verfügen über hochwertige Grafiken, einen integrierten Sound und einen Joystick zur Steuerung.
  
• "Heavy VR" -Helme (wie der Oculus Rift). Die verarbeiteten Grafiken werden von einem Spielecomputer mit einer leistungsstarken Grafikkarte per Kabel an den Helm übertragen. Die Notwendigkeit, mit einem PC zu kommunizieren, führt zu Einschränkungen bei der Verwendung. Gleichzeitig bieten schwere VR-Helme eine bessere Grafik und ein besseres Benutzererlebnis. Tracking-Kameras zeichnen die Position des Joysticks und die Position einer Person auf und tauchen sie realistischer in die virtuelle Realität ein. Zu solchen Helmen gehören auch Steuerungen.
  

Fast alle großen Hersteller von Telefonen und Laptops haben ihre Virtual-Reality-Helme herausgebracht: HTC, Lenovo, Xiaomi, Samsung, Oculus und andere Unternehmen haben sie. Einige versuchen, ein Ökosystem zu schaffen: HP bewirbt beispielsweise eine Reihe von Laptops und Helmen mit Manipulatoren und externem Tracking.

Für solche Entscheidungen wird ein anderer Name verwendet - gemischte Realität . In der Tat ist es mehr Marketing, zusammen mit der Veröffentlichung von Windows Mixed Reality - einer Anwendungsentwicklungsplattform erschienen. Im Kern handelt es sich um einen Konstruktor mit 3D-Modellen, einem bestimmten Satz von Assets im Kit. In Bezug auf die Qualität des zu erstellenden Produkts ist die Windows-Lösung viel schwächer als die Unreal Engine und die Unity Engines. Im Gegensatz zur Windows Mixed Reality-Plattform können sie nicht nur virtuelle Objekte entwerfen und erstellen, mit Texturen und Licht arbeiten, sondern auch spezifische Geschäftslogik erstellen.

Wo verwendet. Ein interessantes Projekt im Bereich VR wurde von IKEA durchgeführt. Das Unternehmen lud seine Kunden ein, eine spezielle Brille zu tragen und in der virtuellen Küche zu sein. Hier konnten sie mit Hilfe eines Joysticks ein Rezeptbuch lesen, Fleischbällchen kochen und Lebensmittel zur Verarbeitung schicken.


Auch die Deutsche Bahn experimentiert mit der virtuellen Realität. Seit vier Jahren bietet das Unternehmen seinen potenziellen Mitarbeitern an, VR-Brillen aufzusetzen und ihre Fähigkeiten bei der Simulation eines echten Arbeitstages unter Beweis zu stellen.



Das israelische Technologieunternehmen Actiview hat eine Plattform für die Ferneinstellung von Mitarbeitern mithilfe von VR-Technologien entwickelt. „Durch Simulation in der virtuellen Realität können wir steuern, was der Benutzer sieht, hört und fühlt. Wir sehen sein Verhalten und können diese Daten sammeln “, kommentiert Roy Elishkov, Vizepräsident für Strategie und Geschäftsentwicklung.

VR-Unternehmen in verschiedenen Bereichen sind auch an russischen Unternehmen beteiligt. Beispielsweise erstellt Modum Lab in VR-Projekten Schulungen und andere Szenarien.

VTB-Entwicklung

Wir bei VTB arbeiten auch an mehreren „virtuellen“ Fällen. Der erste ist ein VR-Abstimmungsdienst für Aktionäre im Virtual-Reality-Format, der in einen Beraterroboter integriert ist. Wir haben dieses Produkt im Rahmen der Hauptversammlung der Bank im Juni 2019 eingesetzt. Der Service lässt sich leicht umwandeln: Wir gehen davon aus, dass er für die Abstimmung durch die Aktionäre in großen Organisationen angepasst werden kann, deren Größe mit der der VTB vergleichbar ist. Und es wurde für eine Tochtergesellschaft von VTB Registrar, einem Mitglied der VTB-Gruppe, entwickelt.

Der zweite Fall, der sich derzeit in der Pilotprojektphase befindet, sind VR-Investitionen, deren Hauptzweck darin besteht, Kunden für Maklerdienste zu gewinnen. Hier ist VR eine Möglichkeit, die erste automatisierte Beratung in einem Questformat aus der Ferne bereitzustellen. In 5 Minuten einer VR-Sitzung ist der Benutzer vollständig in die Investmentwelt „eingetaucht“, wählt den Zweck der Zusammenstellung des Portfolios aus und erfährt, welche Möglichkeiten VTB-Brokerage-Produkte bieten. Danach hilft der Manager dem Kunden, ein Maklerkonto zu eröffnen und Geld darauf zu überweisen. Aus geschäftlicher Sicht können Sie in diesem Fall die Kosten für die Schulung von Mitarbeitern und die Anzahl der Manager optimieren, die für den Verkauf von Maklerdiensten erforderlich sind.



VR hat ein großes Potenzial für das Hypothekengeschäft der Bank. Wir haben die VTB VR-Hypothekenplattform eingeführt, eine Plattform, die Entwickler und Kunden vereint. Es bietet einen Service für die Fernberatung und Fernanzeige von Immobilien. Die Plattform ermöglicht es Ihnen, einen virtuellen Raum mit der Möglichkeit zu erstellen, die Konfiguration der Wohnung, einen Hypothekenrechner und integrierte Verkaufstools auszuwählen sowie einen Berater zu verbinden, der potenzielle Käufer aus einer anderen Region aus der Ferne konsultiert.


AR kann ein universelles Tool für die Übertragung personalisierter Marketingangebote an unsere Kunden werden. Zwar sind die Benutzer insgesamt noch weit davon entfernt, ihre Smartphone-Kameras beispielsweise auf ein interessiertes Poster in einer Bankfiliale zu richten. Daher sollten wir dies bei der Entwicklung einer AR-Implementierungsstrategie berücksichtigen und den Kunden nicht triviale Spielszenarien anbieten, die sie zu einem neuen Interaktionsformat auffordern.

Allgemeine Trends

Am Ende werde ich versuchen, die Branchenerfahrung zusammenzufassen und vorzuschlagen, was als nächstes passieren wird. Bei dem Streben nach einem realistischen Bild werden wir mit Einschränkungen bei der Geschwindigkeit der Grafik- und Informationsverarbeitung konfrontiert sein. Hybridsysteme unter Beteiligung von Wolken können ein Ausweg sein. Gleichzeitig können Sie mit dem aktuellen "Cartoony" -Bild immer noch "immersive" Inhalte erstellen, da dies für das Gehirn ausreicht. Versuchen Sie, auf einem VR-Board über einen VR-Abgrund zu gehen.

Die Verbreitung von VR-Helmen ist jetzt gering, daher erstellen wir VR-Installationen in unseren Büros und laden dort Verbraucher ein. Es ist klar, dass dieser Ansatz die Aussicht hat, teure und komplexe Produkte zu verkaufen - Immobilien, Yachten, Autos, Besichtigungstouren. Der Schlüssel hierbei ist der Übergang von Ad-hoc-Lösungen, dh Anwendungen, die einen bestimmten Fall implementieren, zu ganzen XR-Plattformen, die es Käufern und Verkäufern ermöglichen, sich zu finden.

Im Bereich der immersiven Technologien ist eine scharfe Monetarisierung noch nicht sichtbar, die Spieler verhalten sich wie durch Berührung. Der Grund ist, dass nicht viele Menschen Augmented Reality im Alltag verwenden. Um sie auszuprobieren, müssen Sie mindestens eine zusätzliche Anwendung herunterladen. Dies erschwert die Art und Weise, wie Verbraucher Technologien erhalten.



Bei all diesen Entwicklungen gibt es keine signifikante Gamifizierung, im Gegenteil, es besteht ein Wunsch nach Realismus. Das Erstellen einfacher Interaktionstools ist nur die Hauptaufgabe für Entwickler. Die Entwicklung von Inhalten ist jetzt sekundär zur Entwicklung von UX / UI. Die Bildauflösung ist immer noch niedrig und nicht fotorealistisch, sodass die Technologie Raum für Wachstum und Entwicklung bietet. Die Verbesserung der Benutzererfahrung ist mit der Prozessorleistung und der Geschwindigkeit der Datenübertragung und -verarbeitung verbunden.

Möglicherweise werden bald Hybridlösungen erscheinen: Beispielsweise wird die Bildverarbeitung auf dem Server online durchgeführt und dann über Funk, WLAN oder Bluetooth-Kanal an den mobilen Helm des Benutzers übertragen. Bisher sind dies jedoch nur Annahmen. Wir sind auf jeden Fall zuversichtlich, dass immersive Technologien in vielen Branchen Anwendung finden werden, auch in unserer Finanzbranche.