Olá Habr! Este é Sergey Lukashkin, e hoje falaremos sobre tecnologias imersivas.
O termo "imersivo" agora se tornou comum, e pode ser encontrado em relatórios de empresas de pesquisa eminentes (pesquisa estratégica futura) como
Gartner (experiência imersiva) ou
CBInsights .
A tecnologia imersiva também é chamada de tecnologia de realidade aumentada. Sua lista inclui realidade virtual e aumentada, bem como vídeo em 360 °. Eles fornecem o efeito de presença total ou parcial em um espaço alternativo e, assim, alteram a experiência do usuário em áreas completamente diferentes. Neste post, falaremos sobre em que nível essas tecnologias estão hoje, como elas são implementadas e usadas para os negócios.
Primeiro, vamos definir os termos e abreviações que você pode ver em relatórios, artigos e apresentações:
- Imersiva (por imersão - imersa) - tecnologias para imersão total ou parcial no mundo virtual ou vários tipos de mistura da realidade real e virtual.
- RR (realidade real) - literalmente "realidade real" ou realidade objetiva em que estamos e que percebemos com nossos sentidos. Vale ressaltar que a realidade precisa ser determinada. Mas você precisa entender com o que estamos confundindo a realidade virtual.
- VR (realidade virtual) - realidade virtual - uma realidade totalmente simulada usando tecnologia moderna. Isso não é apenas cenas 3D ou 360, mas também som, sensações táteis e até cheiros. Mais sobre isso mais tarde.
- AR (realidade aumentada) - realidade aumentada - aumentada deve ser traduzida mais como "adicionada". Ou seja, adicionamos elementos da realidade virtual simulada à nossa realidade real (RR).
- MR (realidade mista) - realidade mista - o termo apareceu devido ao lançamento do Windows Mixed Reality. Por um lado, o próprio termo permite, na minha opinião, recuperar dos concorrentes. Por outro lado, fala de algum tipo específico de dispositivos e métodos para misturar a realidade. Embora de fato seja VR com algumas adições de RR. Ou AR usando Hololens.
- XR (realidade estendida) - realidade aumentada é um nome comum para as tecnologias AR e VR.
- Vídeo com 360 fotos - conteúdo composto por um 360 ° - ou várias fotos e vídeos costurados. Emissões de 360 ° também são comuns. Russia Today produz muitos desses conteúdos , você pode vê-los em um cartão com qualquer telefone mais ou menos poderoso.
Agora analisaremos mais detalhadamente o que está oculto sob essas abreviações.
Foto ou vídeo panorâmico e 360 °
As câmeras estão disponíveis há algum tempo, desde 2018 elas são suportadas pelo Facebook. De fato, esses são conjuntos sequenciais de imagens costuradas usando algoritmos. Você pode fazê-las como uma única câmera ou câmeras especiais de 360 °. Este é um formato muito conveniente com o qual você, por exemplo, pode fazer um
tour virtual pelo Museu Pushkin.
Vídeo em 360 °
Como é implementado. As câmeras de 360 ° fotografam a área circundante, após a qual os vídeos resultantes são montados em programas especiais. Existem soluções perfeitas, mas são mais caras para os negócios. Às vezes, gráficos adicionais são adicionados ao vídeo final.
Agora também difundidas transmissões on-line "panorâmicas". Quando você tiver vários pontos com vista panorâmica, basta instalar o equipamento e começar a fotografar. Mas esse formato tem requisitos bastante altos para hardware e também exige uma sintonia cuidadosa do som.
Onde usado. Esta tecnologia é amplamente utilizada na demonstração de imóveis. Uma simples pesquisa no Google oferece muitas agências B2B que fazem tours virtuais para as necessidades de corretores de imóveis e desenvolvedores:
360 Real Estate ,
360walkthruproperty ,
Forj e outros.
Vídeos panorâmicos também são usados na mídia. Acima, eu já dei um link para
o projeto RT 360 , que dá ao espectador a oportunidade de "estar presente no momento" - seja
na celebração do Ano Novo em Berlim ou na
copa internacional de superbike . Além de postar na Internet, esses materiais imersivos também estão em
exibição na exposição permanente do Escritório das Nações Unidas para Assuntos do Espaço Exterior, em Viena.
Realidade Aumentada
Como muitas tecnologias inovadoras, a realidade aumentada apareceu em meados do século passado para desenvolvimentos militares. Foi planejado e, em seguida, começou a ser usado com sucesso para projetar leituras importantes de instrumentos no capacete ou no pára-brisa de um lutador, a fim de reduzir o tempo de recebimento de informações e aumentar a velocidade de reação dos pilotos.
Hoje, várias áreas de realidade aumentada estão se desenvolvendo. O mais comum é o
AR no smartphone . A Apple desenvolve seu kit de AR há vários anos. Hoje, existem
mais de 5 bilhões de smartphones no mundo e, potencialmente, essa é uma cobertura muito grande para produtos com AR. Um exemplo impressionante de sucesso é o jogo Pokemon Go, que trovejou em todo o mundo. Existem projetos de marketing nos quais, por exemplo, as moedas estão espalhadas em AR, e o usuário deve pesquisá-las e coletá-las para obter um desconto. As moedas são espalhadas de modo que nelas, como em migalhas, o usuário chegue ao limiar da loja. Também vale lembrar o projeto recentemente lançado do Google Street nos EUA, que ajuda na navegação. Cenários mais simples também são procurados: por exemplo, em 2017, a Positive Technologies lançou um calendário e diário em que as fotos ganharam vida quando o telefone pairava.
Outros dispositivos para trabalhar com realidade
aumentada são os
óculos de realidade aumentada . O Google Glass é um projeto que não é tão bem-sucedido. Hololens, um projeto da Microsoft, é uma solução cara, mas sua vantagem é que é imediatamente integrado ao ecossistema da empresa. Além disso, o mercado possui muitos outros óculos de realidade aumentada - da Ericsson, Huawei e muitas outras grandes empresas e startups.
Soluções separadas são implementadas para o setor de acordo com o modelo de assinatura, que inclui consultoria e reparo de equipamentos.
Como é implementado. Projetar um objeto virtual no mundo real pode ser feito usando um telefone. Marcas frequentemente usadas, projeção no vidro de um carro, avião, óculos - por exemplo, nos óculos Microsoft Hololens. Se você usa a tecnologia de realidade virtual na rua, precisa prestar atenção especial à iluminação, pois com uma luz muito brilhante, os objetos de RA podem parecer opacos. Em geral, embora essa não seja a tecnologia mais avançada, ela permite que você faça aplicativos de entretenimento.
Onde usado. Hologramas, sobreposição de imagens no ar de canais de televisão, uso de monitores interativos - essas são as encarnações da AR que nos parecem familiares. No entanto, existem exemplos mais inesperados do uso da tecnologia.
Por exemplo, a Pepsi Max usou a tecnologia AR para criar seu próprio
comercial . A empresa instalou monitores especiais de realidade aumentada em uma das paradas de Londres e filmou a reação dos transeuntes aleatórios.
Outro exemplo é o planejamento de interiores da IKEA:
A realidade aumentada é, como eu disse, um dos segredos do sucesso do PokemonGo, também um recurso do aplicativo
Argon4 no AR Browser SDK, com o qual você pode, por exemplo, fornecer informações de referência sobre os pontos turísticos quando apontar a câmera do smartphone para eles.
Quanto aos óculos AR, essa área ainda é menos desenvolvida, pois os modelos atuais são bastante volumosos e caros. Mas todos os anos, os óculos estão se tornando mais fáceis e bonitos. Outra direção do AR é a projeção nas lentes de contato. Sua desvantagem até agora é que a grade é visível na lente. Mas, ao mesmo tempo, existem muitas vantagens desse método.
Realidade virtual
Como é implementado. A realidade virtual é principalmente conteúdo visual e sonoro. Nesse caso, o som é de importância fundamental: complementa a virtualidade e cria o efeito de estar em um local irreal, simulando a reflexão e a direção das ondas sonoras.
Você pode entrar em uma realidade virtual alternativa, por exemplo, usando óculos especiais. Dividindo a imagem diante dos olhos em duas partes, elas criam um efeito estereoscópico. Se houver rastreamento para as posições do corpo, o espaço virtual também levará em consideração os movimentos da cabeça e do corpo.
Existem outras maneiras de entrar na realidade virtual:
- Um smartphone com um aplicativo VR especial, inserido em um estojo especial com lentes. A solução mais fácil é o Google Cardboard Cardboard. Se você possui um dispositivo Samsung Galaxy, pode comprar o Gear VR - um estojo avançado, complementado por giroscópios e controles.
- Sistemas de rastreamento. Permite mover o usuário para o espaço virtual. Também estão sendo desenvolvidos trajes que transmitem sensações da realidade virtual - por exemplo, fragrâncias -, mas até agora esse é um produto caro e não muito perfeito.
- Luvas especiais em vez do joystick habitual. Este elemento é necessário para mãos humanas interagirem naturalmente com o mundo virtual. As luvas agora são inferiores aos joysticks na qualidade da calibração, mas sua qualidade está aumentando.
- Capacetes móveis VR com monitores embutidos (HTC Vive, Oculus Go e outros) . Esses dispositivos são mais otimizados para trabalhar em VR em comparação com os casos para smartphones, possuem gráficos de alta qualidade, som integrado e um joystick para controle.
- Capacetes "Heavy VR" (como o Oculus Rift). Os gráficos processados são transmitidos ao capacete por fio a partir de um computador de jogo com uma poderosa placa gráfica. A necessidade de se comunicar com um PC cria restrições de uso, mas ao mesmo tempo, capacetes pesados de VR têm melhores gráficos e uma experiência de usuário potencial mais rica. As câmeras de rastreamento registram a posição do joystick e a posição de uma pessoa, imergindo-a na realidade virtual de maneira mais realista. Também incluídos com esses capacetes estão os controladores.
Quase todos os principais fabricantes de telefones e laptops lançaram seus capacetes de realidade virtual: HTC, Lenovo, Xiaomi, Samsung, Oculus e outras empresas. Alguns estão tentando criar um ecossistema: por exemplo, a HP está promovendo uma linha de laptops e capacetes com manipuladores e rastreamento externo.
Para tais decisões, outro nome é usado -
realidade mista . Na verdade, é mais marketing, apareceu junto com o lançamento do Windows Mixed Reality - uma plataforma de desenvolvimento de aplicativos. Na sua essência, é um construtor com modelos 3D, um conjunto específico de ativos no kit. Em termos de qualidade do produto que está sendo criado, a solução do Windows é muito mais fraca que os mecanismos Unreal Engine e Unity. Eles, diferentemente da plataforma Windows Mixed Reality, têm não apenas a capacidade de projetar e criar objetos virtuais, trabalhar com texturas e com luz, mas também criar lógica de negócios específica.
Onde usado. Um projeto interessante no campo da RV foi feito pela IKEA. A empresa
convidou seus clientes a usar óculos especiais e estar na cozinha virtual. Aqui, com a ajuda de um joystick, eles podiam ler um livro de receitas, cozinhar almôndegas, enviar alimentos para processamento.
A transportadora alemã Deutsche Bahn também está experimentando a realidade virtual. Por quatro anos, a empresa
oferece a seus funcionários em potencial que usem óculos de realidade virtual e demonstram suas habilidades em simular um dia útil real.
A empresa de tecnologia israelense Actiview desenvolveu uma
plataforma para contratação remota de funcionários usando tecnologias de realidade virtual. “A simulação na realidade virtual nos permite controlar o que o usuário vê, ouve, sente. Vemos o comportamento dele e podemos coletar esses dados ”, comenta Roy Elishkov, vice-presidente de estratégia e desenvolvimento de negócios.
Empresas de RV em vários campos também estão envolvidas em empresas russas. Por exemplo, o
Modum Lab cria projetos de RV para treinamento e outros cenários.
Desenvolvimento VTB
Nós da VTB também estamos trabalhando em vários casos "virtuais". O primeiro é um serviço de votação em VR para acionistas em formato de realidade virtual, integrado a um robô consultor. Utilizamos este produto como parte da assembléia geral anual do banco em junho de 2019. O serviço é facilmente transformado: esperamos que possa ser adaptado para votação pelos acionistas em quaisquer grandes organizações comparáveis em escala ao VTB. E foi desenvolvido para uma subsidiária da VTB Registrar, membro do Grupo VTB.
O segundo caso, atualmente em fase de projeto piloto, são os investimentos em RV, cujo principal objetivo é integrar clientes em serviços de corretagem. Aqui, a VR é uma maneira de fornecer remotamente a consulta automatizada inicial em um formato de busca. Em 5 minutos de uma sessão de RV, o usuário está completamente “imerso” no mundo dos investimentos, seleciona o objetivo de compilar o portfólio e aprende quais oportunidades os produtos de corretagem da VTB oferecem. Depois disso, o gerente ajuda o cliente a abrir uma conta de corretagem e transferir fundos para ela. Do ponto de vista comercial, esse caso permite otimizar o custo do treinamento de funcionários e o número de gerentes necessários para vender serviços de corretagem.
VR tem um grande potencial para os negócios hipotecários do banco. Lançamos a plataforma de hipoteca VTB VR, uma plataforma que une desenvolvedores e clientes. Ele fornece um serviço de consulta remota e visualização remota de imóveis. A plataforma permite criar um espaço virtual com a possibilidade de escolher a configuração do apartamento, uma calculadora de hipoteca e ferramentas de vendas integradas, além de conectar um consultor que consultará potenciais compradores remotamente de outra região.
A AR pode se tornar uma ferramenta universal para a transmissão de ofertas de marketing personalizadas para nossos clientes. É verdade que, embora os usuários como um todo ainda estejam longe de, por exemplo, apontar suas câmeras de smartphone para um pôster interessado em uma agência bancária. Portanto, devemos ter isso em mente ao desenvolver uma estratégia de implementação de AR e oferecer aos clientes cenários de jogo não triviais, levando-os a um novo formato de interação.
Tendências gerais
No final, tentarei resumir a experiência do setor e sugerir o que acontecerá a seguir. Buscando uma imagem realista, enfrentaremos limitações na velocidade de processamento de informações e gráficos. Sistemas híbridos com a participação de nuvens podem ser uma saída. Ao mesmo tempo, a imagem atual de “desenho animado” ainda permite criar conteúdo “imersivo”, pois isso é suficiente para o cérebro. Tente andar em uma placa de VR sobre um abismo de VR.
A penetração dos capacetes de realidade virtual agora é pequena, por isso criamos instalações de realidade virtual em nossos escritórios e convidamos os consumidores lá. É claro que essa abordagem tem a perspectiva de vender produtos caros e complexos - imóveis, iates, carros, passeios turísticos. A chave aqui é a transição de soluções ad-hoc, ou seja, aplicativos que implementam um caso específico, para plataformas XR inteiras que permitirão que compradores e vendedores se encontrem.
No campo das tecnologias imersivas, a monetização acentuada ainda não é visível, os jogadores agem como se estivessem tocando. A razão é que poucas pessoas usam a Realidade Aumentada na
vida cotidiana. Para experimentá-los, é necessário baixar pelo menos um aplicativo adicional - isso complica a maneira como os consumidores obtêm tecnologias.
Em todos esses desenvolvimentos, não há gamificação significativa; pelo contrário, há um desejo de realismo. Criar ferramentas de interação fáceis é apenas a principal tarefa dos desenvolvedores; o desenvolvimento de conteúdo agora é secundário ao desenvolvimento de UX / UI. A resolução da imagem ainda é baixa e não é realista, portanto a tecnologia tem espaço para crescer e se desenvolver. Melhorar a experiência do usuário está associado ao desempenho do processador, à velocidade de transferência e processamento de dados.
Possivelmente, soluções híbridas aparecerão em breve: por exemplo, o processamento de imagem será realizado no servidor on-line e depois será transmitido via rádio, Wi-Fi ou canal Bluetooth para o capacete móvel do usuário. No entanto, até agora, essas são apenas especulações. De qualquer forma, estamos confiantes de que as tecnologias imersivas encontrarão aplicação em muitos setores, inclusive no financeiro.