Do Alibaba a Pyaterochka: quem e como usa o sistema de reconhecimento facial nos negócios

Pague um hambúrguer sem cartão, não espere pelo registro no hotel, não fique na fila do caixa - tudo isso é possível com a ajuda das tecnologias de reconhecimento de rosto. Nos últimos anos, muitos grandes varejistas russos e estrangeiros estão testando ativamente essas soluções. Selecionamos cinco dos exemplos mais interessantes.



Para saber mais sobre como usar o reconhecimento facial, redes neurais e aprendizado de máquina nos negócios, você pode fazer um curso intensivo na AI School .

1. Alibaba: pagamento por “sorriso” nas lojas e check-in nos hotéis

A KFC, juntamente com a Ant Financial (a "filha" do Alibaba), lançou o serviço Smile to Pay, um serviço "pay by smile" em seu restaurante em Hangzhou em 2017. O chefe do Grupo Alibaba, Jack Ma, o apresentou pela primeira vez na feira comercial CEBIT em Hannover em 2015, mas só foi lançado nas lojas dois anos depois.

Como funciona: para comprar um hambúrguer, é necessário inserir um número de telefone vinculado a uma carteira Alipay e sorrir para a câmera embutida em um terminal biométrico especial. Depois disso, o sistema confirma a identidade do proprietário da carteira e permite que o pagamento seja efetuado.


Vídeo da conta oficial do YouTube do Grupo Alibaba.

É necessário um sorriso para que o sistema entenda que é uma pessoa viva e não uma fotografia. Dois a três segundos são suficientes para reconhecimento. É impossível enganar o sistema, mesmo alterando a cor do cabelo, maquiagem ou usando uma peruca: ele usa um conjunto de características distintas, levando em conta a geometria do rosto e a localização de certos pontos nele.

Em julho de 2018, a tecnologia também foi testada em dois hotéis Marriott - em Hangzhou e no condado de Sanya, na ilha de Hainan. Você não precisa mais esperar na recepção: os hóspedes do hotel tiram fotos para registro e inserem os detalhes de contato no terminal de autoatendimento. Depois disso, o terminal verifica as informações com o número da reserva e imprime um cartão para inserir o número. O tempo de registro foi reduzido em três vezes e leva apenas um minuto (antes - três).

2. Walmart: encontrando compradores "infelizes" nas lojas

Fonte: site oficial do Walmart

O maior varejista do mundo em 2017 desenvolveu uma tecnologia que ajuda a determinar a satisfação do cliente com a loja.

Como funciona: se o sistema detectar um comprador com uma pessoa infeliz, ele deve sinalizar os funcionários da loja sobre isso. Segundo a liderança do Walmart, isso ajudará a melhorar o atendimento ao cliente antes que eles comecem a reclamar maciçamente de qualquer problema.

Além disso, o sistema deve ajudar a analisar o comportamento de compra por períodos mais longos - para isso, vinculará suas emoções ao quanto gastam e ao que compram. Os dados biométricos do cliente são comparados com os dados das transações realizadas por ele, a fim de detectar uma mudança nos hábitos de compra devido à insatisfação.

No início de 2015, o Walmart já estava tentando introduzir um sistema de reconhecimento de rosto - para impedir o roubo de lojas -, mas o experimento falhou . O sistema foi considerado não lucrativo, quantos ladrões foram detectados com sua ajuda, a gerência do Walmart não informou.

3. X5 Retail Group: filas de luta nas bilheterias

O maior varejista russo - X5 (Pyaterochka, Karusel, Perekrestok) - também começou a testar tecnologias de reconhecimento facial em 2017. Segundo os representantes da empresa, a tecnologia era, em particular, ajudar a reduzir a espera na fila das bilheterias e otimizar o espaço de negociação.

Como funciona: Lembre - se dos sinais no caixa - "Se houver mais de cinco pessoas na fila, ligue para o número ..."? O sistema de reconhecimento de rosto faz o mesmo automaticamente: se houver filas de mais de cinco clientes e algumas caixas registradoras da loja não funcionarem, o diretor receberá uma notificação: "Você precisa abrir a caixa registradora". E com a ajuda da análise de vídeo, você pode descobrir para onde mais pessoas vão à loja, o que elas prestam atenção e, em seguida, organizar adequadamente mercadorias e materiais promocionais.

Os sistemas de reconhecimento de rosto não armazenam fotos ao mesmo tempo, explicou Vasily Gromov, diretor de tecnologia da informação da rede de varejo Karusel (parte do X5 Retail Group). O sistema cria uma função que determina a localização dos pontos no rosto - maçãs do rosto, olhos, ouvidos e assim por diante (hash do rosto). Na próxima vez, entrando no campo de visão das câmeras conectadas ao módulo de reconhecimento, o sistema verifica a imagem com um diretório de hash e emite um sinal sobre quem está no vídeo. Vasily Gromov também apontou que "do ponto de vista da legislação, o hash de uma pessoa não é uma informação pessoal, pois não permite identificar uma pessoa sem informações adicionais". A empresa escreveu recentemente no blog oficial do X5 no Habr que continua comparando as tecnologias de reconhecimento facial de diferentes empresas.

4. "Dixie": mulheres - cosméticos, homens - cerveja

Fonte: site oficial AddReality
Na Dixie, eles decidiram experimentar as tecnologias de reconhecimento de rosto ao mesmo tempo que o X5 Retail Group, mas escolheram outro desenvolvedor, o AddReality. O objetivo era determinar o gênero e a idade dos clientes e implementar publicidade direcionada na zona de caixa e no pregão. A Dixie começou a testar a identificação biométrica nas cadeias de lojas Victoria e em sua sede em 2017.

Como funciona: Em telas grandes instaladas em pregões, uma câmera é montada para reconhecer o rosto de uma pessoa que, de passagem, chama a atenção para a tela.


“Você pode determinar se um homem é uma mulher ou uma mulher, com idade aproximada e, levando em consideração esses parâmetros, com base no pool de anunciantes existente, o anúncio mais adequado é transmitido no monitor. Para as mulheres, pode ser um anúncio de cosméticos, mas para um homem de meia idade, por exemplo, cerveja ”, explicou Vladimir Muravyev, diretor de TI da Dixy.

5. Yandex: publicidade especial para "barbudos" e intelectuais em farmácias

Fonte: Yandex

Em junho de 2018, a Yandex lançou a venda de publicidade direcionada em telas usando o sistema de reconhecimento facial nas farmácias da Asna. Ele se baseia na mesma tecnologia que já foi usada nas lojas Victoria, complementada pela capacidade de selecionar a publicidade mais adequada para o usuário usando um mecanismo de pesquisa.

Como funciona: o sistema consiste em uma tela e uma câmera que reconhecem o espectador: idade, sexo, características da aparência - por exemplo, óculos ou barba e outras características. Depois disso, usando o Yandex.Direct, o anúncio mais adequado para esse cliente é exibido na tela.

Segundo um representante da Yandex, o sistema pode determinar de forma independente os tipos de várias pessoas na frente da tela, e o anunciante pagará apenas pelas impressões segmentadas. Se houver três pessoas na frente da tela, das quais apenas duas são relevantes para o anúncio, o sistema contará duas impressões.

A Addreality observou que o sistema "usa apenas dados anônimos do usuário, não identifica clientes individuais, não usa dados pessoais e não grava vídeos de compradores que passam pela tela". O experimento começou com 70 telas, outras 2000 aparecerão nas farmácias da Asna em caso de teste bem-sucedido do sistema.

Para saber mais sobre como usar o reconhecimento facial, redes neurais e aprendizado de máquina nos negócios, você pode fazer um curso intensivo na AI School . Os palestrantes do curso da Microsoft, Nanosemantics e Comparex LLC explicarão como usar diferentes tipos de IA e quais ferramentas estão disponíveis para isso. O intensivo mais próximo ocorrerá de 17 de novembro a 15 de dezembro.