Hoje falaremos sobre a aplicação da análise de vídeo nos negócios de varejo, serviços e restaurantes. Será sobre a análise de clientes, seu tráfego, exclusividade, repetibilidade, gênero e idade e, é claro, emoções. Um pequeno toque na disciplina dos funcionários. Haverá apenas análises práticas, exemplos e nenhuma água.
O artigo acabou sendo grande, e eu o dividi em duas partes, mas ainda haverá muitas cartas.
Na sequência do artigo " Como somos analisados nos cinemas ... e não apenas ".O sujeito com reconhecimento facial é bastante socialmente sensível, portanto, requer uma abordagem reverente e cautelosa da análise dos dados. Por um lado, é necessário não entrar no campo de dados pessoais e pessoais de pessoas sem o seu consentimento, por outro lado, estudar e analisar o interesse das pessoas pelo posicionamento correto e discreto de seus serviços e bens.
Lembre-se de que em todas as decisões e tecnologias consideramos e analisamos uma pessoa em um local público como uma pessoa anônima que, com uma certa certeza (80-90%), possui um conjunto de atributos: gênero, idade, emoções. Não introduzimos parâmetros personalizados adicionais: número do documento, nome, data de nascimento e não o procuramos nas redes sociais e em outros bancos de dados. Assim, a tecnologia permite que você não obtenha mais informações do que uma pessoa comum poderia assistir assistindo a um vídeo gravado em um local público autorizado (loja, restaurante, cabeleireiro e outros pontos).
Como no post anterior , não haverá ficção aqui, mas haverá uma história sobre soluções completamente aplicadas e acessíveis que já existem e funcionam. Vamos nos concentrar na acessibilidade, como nossa própria empresa é uma pequena empresa e tentamos disponibilizar nossos produtos principalmente para pequenas empresas.
A análise de vídeo no mercado existe há muito tempo - nem uma dúzia de anos. O tempo passa, novas tecnologias mudam e aparecem. O que costumava ser acessível apenas para grandes corporações e agências governamentais entra no mercado de consumo comum. O preço está aumentando e o valor do uso da análise de vídeo de compradores, visitantes e clientes pode ser muito grande. O principal é entender como usar esses dados para que não sejam apenas mais um arquivo com perspectivas pouco claras!
Vamos lá
Ferramentas de análise de visitantes
Quais ferramentas existem no mercado que permitirão às empresas coletar e analisar dados de seus clientes, clientes e apenas visitantes? Não quero dizer uma audiência online , onde tudo é mais simples e compreensível, mas offline .
Em primeiro lugar , esses já são contadores tradicionais de pessoas . Eles são usados, se não todos, então muitos. Eles são praticamente obrigatórios nas áreas alugadas de shopping centers, mas são cada vez mais encontrados em lojas isoladas, salões de beleza, etc. Podem ser quadros de infravermelho comuns, trabalhando com o princípio de interrupção de feixe, podem ser contadores 2D baseados em câmeras de vídeo, contadores 3D e scanners Wi-Fi. Não compararei os princípios de trabalho, qualidade e custo de cada tipo de medidor na estrutura deste artigo. É importante que eles estejam no mercado e todos escolham uma solução acessível e com a qualidade esperada do cálculo. Esqueci outro tipo de contagem - manual . Ele também tem um lugar para estar. Mencionarei duas opções comuns para a contagem manual: contagem de pessoas pelo controlador diretamente na loja e contagem de pessoas por arquivos de vídeo. Naturalmente, a primeira opção tem um caráter bastante aleatório, mas a segunda opção é muito comum. Conheço um exemplo em que o dono de uma pequena rede de cabeleireiros assim mantinha (e continua a manter) contando todos os seis pontos. As desvantagens do cálculo manual são bastante óbvias: a complexidade do cálculo, o fator humano no cálculo e, como resultado, a probabilidade fracamente previsível de erros.
Por que contar pessoas?
Por exemplo, para saber o atendimento real de sua loja de roupas, salão ou café. Compreender as horas de atendimento, dias e dias da semana. Capturar / prever tais saltos. Para avaliar a conversão de vendas (quantas foram à loja - quantas verificações no caixa). Finalmente, controlar o pessoal, impedir roubos, etc. Por exemplo, na loja de cabeleireiro, o mestre registrava 5 clientes por dia e, de fato, 8.
Em segundo lugar , estes são cartões de fidelidade. Os cartões de fidelidade são ainda mais comuns que os contadores de pessoas e seu principal objetivo é incentivar o cliente a retornar e, idealmente, retornar muitas vezes. Programas de fidelidade inteiros estão sendo inventados para acompanhar e tentar manter o cliente ao máximo depois que ele chegou pela primeira vez. Não é fácil, mas vale a pena.
Em terceiro lugar , este é um questionário. Não basta dar ao cliente um cartão de desconto. É importante conhecer e entender para quem o cartão foi emitido: sexo, idade, preferências, qualquer informação que ajude a trabalhar com o cliente de maneira mais seletiva e adivinhar seus desejos.
Outra ferramenta que cada vez mais começa a aparecer no setor de serviços é a avaliação da qualidade do serviço ao cliente para eles. Ou seja, ao final do recebimento do serviço, o cliente é convidado a clicar em um dos botões "Gostei", "Não gostei".
E, finalmente, a análise dos dados de caixa e sua comparação com as informações recebidas de todas as fontes anteriores.
Assim, o principal objetivo de controlar o atendimento de uma loja, academia de ginástica, cafeteria e outras empresas é a busca contínua de alavancagem para que esse tráfego cresça ou pelo menos não caia. O tamanho e a especificidade do negócio determinam a composição de ferramentas e métodos.
Obviamente, quanto maior o negócio, mais ferramentas diferentes e suas combinações ele pode pagar.
Pequenas empresas são mais difíceis. Aqui, todo novo tipo de custo é muito reverente, o orçamento de marketing geralmente está completamente ausente e o proprietário é seu próprio diretor e comerciante. Mas ainda assim, não há mãos suficientes para todas as tarefas. Portanto, em qualquer caso, você terá que delegar tarefas a máquinas ou pessoas.
Portanto, o principal problema de controle e monitoramento das atividades operacionais é o problema da credibilidade dos dados. Quanto aos que são recebidos dos contadores e aos que foram contados manualmente.
Se uma empresa confia nos dados, muitas vezes o custo de um produto ou tecnologia desaparece em segundo plano.
Visão computacional - uma ferramenta moderna para analisar o tráfego de visitantes
A solução CVizi , apelidada de Track Expert, tem duas maneiras completamente diferentes de coletar e processar estatísticas sobre pessoas. O primeiro é contar as pessoas pela cabeça, em outras palavras, pelo topo da cabeça. E o segundo, inovador - contando pessoas por pessoas com vários recursos adicionais.
Contadores de visitantes 2D e 3D
Primeiro, algumas palavras sobre a primeira abordagem, para que houvesse algo para empurrar.



A câmera é instalada acima da zona de entrada e conta todos aqueles que passaram nas duas direções. Esse método também é chamado de contador de visitantes 2D, como usa duas coordenadas para rastrear eventos de entrada ou saída.
O Track Expert usa um algoritmo de contador 2D proprietário que é bastante simples, confiável e fornece precisão de contagem garantida de pelo menos 85% e, de fato, até mais de 90%. Quero prestar atenção ao termo "não menos". Não há "até 99%" lá, o que às vezes pode ser alcançado, mas em operação normal é bom se 60%. Isso é importante! Como durante, por exemplo, as vendas, é importante avaliar o aumento do tráfego humano. E se o erro estiver flutuando, e mesmo dentro de algumas dezenas de por cento, o sentido desse sensor será zero.
Normalmente, os algoritmos de contador 2D consistem em várias etapas importantes:
- Alterações qualitativas em pixels no quadro. Entende-se como a alocação do movimento de objetos grandes em relação a outras mudanças (sombra, flashes de luz, vibrações matriciais).
- Clusterização do movimento identificado - a construção dos contornos dos objetos propostos. Em outras palavras, a distribuição de todos os movimentos encontrados entre objetos em movimento.
- Rastreamento de movimento - os objetos selecionados são movidos, seu movimento deve ser controlado e um identificador exclusivo para cada objeto é definido (isso é levado em consideração no cálculo).
A seguir, levamos em conta as limitações do nosso mundo e as tolerâncias:
- Um objeto não pode aparecer e desaparecer em determinadas áreas, por exemplo, no centro do salão (a menos que, é claro, haja uma escotilha, tampas de invisibilidade, o objeto não tenha uma velocidade louca em relação à frequência da câmera etc.). Aceitando essa tolerância, são estabelecidas zonas definidas, por exemplo, na entrada da loja e o caminho é determinado.
- Quando vistas de cima, duas pessoas não podem ficar em cima umas das outras (exceto, é claro, crianças no colo dos pais). Essa tolerância permite que você organize a capacidade de colidir e empurrar objetos em movimento.
Os contadores 3D são mais precisos que o 2D devido ao fato de que, em vez das etapas 1 e 2, o 3D não utiliza o movimento, mas a profundidade da imagem (e é dada por duas lentes, deslocadas uma da outra por uma pequena distância e calibradas entre si). Assim, o armazenamento em cluster será mais preciso.
Como eu disse acima, esses contadores (2D e 3D) são bastante comuns, mas permanece uma questão aberta de confiança nos dados, e aqui propomos usar a função de confirmação de foto de todos os eventos, quando o usuário sempre pode verificar e verificar a qualidade da contagem.

Naturalmente, você pode obter relatórios com diferentes agrupamentos por objetos, zonas de entrada, dias, semanas e hora do dia e comparar o comparecimento nessas seções.
Por exemplo, assim:

Assim, extraímos o máximo de informações desses dados. No entanto, o cliente quer mais: separar visitantes de funcionários, entender que não é a primeira vez que uma pessoa chega, segmentar o público por sexo e idade. E para resolver esses problemas, um ângulo de câmera semelhante (que olha de cima para baixo e conta pela cabeça) não funciona, então o Track Expert tem uma segunda maneira de contar - pelas faces .
O rosto de uma pessoa é uma unidade de identificação bastante única que permite que você reconheça uma pessoa, seu sexo e idade, calcule quando essa pessoa apareceu na frente da câmera pela última vez, para entender se essa pessoa é um funcionário e até para ver suas emoções.
Análise da audiência por rostos no modo automático - realidade ou sonhos?
Onde o reconhecimento facial é usado ativamente agora? A tecnologia em si não é nova. Imediatamente, o setor bancário vem à mente, bem como tudo relacionado às agências policiais e à segurança de grandes instalações: metrô, aeroportos, empresas fechadas, etc. Uma empresa comum pode pagar? Dificilmente.
Muitos fornecedores agora oferecem sistemas de reconhecimento facial. Alguém reconhece um pouco melhor, alguém um pouco pior. Isso não é importante. Bem, eles reconheceram o rosto e depois o que? O que fazer com toda essa variedade de rostos? Sua equipe de marketing está pronta para essa quantidade de novas informações? Talvez o seu sistema de CRM esteja pronto para aceitar esses dados e analisá-los?
Os negócios precisam de uma solução o mais completa possível, para que possa ser usada e receber valor comercial, e não apenas tecnologia.
Finalmente, voltando-me para o campo prático, mostrarei alguns exemplos e quais informações são fornecidas pelo Track Expert e como isso pode ajudar os negócios em gerenciamento operacional e estratégico.
Quais são as estatísticas corretas para os indivíduos e como usá-las
Abaixo, darei exemplos que permitirão avaliar a quantidade de informações que podem ser obtidas de apenas uma câmera usando o Track Expert .
Deve ser conveniente trabalhar com dados e confiar neles. Uma das primeiras perguntas que ouvimos é "Prove que as estatísticas são coletadas para pessoas reais e não geradas aleatoriamente". Por um lado, é uma pena ouvir, mas por outro lado, os medos são claros. Afinal, passamos ao campo de assuntos sutis, que se tornarão comuns em cinco anos, e agora isso ainda é inovação. Então por favor. Guarde nossas evidências.
Este é um fragmento de um álbum de rostos o dia inteiro:

Agora, a própria estatística e análise, usando o exemplo de um mês e um objeto (a propósito, este é um café, o que faz você olhar a análise através de um prisma apropriado).

Frequência e Taxa de Retorno
Olhando até agora apenas para esses dados, você pode ver imediatamente e claramente o retrato dos visitantes. Essa instituição é muito mais popular entre as mulheres do que entre os homens. Além disso, mulheres de 18 a 25 anos e homens de 35 a 50 anos, para quem esse café é muito mais bonito que o resto, podem ser claramente distinguidas do diagrama de idade e sexo.
No lugar do dono do café, eu pensaria na direção dos seguintes aspectos. O primeiro. Como atrair ainda mais meninas do grupo de 18 ... 25 anos e homens do grupo de 35 ... 50 anos, porque isso já é cem por cento do público-alvo e eles encontraram algo para si no café. O segundo, como equalizar a diferença de gênero nessas faixas etárias, é reforçar o "atraso". Suponho que alguma universidade esteja localizada nas proximidades, o que cria esse tráfego entre meninas de 18 a 25 anos. Se este é um instituto pedagógico, é claro que é ruim - encontrar homens entre 18 e 25 anos nesse número será problemático, até eu diria que é impossível, mas, para o resto, não deve haver problemas. Como alternativa, você pode trabalhar com o menu e fazer algumas promoções para as categorias de clientes "atrasadas", sem absolutamente "quebrar" as estatísticas para o restante.
Existe uma margem de lealdade, pois conversão de retorno de aproximadamente 70%:


Duração do serviço
A câmera está instalada no caixa. Para o setor de serviços, a velocidade do atendimento ao cliente pode ser uma das principais métricas para o desempenho da equipe. E o Track Expert fornece essas informações. É assim que parece um gráfico de horário de atendimento ao cliente por horas do dia.

Em geral, nenhum problema é visível. Existem pequenos atrasos no serviço pela manhã, mas se eles são causados pela lentidão do caixa ou pelos próprios clientes é outra questão. Então, neste check-out, está tudo bem. Em geral, essas informações são muito valiosas, necessárias e até necessárias para comparar caixas registradoras, operadores e lojas. Você pode até criar e controlar automaticamente o sistema KPI de funcionários.
Há outra métrica, que chamamos de "Número de abordagens para o checkout". O número de abordagens repetidas para a finalização da compra por um determinado período indica indiretamente a conveniência e a correta disposição das mercadorias para o comprador. Quantas vezes o cliente voltou para tomar um café, depois pedir um pão ou pedir alguma coisa? Esses parâmetros são esporádicos ou regulares? Essa métrica ajuda você a pensar, entender os motivos e responder a essas perguntas.

Emoções do visitante
As emoções do cliente são momentâneas, mas se você abordar corretamente o problema e avaliar o contexto emocional durante todo o tempo em que o serviço for prestado, as estatísticas serão bastante relevantes. E isso pode ser outra métrica para avaliar a qualidade do serviço, além disso, completamente automática.

Por analogia com a maneira como analisamos as emoções nos eventos e nos cinemas, cada pessoa única nos fornece uma grande variedade de dados, que se torna um tijolo nas estatísticas gerais.
Por exemplo, observe o histórico emocional médio dos visitantes durante um mês:

Bem, está tudo bem. Todos os caixas foram provavelmente moderadamente acolhedores, com comida e preços em maior medida, todos gostaram. Em geral, nada de fora do comum, já nojento.
Você também pode ver o que acontece lá dentro do dia. De repente, existem algumas explosões características?

Mas não, nada interessante de novo. Então vamos para o outro lado.
Encontre pessoas que são eliminadas do contexto geral.


Dígitos de quatro e cinco dígitos ao longo do eixo X são pessoas classificadas no primeiro caso, diminuindo as emoções positivas, e no segundo, diminuindo as negativas.
Assim, você pode levar e até trabalhar individualmente com esses cidadãos. Descubra o que eles estavam chateados ou constantemente chateados, ou o que tanto agradou naquele dia.

Funcionários e disciplina
Um dos problemas prementes no cálculo do tráfego humano é o efeito nas estatísticas dos funcionários.
Em primeiro lugar, longe de qualquer lugar, há uma entrada dedicada para eles. Em segundo lugar, os funcionários podem estragar intencionalmente as estatísticas, passando pelo balcão de vaivém. E, terceiro, muitos proprietários e gerentes querem controlar a disciplina dos funcionários. Mas não é apenas assistir a quilômetros de vídeo (não importa se você contrata alguém), mas torná-lo o mais automatizado possível. Olhei o relatório uma vez por dia e está tudo claro - quem, quando, quantas vezes. O ponto. Por analogia com o ACS, mas apenas com confirmações fotográficas! Isso não substitui o ACS, mas apenas uma adição. Não vou descrever em detalhes a aplicação dessas informações, apenas mostrar como elas se parecem.


Conclusões sobre a primeira parte
Na primeira parte do artigo, falei sobre como e quais dados podem ser coletados usando uma câmera de vídeo. Isso não é ficção, mas coisas triviais, como muitos podem objetar. Os serviços de reconhecimento de rosto estão completos, mas soluções comerciais completas baseadas neles - uma ou duas vezes e calculadas incorretamente.
Na próxima parte, falarei sobre uma análise mais profunda, sobre vários casos práticos no varejo e não apenas e, é claro, sobre como tudo funciona. Estamos em um habr !!!
A equipe CVizi deu mais um passo nesse sentido, as fantasias e os sonhos de muitos proprietários se tornaram um pouco mais próximos e mais reais.
Para continuar ....
Sobre o autor
Alexey Osipov - Diretor de Desenvolvimento da
CVizi . Contatos: 'aosipov @ cvizi.com'. Em nossa página no
FB , publicamos notícias sobre o lançamento e o uso de nossos novos desenvolvimentos e tecnologias.