Esta tecnologia permite a identificação com mais de 99% de precisão, mesmo quando o utilizador está a usar máscara, e será demonstrada num conceito de loja de conveniência Lawson sem dinheiro no escritório da Fujitsu Technology Square em Shin-Kawasaki, Japão ⁽¹⁾, para um teste de campo a partir de janeiro de 2021. Vídeo do sistema em utilização.

Os utilizadores que utilizam máscaras representam um desafio para as tecnologias convencionais de filtragem de reconhecimento facial, uma vez que grande parte do rosto está obscurecido, impossibilitando a autenticação em alguns casos. No entanto, com a tecnologia recentemente desenvolvida, as diferenças na aparência dependendo da presença ou ausência de máscara podem ser ultrapassadas através da geração de uma imagem composta que combina a máscara com a imagem facial e testa o modelo. Isto permite alcançar uma precisão de filtragem superior a 99%, equivalente à obtida sem máscara. Além disso, a Fujitsu melhorou a sua tecnologia de sensor de autenticação por veias da palma da mão, melhorando a interface do utilizador para que os utilizadores saibam a distância ideal para posicionar a mão em relação ao sensor para uma autenticação perfeita. Esta tecnologia ficou em sexto lugar entre 147 fornecedores globais participantes e em primeiro lugar entre os fornecedores japoneses ⁽²⁾ no teste de fornecedores de autenticação facial conduzido pelo Instituto Nacional de Padrões e Tecnologia dos EUA (NIST). Contexto do Desenvolvimento:
Nos últimos anos, a utilização de tecnologias de autenticação biométrica tem aumentado, incluindo em áreas como o processamento de pagamentos em lojas físicas e a verificação de identidade para eventos. Agora, estas tecnologias prometem também ajudar a limitar a disseminação da COVID-19, minimizando o contacto humano durante as transações e processos de verificação. Para atingir este objetivo, a Fujitsu está a acelerar a introdução de interfaces de utilizador contactless para autenticação, aproveitando o reconhecimento facial e das veias da palma da mão, com uma série de testes de campo realizados ao longo do último ano (Fig. 1).

Desafios:
Em muitas partes do mundo, as autoridades de saúde têm destacado o uso de máscaras como uma ferramenta importante para ajudar a prevenir a propagação de doenças infeciosas, como o vírus da COVID-19. No entanto, quando a autenticação facial é realizada com o uso de máscara, a maior parte do rosto fica obscurecida, e a precisão deste método pode ficar comprometida. A pensar nisso, a Fujitsu trabalhou para melhorar a precisão da autenticação biométrica multifatorial na sua loja piloto, combinando a tecnologia de filtragem facial com o reconhecimento das veias da palma da mão. Além disso, considerando a futura implementação do sistema para os utilizadores em geral nas lojas físicas, será essencial melhorar a interface do utilizador para facilitar a utilização, permitindo que os utilizadores se registem e autentiquem sem explicações complexas ou intervenção dos colaboradores da loja.
Nova Tecnologia Desenvolvida
: Os Laboratórios Fujitsu desenvolveram uma tecnologia de aprendizagem automática com expansão de dados que permite uma filtragem altamente precisa mesmo quando o utilizador está a usar máscara.
As características da tecnologia desenvolvida são as seguintes:
Com a tecnologia típica de reconhecimento facial, quando um utilizador usa máscara, apenas a área exposta dos olhos é digitalizada para extrair características como a forma e a posição do rosto. Embora este método possa ajudar a reduzir o impacto do uso de máscara na precisão das leituras, não consegue extrair características de todo o rosto, aumentando a possibilidade de o utilizador não ser reconhecido devido à insuficiência de dados.
Para mitigar este efeito, a tecnologia recentemente desenvolvida gera uma imagem do rosto do utilizador sem máscara, tendo em conta a extração de todas as características faciais, como o formato e os contornos. Isto significa que, mesmo quando o utilizador está a usar máscara, poderá ser reconhecido em comparação com a imagem facial correspondente de uma grande base de dados, com o mesmo nível de precisão que sem máscara. Especificamente, a tecnologia estima a posição do rosto com base nas características faciais, como a posição dos olhos e do nariz. Com base nos resultados da estimativa, uma máscara artificial é redimensionada e sobreposta à imagem do rosto para gerar uma imagem facial com máscara de aspeto natural. Além disso, o sistema utiliza vários tipos de máscaras para acomodar situações em que os utilizadores utilizam máscaras de diferentes cores, padrões e formatos (Fig. 2). Isto torna a autenticação multifatorial mais higiénica e fácil de utilizar, permitindo que as pessoas se autentiquem sem remover as suas máscaras.
 
Interface do utilizador melhorada:
A interface do utilizador do sistema de autenticação por veias da palma da mão também foi melhorada para uma operação mais fluida. Foi adicionada uma luz em forma de palma ao sensor, e a cor e o padrão da luz mudam consoante a distância da mão, indicando a altura correta para uma autenticação precisa (Fig. 3). Isto permite que as pessoas que não estão familiarizadas com a autenticação por veias da palma da mão ajustem as palmas das mãos para a altura correta para uma autenticação suave e sem contacto (Fig. 4).
 
Resultados:
Ao utilizar a tecnologia e a interface de utilizador recentemente desenvolvidas, a Fujitsu espera fornecer serviços mais seguros e prevenir a propagação de doenças infeciosas em diversas situações, como pagamentos em lojas físicas através de autenticação biométrica e identificação pessoal em centros de lazer.
Planos Futuros
: Para garantir que os utilizadores podem realizar o processo de autenticação por conta própria utilizando a tecnologia desenvolvida e a interface de utilizador melhorada, a Fujitsu irá introduzir esta tecnologia num sistema atualmente em fase de verificação ⁽³⁾ numa loja de conveniência cashless da Lawson no Shin-Kawasaki Technology Plaza, em cooperação com a Lawson, uma importante cadeia de retalho japonesa. A Fujitsu irá realizar testes de verificação a partir de 21 de janeiro de 2021, com o objetivo de colocar o sistema em utilização prática até ao final do ano fiscal de 2021.
Links relacionados
: Vídeo de demonstração: "Terminal de autenticação biométrica multifatorial em utilização"

[1]
Conceito de loja de conveniência sem caixas da Lawson no escritório da Fujitsu Technology Square em Shin-Kawasaki. Desde fevereiro de 2020, a Fujitsu participa numa prova de conceito (POC) conduzida pela Lawson, Inc. para soluções sem caixas num dos seus escritórios. Com base nos resultados da POC, a Lawson tem trabalhado com a Fujitsu, bem como com a Zippin dos Estados Unidos, para identificar desafios comerciais e técnicos.
[2]
Esta tecnologia ficou em sexto lugar entre 147 fornecedores globais participantes e em primeiro lugar entre os fornecedores japoneses no teste de fornecedores de reconhecimento facial realizado pelo Instituto Nacional de Padrões e Tecnologia dos EUA (NIST) em novembro de 2020. Efeitos da máscara facial FRVT.
[3]
A Fujitsu irá introduzir esta tecnologia num sistema atualmente em verificação. Este refere-se ao sistema fornecido pela VCOGNIZATION TECHNOLOGIES, INC. "Zippin". O sistema integra dispositivos como câmaras e sensores de peso necessários para o self-service, funções de IA para reconhecimento de clientes e produtos e funções para integração com o pagamento e a gestão de stocks.