Эта технология позволяет идентифицировать пользователя с точностью более 99%, даже если он носит маску, и будет продемонстрирована в концепции безналичного магазина Lawson в офисе Fujitsu Technology Square в Син-Кавасаки, Япония ⁽¹⁾, для полевых испытаний, которые начнутся в январе 2021 года. Видео работы системы.

Пользователи в масках создают проблемы для традиционных технологий фильтрации распознавания лиц, поскольку большая часть лица скрыта, что в некоторых случаях делает аутентификацию невозможной. Однако с помощью новой разработанной технологии различия во внешнем виде в зависимости от наличия или отсутствия маски можно преодолеть, создав составное изображение, которое объединяет маску с изображением лица, и протестировав модель. Это позволяет достичь точности фильтрации более 99%, что эквивалентно точности, достигаемой без маски. Кроме того, Fujitsu усовершенствовала свою существующую технологию сенсоров для аутентификации по венам ладони, улучшив пользовательский интерфейс, чтобы пользователи знали оптимальное расстояние от руки до сенсора для беспрепятственной аутентификации. Эта технология заняла шестое место среди 147 участвующих мировых поставщиков и первое место среди японских поставщиков ⁽²⁾ в тестировании поставщиков систем аутентификации по лицам, проведенном Национальным институтом стандартов и технологий США (NIST). История разработки:
В последние годы использование биометрических технологий аутентификации растет, в том числе в таких областях, как обработка платежей в физических магазинах и проверка личности на мероприятиях. Теперь эти технологии также обещают помочь ограничить распространение COVID-19 за счет минимизации контактов между людьми во время транзакций и процессов проверки. С этой целью Fujitsu ускоряет внедрение бесконтактных пользовательских интерфейсов для аутентификации, используя распознавание лиц и вен ладони, проведя ряд полевых испытаний за последний год (рис. 1).

Проблемы:
Во многих странах мира органы здравоохранения подчеркивают важность использования масок как важного инструмента предотвращения распространения инфекционных заболеваний, таких как вирус COVID-19. Однако при использовании лицевой аутентификации в маске большая часть лица оказывается скрыта, и точность этого метода иногда может быть снижена. Учитывая это, компания Fujitsu работала над повышением точности многофакторной биометрической аутентификации в своем пилотном магазине, объединив технологию фильтрации лица с распознаванием вен ладони. Кроме того, при планировании внедрения системы для широкого круга пользователей в физических магазинах в будущем, необходимо будет улучшить пользовательский интерфейс для повышения удобства использования, позволяя пользователям регистрироваться и проходить аутентификацию без сложных объяснений или вмешательства со стороны сотрудников магазина.
Новая технология
: Лаборатории Fujitsu разработали технологию машинного обучения, расширяющую объем данных, которая обеспечивает высокоточную фильтрацию даже тогда, когда целевой пользователь носит маску.
Особенности разработанной технологии следующие.
При использовании типичных технологий распознавания лиц, когда пользователь носит маску, сканируется только открытая область глаз для извлечения таких признаков, как форма и положение лица. Хотя этот метод может помочь уменьшить влияние ношения маски на точность распознавания, он не может извлечь признаки со всего лица, что повышает вероятность того, что целевой пользователь может быть не распознан из-за недостатка данных.
Для смягчения этого эффекта новая разработанная технология генерирует изображение лица пользователя без маски, учитывая извлечение полных черт лица, таких как форма и контуры. Это означает, что даже когда пользователь носит маску, его можно распознать по соответствующему изображению лица из большой базы данных с тем же уровнем точности, что и без маски. В частности, технология оценивает положение лица на основе таких черт лица, как положение глаз и носа. На основе результатов оценки искусственная маска изменяется в размере и накладывается на изображение лица для создания естественного изображения лица в маске. Кроме того, система использует различные типы масок, чтобы учесть ситуации, когда пользователи носят маски разных цветов, узоров и форм (рис. 2). Это делает многофакторную аутентификацию более гигиеничной и простой в использовании, позволяя людям проходить аутентификацию, не снимая масок.
 
Улучшенный пользовательский интерфейс:
Пользовательский интерфейс системы аутентификации по венозному рисунку ладони также был улучшен для более плавной работы. К датчику добавлен светящийся элемент в форме ладони, цвет и рисунок которого меняются в зависимости от расстояния до ладони, указывая на правильную высоту для точной аутентификации (рис. 3). Это позволяет людям, незнакомым с аутентификацией по венозному рисунку ладони, отрегулировать положение ладони на правильную высоту для плавной бесконтактной аутентификации (рис. 4).
 
Результаты:
Используя новую разработанную технологию и пользовательский интерфейс, Fujitsu рассчитывает обеспечить более безопасные услуги и предотвратить распространение инфекционных заболеваний в различных ситуациях, таких как платежи в физических магазинах с использованием биометрической аутентификации и идентификация личности в развлекательных центрах.
Планы на будущее
: Чтобы гарантировать, что пользователи смогут самостоятельно выполнять процесс аутентификации с помощью разработанной технологии и улучшенного пользовательского интерфейса, Fujitsu внедрит эту технологию в систему, которая в настоящее время находится на этапе проверки ^(3), в концепции безналичного магазина Lawson в технологическом центре Син-Кавасаки в сотрудничестве с Lawson, крупной японской розничной сетью. Компания Fujitsu начнет проведение проверочных испытаний 21 января 2021 года с целью внедрения системы в практическое использование к концу 2021 финансового года.
Ссылки по теме
: Демонстрационное видео: «Терминал многофакторной биометрической аутентификации в использовании»

[1]
Концепция магазина без кассиров от Lawson в офисе Fujitsu Technology Square в Син-Кавасаки. С февраля 2020 года Fujitsu участвует в проверке концепции (POC), проводимой Lawson, Inc. для решений без кассиров в одном из своих офисов. На основе результатов POC Lawson работает с Fujitsu, а также с американской компанией Zippin, чтобы выявить бизнес- и технические проблемы.
[2]
Эта технология заняла шестое место среди 147 участвующих глобальных поставщиков и первое место среди японских поставщиков в тестировании систем распознавания лиц, проведенном Национальным институтом стандартов и технологий США (NIST) в ноябре 2020 года. Эффекты лицевой маски FRVT.
[3]
Fujitsu внедрит эту технологию в систему, которая в настоящее время находится на стадии проверки. Речь идет о системе, предоставленной VCOGNIZATION TECHNOLOGIES, INC. «Zippin». Система объединяет такие устройства, как камеры и датчики веса, необходимые для касс самообслуживания, функции искусственного интеллекта для распознавания покупателей и товаров, а также функции для связи с платежными системами и управлением запасами.