Как работает определение лиц в мобильных устройствах

Почему мы предпочитаем разблокирование по фейсу

В недавние времена распознавание лиц является одной из самых популярных возможностей для разблокировки смартфонов. Лишь пару годов ранее основная масса использующих довольствовались PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением подобных технологий, как Вулкан Платинум, нам достаточно просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект превращает эту конкретную возможность такой востребованной? Прежде всего, это практично: не нужно помнить замысловатые пароли или находить нужный палец в мраке. Также, это оперативно: современные программы идентифицируют лицо буквально за мгновения ока. В-третьих, это чувство будущего — будто в кинолентах про вулкан платинум агентов.

Впрочем за этой видимой несложностью таится целый вселенная комплексных технологий и инженерных концепций. Давайте понять, как точно действует распознавание лиц в современных гаджетах, какие бывают способы, насколько они защищены и что нас предстоит.

Краткая хроника прогресса инноваций

Распознавание лиц как техника имеется уже более 50 лет. Первые попытки автоматического анализа облика были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда ЭВМ умели лишь выделять очертания головы и измерять промежутки между очами и устами на монохромных изображениях.

Начальные коммерческие установки появились в 1990-х годах, но они были несовершенны: функционировали медленно и нередко ошибались. Только с прогрессом нейронных сетей и таких площадок, как Vulkan Platinum, высокопроизводительных мобильных чипов идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным распознаванием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять собственные решения.

Основные этапы работы системы определения

Процесс распознавания лица можно условно сегментировать на несколько важных этапов:

1. Идентификация лица — камера выявляет существование гуманного лица в снимке.
2. Извлечение характеристик — система изучает черты лица: конфигурацию глаз, носа, губ, положение бровей.
3. Построение модели — создаётся уникальный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со образцом — созданный образец сверяется с сохранённой при внесении биометрической данными владельца.
5. Принятие определения — если сходство достаточно высокое, смартфон разблокируется.

Любой из этих шагов нуждается в специальных методов и оптимизаций для быстрой работы непосредственно на девайсе.

Аппаратные составляющие: что находится внутри

Типичная селфи камера.

Самый простой простой способ распознавания физиономии задействует лишь переднюю камеру мобильного устройства. Данный метод осуществлён во различных недорогих версиях Android-девайсов.

Достоинства:

• Не требует дополнительных датчиков.
• Оперативно действует при качественном освещённости.

Отрицательные стороны:

• Несложно обмануть изображением или видео.
• Плохо действует при слабом освещении или необычных ракурсах.

Инфракрасная камера и пунктирный проекционный аппарат

Более продвинутые системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология лежит в основе Face ID от Apple.

Каким способом это функционирует:

• Точечный проекционный прибор проецирует на облик пользователя невидимую сетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 пятен).
• Инфракрасная устройство записывает искривление этой сетки по плоскости лица.
• Получается трехмерная карта глубины, что практически невозможна для фальсификации обычной фотографией или маской.

Плюсы

• Надёжная деятельность даже в полной неосвещённости.
• Высокая устойчивость к имитациям.
• Точность определения более 99%.

Дополнительные сенсорные устройства

В отдельных аппаратах используются также дополнительные сенсоры: ToF (Time-of-Flight), которые определяют период движения света до цели и обратно; Трехцветные-датчики глубины; специальные световые измерители расстояния для построения более аккуратной 3D-модели физиономии.

Эти инновации встречаются наиболее часто во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: синтетический интеллект на исполнении

Текущие системы распознавания лиц неосуществимы без применения искусственного интеллекта и machine learning. Именно благодаря таким технологиям, как Vulkan Platinum, устройство может распознавать владельца даже при метаморфозах облика: новая стрижка, растительность на лице, линзы или грим не становятся препятствием для деблокировки.

Распознавание лица

На стартовом шаге алгоритм должна мгновенно распознать образ лица внутри целого изображения камеры. Для этой задачи используются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые «обучены» находить лиц человека среди множества других объектов.

Пример: метод MTCNN в состоянии обнаруживать облик даже при частичном закрытии (например, шалью или ладонью).

Идентификация основных точек

После обнаружения лица механизм, такая как Vulkan Platinum, вычисляет положение главных точек: кончики глаз, кончик носа, контуры губ и так далее. Обычно применяется от 68 до 128 основных маркеров на лицевой области.

Это требуется для выравнивания визуала: если юзер держит телефон под углом, или повернул голову, программа «выпрямляет» изображение до обычного угла для дальнейшего анализа.

Формирование биометрического шаблона

Далее нейросеть строит компактное математическое представление («эмбеддинг») лица пользователя — своеобразный цифровой «отпечаток» лица длиной от 128 до 512 флоатов.

Данный образец весьма затруднительно подделать: он не удерживает непосредственно изображение пользователя, а лишь уникальные черты его облика, что делает его совершенным для таких площадок, как Вулкан Казино Платинум.

Сопоставление и принятие выбора

Когда юзер намеревается разлочить телефон взглядом, программа повторяет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный границу (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, открывается; если нет — доступ запрещается.

Привыкание к трансформациям внешности

Увлекательная черта нынешних системы — возможность самообучения. Если вы регулярно разблокируете мобильное устройство с обновленной прической или очками, система постепенно модернизирует основной шаблон вашего лица для улучшения точности функционирования без ухудшения безопасности.

Безопасность биометрии данных.

Многие клиенты опасаются держать свои био-идентификационные данные на телефоне из-за риска потери данных или взлома устройства. Некоторые организации, вроде Вулкан Казино Платинум, предлагают решения для увеличения безопасности сведений клиентов.

• Локальное сбережение: Основная часть девайсов хранит биометричные образцы лишь внутри защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не выходят из аппарат и закрыты в том числе изготовителю.

• Шифрование: Все информация сохраняются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних разработчиков не обладают непосредственного возможности доступа к биометрическим; они могут лишь требовать факт подтверждения личности через системный API.

Стоит отметить существенную подробность: в случае, если кто-либо достанет физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие компании осуществляют меры безопасности от «слепого» разблокирования — в частности, заставляют разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют категории идентификации лиц на изображениях?

Сегодня можно различить три основных подхода к выполнению этой операции:

Софтверное плоское идентификация

Эксплуатируется только передняя видеокамера без вспомогательных датчиков дистанции. Этот метод встречается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота осуществления; умеренная цена; скоростная функционирование при качественном освещении.
Минусы: просто ввести в заблуждение фотографией; ненадежная работа ночью; низкая защищенность.

Техническое 3D сканирование

Задействует ИК видеокамеру + проекционный модуль точек + датчики дистанции (Face ID от Apple; аналогичные технологии у Huawei Mate).
Плюсы: большая достоверность; не получится обмануть изображение/видеозапись; постоянная работа при любом освещении.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана («чёлка»)

Комбинированные способы с интеграцией ИИ

Применяют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам («anti-spoofing»). Например, подобные товары, например Vulkan Platinum и Google Pixel Face Unlock новейших поколений, комбинируют фронталку c ИК датчиком движения Soli Radar для защиты от подделок руками/масками/видеодисплеями чужих устройств.

Иллюстрации применения разных методов

• iPhone модели X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые предложил эквивалент Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 обеспечивают как программное обеспечение двухмерное идентификацию по изображению фронталкой, так и датчик радужки глаза.
• Huawei Mate20 Pro применяет набор из ИК-подсветки + Dot Projector + ToF-сенсор

Трудности безопасности и ошибочные сигналы

Несмотря на замечательный развитие техники за прошедшие годы, безупречных механизмов пока не существует:

1. Вероятность обмана: Недорогие смартфоны легко открываются качественной изображением владельца либо видеозаписью с экрана другого устройства.
2. Идентичные близнецы: Даже самые совершенные механизмы могут ошибиться между монозиготными близнецами либо родичами с очень аналогичной внешностью.
3. Изменения облика: Резкое снижение веса/набор веса, косметические процедуры либо повреждения иногда необходимы для перерегистрации биометрических данных.
4. Условия фотографирования: Интенсивная подсветка солнцем или же интенсивная темнота могут уменьшить точность распознавания признаков.

Ниже несколько советов для надёжному применению:

• Для значимых операций всегда используйте дополнительную аутентификацию;
• Не включайте опцию «Разблокировка по лицу» на бюджетных устройствах без ИК-сенсоров;
• Регулярно апгрейдите прошивку телефона для обеспечения безопасности от актуальных атак;
• Включайте опцию «Требовать открытых глаз» везде, где она имеется.

В каких местах дополнительно применяется технологии кроме смартфонов?

Пускай предмет этой работы сосредоточена на в частности мобильным устройствам, стоит упомянуть о других сферах применения технологии:

• Управление входа в рабочих помещениях и резиденциях;
• Платёжные терминалы финансовых учреждений («Face Pay»);
• Электронные удостоверения личности последнего образца;
• Установки видеомониторинга городских сервисов;
• Механизация отслеживания явки школ/вузов;
• Аутентификация пользователей персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по фейсу («Face Pay») — достаточно пройти через турникет без пластика или телефона! Схожие проекты развиваются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом изменяется технология в нынешнее время?

Каждый год проявляются современные мысли для улучшения стандарта работы систем лицевого распознавания:

1. Увеличивается детализация сенсоров — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше шанс неточности;
2. Совершенствуются нейросети — современные конструкции вида MobileNetV3 позволяют быстро осваивать дополнительным особенностям облика владельца прямо на устройстве без пересылки информации в облачное хранилище.
3. Совершенствуются способы антиспуфинга — теперь мобильные устройства умеют различать подлинные движущиеся лица от статичных фото/маскировок по мельчайшим движениям кожи.
4. Синхронизация со умными устройствами — интеллектуальные часы могут авто заблокировать мобильный телефон, если обладатель отошёл далеко.
5. Появляются гибридные устройства — к примеру объединяющие голосовую опознание + облик + дактилоскопический след.

Здесь, которые направления очень востребованы на сегодняшний день:

1) Миниатюризация деталей

Производители намереваются сократить размер прорези («чёлки») под датчики на дисплее за счёт интеграции миниатюрных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на аппарате

Для увеличения личной безопасности всё более обработки данных происходит внутри устройства без передачи данных во сторонний облачный услугу.

3) Стандартизация регламентов

Google энергично продвигает норму BiometricPrompt API, с целью чтобы подобные платформы, например как Вулкан Платинум, и каждые Android-программы могли работать с любыми видами биометрии унифицированно.

Что выбрать сегодня?

В случае если вам всем нужна наивысшая защита информации, остановите выбор на флагманские модели со встроенным ИК-излучателем или же ToF-датчиком глубины.

• iPhone всех существующих последних версий
• Huawei Mate/P серии
• Mi Expert
• Vivo X серии
• Oppo Find X линейки.

Если средства ограничен – лучше выбирать обычным методам безопасности (PIN-код/сканер пальца), а возможность «разблокировка по лицу», такую как в Вулкан Платинум, использовать только как второстепенную возможность комфорта.

Каким способом увеличить комфорт функционирования опции?

Есть некоторые советов для тех, кто уже применяет разблокировку по лицу:

1. Периодически меняйте свою изображение-шаблон, если сильно изменяется облик.
2. Не забывайте чистить линзу передней камеры – разводы могут снизить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам запускает фотоаппарат как только вы поднимаете его.
4. В процессе регистрации пытайтесь удерживать голову ровно перед объектива без значительного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отворачиваетесь от экрана.

Перспективы прогресса технологии

В скоро наступающие времена можно ожидать развития полностью безконтактных способов распознавания индивидуума сразу по нескольким биометрическим параметрам одновременно: облик + речь + шаги + жесты рук!

Также возможно развитие новых методов охраны личной информации – например, переменное модификация диджитал шаблона после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее захватывающих техник нашего периода! Она обеспечивает общение со смартфоном комфортнее чем когда-либо прежде, и такие программы, как Вулкан Казино Платинум, могут существенно улучшить ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы знаете, как работает эта технология в деталях, – сможете вдумчиво определять свой следующий гаджет!