Каким способом действует идентификация лиц в мобильных устройствах

Зачем мы останавливаемся на разлочивание по лицу

В последние времена идентификация лиц стало одной из самых распространённых функций для разблокировки смартфонов. Всего пару годков назад основная часть пользователей довольствовались пин-кодами, паролями или сканерами отпечатков пальцев. Но с появлением таких технологий, как admiral x, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что превращает данную возможность настолько популярной? Во-первых, это комфортно: не нужно удерживать в памяти сложные пароли или искать правильный палец в тьме. Кроме того, это оперативно: современные программы распознают лицо практически за мгновение. В-третьем пункте, это чувство будущего — словно в фильмах про admiral x зеркало агентов.

Однако за этой на первый взгляд простотой таится весь универсум трудных техник и инженерных разработок. Попробуем исследовать, как именно функционирует фейсканирование в новейших гаджетах, какие применяются технологии, насколько они надёжны и что нас ожидает в будущем.

Краткая повествование развития техники

Идентификация лиц как технология присутствует уже более 50 годов. Изначальные эксперименты автоматизированного исследования лица были сделаны еще в 1960-х годах в лабораториях США. Тогда вычислительные машины могли лишь обозначать контуры лица и вычислять расстояния между глазами и устами на черно-белых изображениях.

Начальные торговые установки возникли в 90-х, но они были несовершенны: работали медленно и нередко ошибались. Только с эволюцией синтетических сетей и таких площадок, как адмирал х, высокопроизводительных мобильных процессоров определение лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным идентификацией лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали интегрировать свои решения.

Основные этапы работы устройства определения

Процесс распознавания лица можно ориентировочно разделить на несколько основных этапов:

1. Идентификация лиц — устройство определяет присутствие гуманного лица в изображении.
2. Выделение характеристик — система изучает контуры физиономии: очертания зрительных органов, носа, губ, позицию надбровных дуг.
3. Построение структуры — создаётся особенный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со образцом — сформированный образец сопоставляется с записанной при учёте биометрической информацией владельца.
5. Принятие решения — если совпадение достаточно существенное, смартфон открывается.

Любой из указанных стадий требует специальных процедур и усовершенствований для скорой работы непосредственно на девайсе.

Технические составляющие: что прячется внутри них

Обычная фронтальная камера.

Наиболее несложный метод идентификации физиономии использует лишь переднюю камеру смартфона смартфона. Данный метод осуществлён во различных недорогих версиях Android-девайсов.

Плюсы:

• Не нуждается в дополнительные сенсоров.
• Шустро работает при качественном свете.

Минусы:

• Просто одурачить изображением или видео.
• Неправильно функционирует при низком освещённости или непривычных ракурсах.

ИК камера и пунктирный проекционный аппарат

Более совершенные системы, такие как адмирал х, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс является основой Face ID от Apple.

Каким образом это работает:

• Точечный проектор отображает на физиономию пользователя невидимую структуру из тысяч инфракрасных точек (например, Face ID применяет около 30 000 точек).
• Инфракрасная устройство фиксирует деформацию этой сетки по поверхности физиономии.
• Получается трёхмерная глубинная карта глубины, что почти неосуществима для имитации обычной фотографией или маской.

Выигрыши

• Надёжная деятельность даже в полной темноте.
• Высокая защита к имитациям.
• Точность распознавания более 99%.

Дополнительные сенсоры

В некоторых аппаратах задействуются также вспомогательные сенсоры: ToF (Time-of-Flight), которые измеряют период прохождения луча до предмета и обратно; Трехцветные-датчики дальности; специальные оптические дальномеры для создания более аккуратной 3D-модели лица.

Эти разработки применяются чаще всего во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искуственный интеллект на действии

Современные механизмы идентификации лиц немыслимы в отсутствие эксплуатации artificial intelligence и machine learning. Именно благодаря таким инновациям, как адмирал х, гаджет может идентифицировать пользователя даже при метаморфозах внешности: новая стрижка, борода, оптика или грим не становятся препятствием для разблокировки.

Обнаружение лиц

В первом стадии алгоритм обязана мгновенно распознать ликовое изображение среди всего изображения камеры. Для данной цели задействуются последовательные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые “обучены” распознавать лиц человека среди множества других объектов.

Пример: алгоритм MTCNN может обнаруживать физиономию даже в случае частичном закрытии (например, платком или ладонью).

Идентификация ключевых моментов

После распознавания лица система, такая как адмирал х, вычисляет местоположение основных точек: уголки глаз, конец носа, края губ и так далее. Часто применяется от 68 до 128 главных меток на лице.

Данное нужно для нормализации картинки: если пользователь держит мобильник под углом, или повернул голову, программа “выпрямляет” изображение до стандартного положения для последующего изучения.

Создание биометрии шаблона

Далее нейросеть строит компактное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Этот образец весьма сложно имитировать: он не сохраняет непосредственно изображение пользователя, а лишь исключительные характеристики его облика, что делает его идеальным для таких систем, как admiral-x.

Сравнение и осуществление заключения

В случае, когда юзер желает открыть смартфон взором, механизм осуществляет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный границу (обычно превышает 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ запрещается.

Адаптация к изменениям внешнего вида

Интересная черта актуальных системы — возможность самообучения. Если ты постоянно разблокируете телефон с новой прической или очками, алгоритм постепенно освежает эталонный шаблон вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Охрана биометрических данных.

Большинство пользователи беспокоятся держать свои биометрические данные на мобильном устройстве из-за вероятности утечки данных или взлома гаджета. Некоторые компании, вроде admiral-x, предоставляют варианты для увеличения безопасности данных юзеров.

• Локальное сбережение: Большинство аппаратов сохраняет биометрические модели лишь внутри защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют аппарат и закрыты включая создателю.

• Шифрование: Все сведения сберегаются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих разработчиков не имеют прямого возможности доступа к биометрическим данным; они могут лишь требовать подтверждение подтверждения личности через системный API.

Следует подчеркнуть важную особенность: в случае, если кто-то достанет доступ к вашему телефону физически (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании реализуют меры безопасности от автоматического разблокирования — например, заставляют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие бывают виды идентификации лиц на изображениях?

На сегодняшний день можно определить 3 ключевых способа к выполнению этой операции:

Программное 2D распознавание

Применяется только фронтальная видеокамера без вспомогательных датчиков дистанции. Подобный способ наблюдается обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность реализации; низкая стоимость; быстрая функционирование при качественном освещении.
Минусы: легко ввести в заблуждение фотографией; ненадежная работа ночью; низкая защищенность.

Оборудование для объёмное сканирование

Применяет ИК видеокамеру + проекционный модуль точек + датчики глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Преимущества: большая надежность; нельзя исказить фото/видео; устойчивая работа в любых условиях освещения.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные методы с дополнением ИИ

Используют комбинацию программных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие товары, как адмирал х и Google Pixel Face Unlock последних версий, сочетают фронталку c ИК датчиком движения Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Иллюстрации применения разных техник

• iPhone модели X/11/12/13/14 задействуют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил эквивалент Face ID среди Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как софтверное двухмерное распознавание по фото фронтальной камерой, так и сенсор радужки глаза.
• Huawei Mate20 Pro применяет набор из ИК-освещения + Dot Projector + ToF-сенсор

Трудности защиты и ложные сигналы

Несмотря на замечательный прогресс технологий за последние годы, идеальных системы пока не имеется:

1. Вероятность мошенничества: Недорогие смартфоны просто доступны четкой фотографией пользователя либо видеозаписью с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые совершенные механизмы могут ошибиться между монозиготными близнецами либо родичами с очень аналогичной внешностью.
3. Метаморфозы облика: Резкое снижение веса/набор веса, косметические процедуры либо повреждения иногда требуют обновления данных биометрических данных.
4. Условия съёмки: Сильная подсветка солнечным светом либо интенсивная темнота могут уменьшить аккуратность идентификации признаков.

Ниже некоторые советов по безопасному применению:

• Для важных операций всегда используйте двухфакторную аутентификацию;
• Не включайте опцию “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
• Регулярно обновляйте прошивку телефона для обеспечения безопасности от современных угроз;
• Включайте функцию “Требовать раскрытых глаз” везде, где она имеется.

В каких местах дополнительно находится применение технология помимо мобильных телефонов?

Хотя основная мысль нашей статьи посвящена в частности смартфонам и планшетам, стоит упомянуть о других сферах применения технологии:

• Контроль доступа в деловых центрах и жилых домах;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Цифровые идентификационные документы современного образца;
• Установки видеонаблюдения муниципальных подразделений;
• Автоматизирование отслеживания посещаемости образовательных учреждений/университетов;
• Вход участников персональных компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система платежа проезда по лицу (“Face Pay”) — хватит пройти через барьер без пластика или телефона! Схожие программы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как трансформируется технический процесс в наше время?

Всякий годочек появляются современные идеи для улучшения стандарта деятельности систем идентификации лиц:

1. Увеличивается чёткость сенсоров — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность неточности;
2. Совершенствуются нейронные сети — современные архитектуры модели MobileNetV3 обеспечивают возможность скоростно адаптироваться к новым чертам вида пользователя прямо на устройстве без отправки данных в облако.
3. Развиваются технологии антиспуфинга — теперь смартфоны умеют отличать подлинные анимированные лица от фиксированных снимков/масок по микроскопическим движениям кожи.
4. Взаимодействие со интеллектуальными приборами — умные часы могут самостоятельно заблокировать мобильный телефон, если владелец ушёл далеко.
5. Возникают смешанные устройства — например комбинирующие речевую аутентификацию + лицо + пальцевой отпечаток.

Здесь, которые тенденции особенно актуальны сейчас:

1) Миниатюризация компонентов

Производители пытаются уменьшить величину прорези (“чёлки”) под датчики на дисплее за счёт встраивания миниатюрных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Переработка прямо на аппарате

Для повышения приватности всё более обработки данных выполняется на месте без передачи данных во дополнительный облачный сервис.

3) Упорядочивание регламентов

Гугл интенсивно продвигает норму BiometricPrompt API, чтобы подобные площадки, например как admiral x, и любые Android-аппы были совместимы с различными типами биометрии единообразно.

Что подобрать сегодня?

Если вам всем нужна максимальная защита информации, подбирайте флагманские модели с вмонтированным ИК-проектором или же ToF-датчиком глубины.

• iPhone всех существующих последних версий
• Huawei Mate/P ряда
• Xiaomi Pro
• Vivo X линейки
• Оппо Find Х серии.

Если средства невелик – лучше отдавать предпочтение классическим методам безопасности (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в admiral x, задействовать только как опциональную опцию комфорта.

Как улучшить комфорт работы возможности?

Есть несколько хитростей для пользователей, кто уже использует разблокировку по лицу:

1. Регулярно обновляйте свою фотографию-шаблон, если значительно трансформируется внешний вид.
2. Не забывайте чистить линзу фронтальной камеры – разводы могут снизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам включает фотоаппарат как только вы поднимаете его.
4. В процессе регистрации старайтесь сохранять голову прямо впереди видеоустройства без сильного наклона головы.
5. Используйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отвернулись от экрана.

Возможности развития техники

В скоро наступающие времена можно предполагать появления полностью бесконтактных способов распознавания человека сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + походка + жесты рук!

Также возможно появление новых методов обеспечения приватности – скажем, переменное модификация цифрового образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых захватывающих техник нашего периода! Она предоставляет интеракцию со смартфоном комфортнее чем когда-либо прежде, и такие приложения, как admiral-x, могут значительно оптимизировать ваш опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы осведомлены, как устроена эта система в деталях, – будете в состоянии осознаннее подбирать свой очередной гаджет!