Как функционирует идентификация лиц в смартфонах

Зачем мы предпочитаем разлочивание по фейсу

В недавние времена распознавание лиц является одной из самых популярных функций для разблокировки мобильных телефонов. Еще некоторые годов тому назад основная часть пользователей удовлетворялись пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением таких технологий, как вулкан россия, нам вполне лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь обуславливает эту возможность такой востребованной? Для начала, это практично: не нужно помнить трудные пароли или находить правильный палец в темноте. Кроме того, это мгновенно: современные программы распознают лицо буквально за доли секунды. В-третью очередь, это ощущение футуристичности — словно в фильмах про vulkan russia агентов.

Впрочем за данной видимой легкостью скрывается весь универсум комплексных технологий и инженерных концепций. Позвольте нам разобраться, как именно работает фейсканирование в новейших мобильных телефонах, какие существуют технологии, насколько они защищены и что нас ожидает в будущем.

Краткая хроника эволюции инноваций

Идентификация лиц как технология существует уже более пятидесяти лет. Изначальные эксперименты автоматизированного изучения лиц были сделаны еще в 1960-х годах в научных учреждениях США. Тогда компьютеры умели лишь определять очертания головы и измерять расстояния между очами и устами на монохромных изображениях.

Изначальные коммерческие системы возникли в 90-х, но они были неидеальны: действовали неспешно и часто ошибались. Только с прогрессом нейронных сетей и таких площадок, как вулкан россии, сильных мобильных процессоров распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным распознаванием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять личные разработки.

Основные стадии работы устройства идентификации

Процесс идентификации лица можно ориентировочно разделить на несколько важных этапов:

1. Распознавание лица — устройство выявляет наличие гуманного лица в кадре.
2. Извлечение характеристик — механизм анализирует контуры облика: конфигурацию глаз, обонятельного органа, губ, положение надбровных дуг.
3. Построение модели — создаётся неповторимый виртуальный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со образцом — созданный образец сопоставляется со сохранённой при внесении биометрической данными владельца.
5. Принятие выбора — если сходство достаточно высокое, смартфон открывается.

Любой из данных стадий требует особых алгоритмов и усовершенствований для быстрой работы прямо на устройстве.

Железные компоненты: что скрыто внутри

Стандартная передняя камера.

Самый простой вариант определения облика задействует исключительно фронтальную камеру мобильного устройства. Данный способ реализован во многочисленных бюджетных версиях Android-девайсов.

Положительные стороны:

• Не нуждается в требует дополнительные датчиков.
• Быстро действует при качественном свете.

Отрицательные стороны:

• Легко одурачить изображением или роликом.
• Неудачно действует при слабом освещённости или необычных точках зрения.

Инфракрасная фотокамера и пунктирный проектор

Более продвинутые системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс составляет базу Face ID от Apple.

Каким образом это работает:

• Точечный проектор проецирует на физиономию юзера невидимую сетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 пятен).
• ИК устройство регистрирует деформацию данной решетки по поверхности лица.
• Получается 3D карта глубинности, что почти невозможна для имитации стандартной фото или маскировкой.

Плюсы

• Надёжная функционирование даже в полной тьме.
• Высокая защита к подделкам.
• Точность идентификации выше 99%.

Добавочные сенсоры

В определённых девайсах применяются также экстра сенсоры: ToF (Time-of-Flight), которые фиксируют время прохождения луча до предмета и обратно; RGB-датчики дальности; специальные оптические измерители расстояния для формирования более аккуратной 3D-модели физиономии.

Эти технологии используются чаще всего во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искусственный разум на работе

Текущие устройства распознавания физиономий невозможны в отсутствие применения artificial intelligence и machine learning. Именно из-за таким инновациям, как вулкан россии, аппарат в состоянии узнавать пользователя даже при трансформациях внешнего вида: новая причёска, щетина, очки или косметика не становятся помехой для деблокировки.

Детектирование физиономии

В первом стадии система обязана быстро найти образ лица внутри полного кадра с камеры. Для этого задействуются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые “обучены” распознавать человеческие лица среди множества других объектов.

Пример: метод MTCNN способен находить облик даже при частичном закрытии (например, платком или рукой).

Идентификация ключевых моментов

После обнаружения лица механизм, такая как вулкан россии, определяет расположение ключевых точек: кончики глаз, конец носа, контуры губ и так далее. Часто задействуется от 68 до 128 ключевых точек на лицевой поверхности.

Это действие необходимо для выравнивания картинки: если человек удерживает смартфон под наклоненным, или повернул голову, программа корректирует картинку до нормального состояния для последующего изучения.

Построение биометрии образца

Далее нейросеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 флоатов.

Такой образец крайне сложно имитировать: он не удерживает непосредственно картинку юзера, а лишь исключительные черты его вида, что делает его идеальным для таких систем, как vulkan russia.

Сравнение и осуществление выбора

Если юзер желает разлочить смартфон взором, система воспроизводит все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный границу (обычно больше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ запрещается.

Адаптация к метаморфозам внешнего вида

Занимательная характеристика актуальных систем — возможность самообучения. Если вы регулярно доступаете к смартфон с новой прической или оптикой, алгоритм постепенно обновляет основной шаблон вашего облика для увеличения точности действия без снижения уровня безопасности.

Безопасность биометрических данных.

Большинство юзеры беспокоятся хранить свои био-идентификационные данные на телефоне из-за вероятности потери данных или взлома гаджета. Иные компании, вроде vulkan russia, предлагают решения для увеличения сохранности информации пользователей.

• Локальное хранение: Основная часть аппаратов записывает биометричные шаблоны исключительно внутрь безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют устройство и недоступны в том числе создателю.

• Шифрование: Все информация сохраняются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Программы внешних разработчиков не обладают непосредственного доступа к биометрическим данным; они могут лишь запрашивать подтверждение подтверждения идентичности через системный API.

Стоит подчеркнуть значимую деталь: если какой-то человек сможет получить доступ к вашему телефону физически (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители осуществляют систему защиты от “слепого” разблокирования — например, заставляют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются виды идентификации лиц на изображениях?

В настоящее время можно определить 3 основных способа к осуществлению этой функции:

Софтверное 2D распознавание

Эксплуатируется только передняя видеокамера без экстра датчиков глубины. Подобный способ используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость воплощения; низкая затраты; скоростная функционирование при достаточном освещении.
Минусы: просто ввести в заблуждение снимком; неустойчивая работа ночью; низкая защищенность.

Техническое 3D сканирование

Задействует инфракрасную видеокамеру + проектор пикселей + датчики глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Плюсы: высокая достоверность; нельзя обмануть изображение/видеозапись; устойчивая деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с ИИ-дополнением

Применяют комбинацию софтверных методов + аппаратную обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие товары, как вулкан россии и Google Pixel Face Unlock современных поколений, объединяют фронталку c ИК сенсором движения Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.

Примеры использования разных техник

• iPhone линейки X/11/12/13/14 используют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition в первый раз предложил аналог Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 обеспечивают как программное 2D определение по изображению селфи-камерой, так и сенсор ириса глаза.
• Huawei Mate20 Pro задействует систему из ИК-инфракрасного света + Dot Projector + ToF-датчик

Вопросы безопасности и ложные тревоги

Несмотря на впечатляющий развитие инноваций за недавние лет, идеальных системы пока не существует:

1. Возможность мошенничества: Бюджетные телефоны без труда “разблокируются” четкой фотографией пользователя или видео с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные механизмы могут перепутать между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
3. Трансформации внешности: Стремительное снижение веса/набор веса, пластические операции либо травмы в некоторых случаях требуют обновления данных биометрии.
4. Условия фотографирования: Интенсивная засветка солнечным светом или же интенсивная темнота могут понизить аккуратность определения признаков.

Ниже некоторые подсказок для безопасному использованию:

• Для значимых операций всегда внедряйте двухфакторную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Систематически обновляйте прошивку прошивку телефона для обеспечения безопасности от новых видов атак;
• Включайте опцию “Требовать раскрытых глаз” там, где она имеется.

В каких областях также используется технология за исключением мобильных телефонов?

Несмотря на то, что предмет данной публикации сосредоточена на конкретно мобильным устройствам, необходимо сказать о альтернативных областях использования технологии:

• Контроль входа в деловых центрах и резиденциях;
• Платёжные устройства банков (“Face Pay”);
• Электронные паспорта последнего поколения;
• Системы видеоконтроля муниципальных сервисов;
• Механизация отслеживания присутствия школ/институтов;
• Аутентификация участников ПК/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без карты или мобильника! Аналогичные инициативы развиваются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как изменяется технический процесс в наше время?

Любой годочек проявляются новые идеи для улучшения качества деятельности систем лицевого распознавания:

1. Увеличивается чёткость сенсоров — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше риск погрешности;
2. Развиваются нейронные сети — современные архитектуры вида MobileNetV3 дают возможность скоростно осваивать новым чертам внешности владельца напрямую на гаджете без отправки данных в облако.
3. Улучшаются способы антиспуфинга — теперь мобильные устройства способны распознавать настоящие движущиеся облики от неподвижных снимков/масок по микроскопическим движениям кожи.
4. Взаимодействие со умными устройствами — умные часы могут автоматически блокировать мобильный телефон, если владелец отошёл далеко.
5. Появляются комбинированные системы — например комбинирующие аудио аутентификацию + лицо + дактилоскопический след.

Итак, какие направления в особенности востребованы на сегодняшний день:

1) Миниатюризация элементов

Изготовители стараются сократить размер отверстия (“чёлки”) под сенсоры на экране за счёт встраивания компактных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на аппарате

Для повышения конфиденциальности всё больше вычислений осуществляется на месте без пересылки данных во внешний облачный услугу.

3) Стандартизация норм

Google энергично продвигает эталон BiometricPrompt API, для того чтобы такие площадки, вроде вулкан россия, и каждые Android-аппы могли взаимодействовать с всеми формами биометрии стандартизированно.

Какое подобрать сегодня?

Если вам нужна максимальная безопасность информации, подбирайте флагманские устройства со встроенным ИК-излучателем либо ToF-датчиком глубины.

• iPhone всех существующих новейших моделей
• Huawei Mate/P ряда
• Xiaomi Pro
• Vivo X серии
• Oppo Find Х линейки.

Если средства скромен – лучше предпочесть обычным средствам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в вулкан россия, задействовать только как дополнительную опцию удобства.

Каким способом улучшить комфорт использования возможности?

Есть пара лайфхаков для пользователей, кто уже применяет разблокировку по лицу:

1. Периодически обновляйте свою фото-шаблон, если кардинально меняется облик.
2. Не пренебрегайте протирать линзу передней камеры – загрязнения могут снизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам активирует фотоаппарат когда вы поднимаете его.
4. При регистрационного процесса старайтесь удерживать голову неподвижно напротив объектива не допуская резкого наклона головы.
5. Используйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвели взгляд от дисплея.

Перспективы эволюции инноваций

В скоро наступающие годы можно предполагать возникновения полностью дистанционных способов идентификации человека сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + шаги + манипуляции руками!

Также вероятно развитие новых способов защиты приватности – скажем, динамическое изменение электронного образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – единственная из наиболее интересных техник нашего эпохи! Она предоставляет взаимодействие со мобильным устройством комфортнее чем когда-либо прежде, и такие приложения, как vulkan russia, могут значительно оптимизировать ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы осведомлены, как устроена эта методика изнутри, – сумеете вдумчиво определять свой очередной гаджет!