Каким образом действует определение лицевых образов в мобильных устройствах

Для чего мы предпочитаем разблокировку по лицу

В недавние годы распознавание лиц является одной из самых распространённых опций для деблокировки мобильных телефонов. Еще некоторые годов тому назад основная часть пользователей довольствовались пин-кодами, паролями или датчиками отпечатков пальцев. Но с появлением подобных технологий, например вулкан россия, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект превращает эту функцию настолько популярной? Во-первых, это удобно: не нужно помнить трудные пароли или находить правильный палец в темноте. Во-вторых, это мгновенно: современные системы узнают лицо буквально за доли секунды. В-третьих, это впечатление футуризма — будто в кинолентах про vulkan casino шпионов.

Впрочем за такой на первый взгляд несложностью скрывается целый мир трудных технологий и инженерных концепций. Давайте разобраться, как именно действует фейсканирование в новейших смартфонах, какие бывают способы, насколько они защищены и что нас предстоит.

Короткая история развития инноваций

Распознавание лиц как методика присутствует уже более пятидесяти годов. Начальные пробы автоматического анализа лиц были осуществлены еще в 1960-х годах в научных учреждениях США. Тогда компьютеры могли лишь выделять силуэты головы и вычислять расстояния между очами и ртом на ахроматических снимках.

Начальные коммерческие установки стали доступны в 90-х, но они были неидеальны: функционировали медленно и нередко ошибались. Только с эволюцией искусственных сетей и таких площадок, как вулкан россии, мощных мобильных микросхем определение лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным распознаванием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать собственные разработки.

Основные стадии действия системы распознавания

Процесс распознавания лица можно примерно поделить на несколько основных этапов:

Распознавание лиц — камера определяет существование человеческого образа в снимке.
Извлечение особенностей — алгоритм изучает черты облика: конфигурацию глаз, носа, уст, позицию надбровных дуг.
Построение модели — создаётся неповторимый виртуальный отпечаток (faceprint) на основе выделенных признаков.
Сравнение со стандартом — полученный модель сопоставляется с записанной при регистрации биометрической информацией владельца.
Принятие решения — если соответствие достаточно существенное, смартфон разблокируется.

Всякий из указанных шагов запрашивает специальных алгоритмов и оптимизаций для скорой работы прямо на устройстве.

Технические составляющие: что находится внутри

Стандартная селфи камера.

Простейший простой метод распознавания лица применяет лишь фронтальную видеокамеру смартфона. Подобный способ осуществлён во многих бюджетных вариантах Android-девайсов.

Достоинства:

Не нуждается в нуждается в дополнительных сенсоров.
Быстро функционирует при хорошем освещённости.

Минусы:

Легко ввести в заблуждение фотографией или видеозаписью.
Плохо действует при слабом свете или непривычных ракурсах.

ИК фотокамера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика составляет базу Face ID от Apple.

Каким способом это функционирует:

Точечный проекционный прибор показывает на лицо юзера невидимую сетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 меток).
Инфракрасная камера записывает деформацию этой решетки по плоскости лица.
Формируется трехмерная глубинная карта глубинности, которая почти неосуществима для подделки стандартной фотографией или маской.

Преимущества

Надёжная деятельность даже в полной неосвещённости.
Высокая защита к фальсификациям.
Точность распознавания выше 99%.

Дополнительные датчики

В отдельных устройствах применяются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые определяют время движения луча до объекта и обратно; Трехцветные-датчики дальности; специальные лазерные дальномеры для формирования более точной 3D-модели физиономии.

Эти разработки применяются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искуственный ум на действии

Современные системы распознавания лиц неосуществимы в отсутствие применения искусственного интеллекта и машинного обучения. Именно вследствие таким технологиям, как вулкан россии, аппарат в состоянии распознавать пользователя даже при метаморфозах внешнего вида: новая стрижка, борода, очки или макияж не становятся барьером для разблокировки.

Детектирование лиц

При начальном стадии программа необходимо мгновенно найти лицо среди целого изображения камеры. Для этого применяются многоуровневые классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые “обучены” идентифицировать человеческие лица среди множества других объектов.

Пример: процесс MTCNN способен обнаруживать облик даже в случае частичном закрытии (например, шалью или ладонью).

Идентификация важных точек

После распознавания лица устройство, такая как вулкан россии, устанавливает положение главных точек: уголки глаз, верхушка носа, контуры губ и так далее. Как правило используется от 68 до 128 основных точек на лицевой поверхности.

Это действие нужно для нормализации визуала: если пользователь удерживает смартфон под наклоном, или склонил головку, программа “выпрямляет” изображение до обычного угла для последующего изучения.

Создание биометрии образца

Далее нейронная сеть строит уплотненное математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Такой шаблон крайне сложно сфальсифицировать: он не удерживает непосредственно картинку пользователя, а лишь исключительные характеристики его вида, что делает его совершенным для таких систем, как vulkan russia.

Сопоставление и принятие выбора

Если юзер намеревается разлочить мобильник глазами, механизм осуществляет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый порог (обычно выше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ не предоставляется.

Приспособление к метаморфозам облика

Занимательная черта нынешних системы — возможность самообучения. Если ты регулярно разблокируете мобильное устройство с обновленной стрижкой или оптикой, программа постепенно освежает эталонный образец вашего облика для повышения точности работы без ухудшения безопасности.

Безопасность биометрических данных данных.

Множество юзеры беспокоятся сохранять свои биометрические идентификационные данные на смартфоне из-за риска утечки данных или хакерской атаки. Некоторые компании, вроде vulkan russia, предоставляют варианты для увеличения сохранности сведений пользователей.

Локальное сбережение: Основная часть устройств хранит био-идентификационные модели только в пределах защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из аппарат и закрыты даже производителю.
Шифрование: Все сведения сохраняются только в шифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция приложений: Программы третьих девелоперов не обладают непосредственного доступа к биометрическим данным; они могут лишь требовать факт верификации личности через системный API.

Необходимо упомянуть существенную деталь: в случае, если кто-либо сможет получить доступ к вашему телефону физически (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители внедряют меры безопасности от автоматического разблокирования — например, заставляют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются категории распознавания лиц на изображениях?

Сегодня можно определить различить 3 главных способа к выполнению этой операции:

Софтверное 2D определение

Применяется только лицевая видеокамера без вспомогательных детекторов глубины. Подобный подход встречается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота реализации; умеренная цена; оперативная функционирование при качественном свете.
Минусы: несложно обмануть фотографией; ненадежная функционирование ночью; слабая охрана.

Оборудование для трёхмерное сканирование

Использует инфракрасную видеокамеру + проектор точек + датчики дистанции (Face ID у Apple; подобные технологии у Huawei Mate).
Преимущества: высокая надежность; не получится обмануть изображение/видеозапись; постоянная деятельность при любом освещении.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные способы с ИИ-дополнением

Используют комбинацию программных методов + техническую обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как вулкан россии и Google Pixel Face Unlock современных версий, комбинируют фронтальную камеру c инфракрасным сенсором движения Soli Radar для защиты от подделок руками/масками/видеодисплеями посторонних устройств.

Образцы применения разных техник

iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition первый раз представил эквивалент Face ID в ряду Android.
Samsung Galaxy S10/S20 имеют как программное плоское определение по изображению селфи-камерой, так и датчик ириса глаза.
Huawei Mate20 Pro применяет комплекс из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Трудности охраны и ложные тревоги

Несмотря на впечатляющий развитие техники за недавние годы, совершенных системы пока не имеется:

Возможность подвоха: Доступные смартфоны без труда доступны четкой снимком хозяина или же видео с дисплея иного гаджета.
Идентичные двойняшки: Даже самые идеальные устройства могут перепутать между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
Трансформации внешнего вида: Стремительное снижение веса/набор веса, пластические операции или повреждения порой необходимы для перерегистрации биометрии.
Условия записи: Яркая засветка солнцем или интенсивная темнота могут понизить точность идентификации признаков.

Здесь пара подсказок по надёжному применению:

Для важных операций всегда применяйте дополнительную аутентификацию;
Не включайте возможность “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
Регулярно обновляйте прошивку прошивку телефона для защиты от актуальных атак;
Включайте опцию “Требовать раскрытых глаз” там, где она доступна.

В каких областях также применяется технологии за исключением мобильных телефонов?

Хотя тема данной работы сосредоточена на именно портативным гаджетам, необходимо сказать о альтернативных областях использования технологии:

Контроль входа в рабочих помещениях и многоквартирных зданиях;
Платёжные устройства банков (“Face Pay”);
Цифровые идентификационные документы последнего поколения;
Установки видеонаблюдения городских подразделений;
Автоматизирование учёта посещаемости образовательных учреждений/вузов;
Авторизация юзеров ПК/ноутбуков.

Например: В столичном метро уже проверяется система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без карты или мобильника! Схожие проекты реализуются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом изменяется технический процесс в нынешнее время?

Каждый годик появляются свежие идеи для усовершенствования уровня работы систем идентификации лиц:

Увеличивается разрешение сенсорных устройств — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше риск погрешности;
Развиваются нейронные сети — передовые структуры типа MobileNetV3 дают возможность оперативно обучаться дополнительным характеристикам вида пользователя прямо на устройстве без пересылки информации в облачное хранилище.
Развиваются методы антиспуфинга — теперь смартфоны могут отличать настоящие анимированные лица от статичных фотографий/маскировок по микроскопическим микродвижениям.
Синхронизация со интеллектуальными приборами — смарт-часы могут автоматически заблокировать смартфон, если владелец отошёл далеко.
Появляются смешанные системы — в частности комбинирующие аудио аутентификацию + облик + отпечаток пальца.

Вот, которые тренды в особенности популярны в данный момент:

1) Уменьшение элементов

Изготовители пытаются сократить габариты отверстия (“чёлки”) для датчики на экране за счёт интеграции компактных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для повышения личной безопасности всё больше обработки данных осуществляется внутри устройства без пересылки данных во внешний облачный услугу.

3) Унификация регламентов

Google активно продвигает стандарт BiometricPrompt API, для того чтобы подобные платформы, например как вулкан россия, и все Android-аппы были совместимы с различными типами биометрии единообразно.

Что подобрать сегодня?

В случае если тебе необходима предельная защита данных, выбирайте флагманские аппараты со встроенным ИК-излучателем или же ToF-датчиком глубины.

iPhone всех существующих актуальных моделей
Huawei Companion/P Series серии
Xiaomi Professional
Vivo X модели
Oppo Обнаружить X линейки.

Если финансы невелик – лучше предпочесть классическим методам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в вулкан россия, задействовать только как дополнительную опцию комфорта.

Каким способом улучшить комфорт функционирования возможности?

Есть некоторые хитростей для тех, кто уже применяет разблокировку через лицо:

Регулярно обновляйте свою фотографию-шаблон, если значительно изменяется внешность.
Не забывайте протирать линзу передней камеры – пятна могут уменьшить четкость!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам активирует фотоаппарат если вы поднимаете его.
При записи старайтесь держать лицо ровно перед видеоустройства исключая резкого наклона головы.
Используйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвели взгляд от дисплея.

Перспективы эволюции технологии

В предстоящие периоды можно предполагать возникновения полностью безконтактных способов опознания персоны сразу по нескольким биометрическим параметрам одновременно: физиономия + речь + шаги + жесты рук!

Также предполагается развитие современных способов обеспечения личной информации – скажем, динамическое модификация диджитал образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из очень захватывающих техник нашего эпохи! Она делает общение со телефоном комфортнее чем до этого, и такие аппы, как vulkan russia, могут значительно повысить ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы осведомлены, как устроена эта методика в деталях, – сумеете вдумчиво определять свой очередной устройство!