Как функционирует распознавание лицевых образов в смартфонах

Для чего мы предпочитаем разблокирование по лицевому распознаванию

В недавние времена распознавание лиц является одной из самых популярных возможностей для открытия мобильных телефонов. Еще пару лет назад основная масса использующих довольствовались пин-кодами, паролями или датчиками отпечатков пальцев. Но при появлением подобных технологий, например вулкан россия, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь делает эту конкретную особенность настолько популярной? Для начала, это практично: не нужно удерживать в памяти сложные пароли или отыскивать правильный палец в темноте. Кроме того, это мгновенно: современные программы узнают лицо буквально за доли секунды. В-третьих, это впечатление футуризма — как будто в кинофильмах про вулкан автомат шпионов.

Тем не менее за такой на первый взгляд легкостью таится целый универсум сложных методов и инженерных разработок. Давайте исследовать, как конкретно действует распознавание лиц в актуальных смартфонах, какие применяются технологии, насколько они защищены и что нас ожидает в будущем.

Краткая повествование развития техники

Идентификация лиц как технология имеется уже более 50 лет. Начальные попытки автоматизированного изучения лиц были сделаны еще в 1960-х годах в научных учреждениях США. Тогда компьютеры способны были лишь обозначать очертания черепа и вычислять расстояния между зрачками и ртом на монохромных снимках.

Начальные коммерческие платформы появились в девяностых годах, но они были неидеальны: работали медленно и нередко ошибались. Только с развитием синтетических сетей и таких площадок, как вулкан россии, высокопроизводительных мобильных чипов идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным сканированием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать личные решения.

Ключевые шаги работы устройства распознавания

Процесс идентификации лица можно ориентировочно поделить на несколько основных этапов:

Идентификация лица — камера определяет наличие человеческого лица в изображении.
Определение признаков — механизм изучает особенности физиономии: форму глаз, обонятельного органа, уст, позицию бровей.
Построение шаблона — создаётся уникальный электронный отпечаток (faceprint) на основе определённых признаков.
Сравнение с образцом — полученный шаблон сравнивается со зафиксированной при внесении биометрической данными владельца.
Принятие решения — если соответствие достаточно значительное, смартфон деблокируется.

Всякий из этих шагов требует особых процедур и оптимизаций для скорой работы прямо на устройстве.

Аппаратные составляющие: что скрыто в их недрах

Стандартная селфи камера.

Наиболее простой метод определения облика использует исключительно переднюю видеокамеру смартфона. Такой подход внедрён во многочисленных бюджетных версиях Android-девайсов.

Плюсы:

Не нуждается в дополнительные сенсоров.
Быстро функционирует при качественном освещённости.

Слабые стороны:

Просто ввести в заблуждение изображением или роликом.
Неудачно действует при низком освещённости или непривычных углах обзора.

ИК фотокамера и точечный проектор

Более усовершенствованные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс составляет базу Face ID от Apple.

Каким способом это функционирует:

Точечный проекционный прибор показывает на физиономию использующего невидимую решетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 пятен).
ИК устройство записывает искривление данной сетки по поверхности физиономии.
Создаётся трехмерная карта глубины, что практически неподвластна для подделки стандартной снимком или маской.

Преимущества

Надёжная деятельность даже в полной неосвещённости.
Большая устойчивость к имитациям.
Точность определения более 99%.

Добавочные датчики

В отдельных аппаратах применяются также экстра датчики: ToF (Time-of-Flight), которые фиксируют период движения луча до объекта и обратно; Трехцветные-датчики глубины; специальные оптические лидары для создания более детализированной 3D-модели физиономии.

Эти разработки применяются в основном во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искуственный интеллект в работе

Текущие механизмы идентификации лиц невозможны в отсутствие применения artificial intelligence и machine learning. Именно благодаря таким разработкам, как вулкан россии, аппарат в состоянии распознавать владельца даже при трансформациях внешности: новая причёска, борода, оптика или макияж не становятся препятствием для открытия.

Обнаружение лица

На первом стадии программа обязана оперативно найти образ лица внутри целого изображения камеры. Для данной цели задействуются многоуровневые классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены идентифицировать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN может находить облик даже при частичном перекрытии (например, шарфом или рукой).

Идентификация важных моментов

После идентификации лица устройство, такая как вулкан россии, определяет местоположение главных точек: края глаз, верхушка носа, контуры губ и так далее. Как правило применяется от 68 до 128 основных меток на лице.

Это нужно для выравнивания картинки: если юзер находится с мобильник под наклоном, или повернул головку, программа исправляет изображение до стандартного положения для дальнейшего анализа.

Построение биометрического идентификатора образца

Далее искусственная сеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Этот шаблон весьма затруднительно сфальсифицировать: он не сохраняет само картинку пользователя, а лишь уникальные характеристики его внешности, что делает его оптимальным для таких платформ, как vulkan russia.

Сравнительный анализ и принятие выбора

В случае, когда пользователь намеревается открыть мобильник взором, система воспроизводит все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный уровень (обычно выше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ блокируется.

Привыкание к трансформациям облика

Занимательная характеристика современных системы — возможность самообучения. Если ты регулярно доступаете к телефон с обновленной стрижкой или очками, программа постепенно освежает эталонный шаблон вашего облика для повышения точности работы без ухудшения безопасности.

Охрана биометрических данных информации.

Большинство юзеры беспокоятся хранить свои биометрические данные на телефоне из-за угрозы утечки данных или хакерской атаки. Иные организации, вроде vulkan russia, предоставляют решения для повышения сохранности сведений юзеров.

Локальное сохранение: Основная часть девайсов записывает биометрические модели исключительно внутри защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из гаджет и не доступны включая производителю.
Шифрование: Все сведения хранятся только в шифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция приложений: Приложения сторонних разработчиков не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь требовать факт подтверждения идентичности через системный API.

Следует упомянуть существенную деталь: в случае, если какой-то человек получит физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители осуществляют защиту от автоматического разблокирования — к примеру, просят раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют виды распознавания лиц?

На сегодняшний день можно определить различить 3 главных метода к реализации этой задачи:

Программное плоское идентификация

Применяется только фронтальная видеокамера без дополнительных сенсоров глубины. Подобный подход используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность реализации; низкая затраты; оперативная работа при хорошем свете.
Минусы: легко одурачить снимком; нестабильная функционирование ночью; низкая защищенность.

Аппаратное объёмное сканирование

Задействует инфракрасную камеру + проекционный модуль пикселей + датчики глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Плюсы: высокая надёжность; невозможно обмануть фото/видео; постоянная работа в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с дополнением ИИ

Применяют комбинацию софтверных методов + техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например вулкан россии и Google Pixel Face Unlock новейших версий, сочетают фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для защиты от подделок руками/масками/видеодисплеями посторонних устройств.

Иллюстрации применения разных техник

iPhone линейки X/11/12/13/14 применяют только физическое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition впервые внедрил эквивалент Face ID в числе Android.
Samsung Galaxy S10 модель/S20 обеспечивают как программное обеспечение плоское распознавание по фото селфи-камерой, так и датчик глазного ириса.
Huawei Mate20 Pro использует набор из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Вопросы охраны и неверные тревоги

Несмотря на поразительный развитие инноваций за прошедшие годы, совершенных систем пока не наблюдается:

Возможность подвоха: Недорогие мобильники легко “разблокируются” качественной фотографией пользователя или видеозаписью с дисплея иного гаджета.
Идентичные близняшки: Даже самые безупречные системы могут ошибиться между однояйцевыми близнецами либо родичами с очень схожей внешностью.
Изменения внешности: Стремительное утрата веса/набор веса, пластические операции либо повреждения в некоторых случаях требуют обновления данных биометрических данных.
Условия записи: Сильная подсветка солнечным светом либо плотная затенение могут снизить верность идентификации признаков.

Вот несколько рекомендаций по безопасному использованию:

Для значимых операций всегда внедряйте двухэтапную аутентификацию;
Не активируйте возможность “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
Систематически обновляйте прошивку программное обеспечение телефона для защиты от новых видов атак;
Включайте функцию “Требовать распахнутых глаз” везде, где она имеется.

В каких местах также находится применение технология за исключением мобильных телефонов?

Пускай предмет данной работы сосредоточена на конкретно смартфонам и планшетам, следует отметить альтернативных областях использования технологии:

Мониторинг прохода в офисах и резиденциях;
Платёжные терминалы финансовых учреждений (“Face Pay”);
Электронные удостоверения личности последнего поколения;
Системы видеонаблюдения городских сервисов;
Механизация учёта явки школ/институтов;
Аутентификация пользователей ПК/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — нужно лишь пройти через барьер без пластика или телефона! Аналогичные инициативы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как меняется технология в наше время?

Всякий годочек проявляются современные концепции для повышения уровня функционирования систем лицевого распознавания:

Увеличивается детализация сенсоров — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность ошибки;
Улучшаются нейросети — передовые архитектуры вида MobileNetV3 позволяют быстро адаптироваться к свежим чертам вида пользователя непосредственно на девайсе без пересылки информации в облачное хранилище.
Улучшаются методы антиспуфинга — теперь телефоны способны отличать настоящие движущиеся лица от неподвижных фото/маскировок по незаметным движениям кожи.
Синхронизация со смарт-гаджетами — смарт-часы могут авто заблокировать мобильный телефон, если пользователь ушёл далеко.
Проявляются гибридные системы — в частности объединяющие голосовую аутентификацию + физиономию + пальцевой отпечаток.

Итак, те тренды особенно популярны на сегодняшний день:

1) Миниатюризация элементов

Изготовители пытаются сократить размер отверстия (“чёлки”) для сенсоры на дисплее за счёт внедрения миниатюрных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на аппарате

Для увеличения приватности всё более вычислений выполняется внутри устройства без передачи информации во внешний облачный услугу.

3) Упорядочивание норм

Гугл активно продвигает норму BiometricPrompt API, для того чтобы такие платформы, вроде вулкан россия, и каждые Android-аппы были совместимы с всеми формами биометрии унифицированно.

Что подобрать сегодня?

Когда вам всем необходима наивысшая сохранность данных, подбирайте флагманские аппараты с вмонтированным ИК-проектором либо ToF-датчиком глубины.

iPhone всех существующих последних моделей
Huawei Partner/Series P серии
Mix Pro
Vivo X серии
Оппо Find Икс серий.

Если финансы скромен – лучше выбирать традиционным методам безопасности (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную опцию удобства.

Каким образом увеличить комфорт функционирования возможности?

Есть несколько хитростей для пользователей, кто уже пользуется функцию распознавания лица:

Регулярно обновляйте свою фото-шаблон, если сильно меняется внешность.
Не забывайте протирать линзу передней камеры – загрязнения могут уменьшить четкость!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам активирует камеру как только вы поднимаете его.
Во время регистрационного процесса постарайтесь сохранять лицо прямо перед объектива не допуская резкого наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отворачиваетесь от дисплея.

Будущее прогресса инноваций

В ближайшие периоды можно предвкушать возникновения полностью бесконтактных способов идентификации персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + звучание + манера ходьбы + движения рук!

Также вероятно развитие свежих способов обеспечения личной информации – например, динамическое изменение цифрового паттерна после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее интересных техник нашего времени! Она делает общение со телефоном удобнее чем когда-либо прежде, и такие приложения, как vulkan russia, могут существенно улучшить ваш юзерский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы осведомлены, как устроена эта система внутри, – сможете более осмысленно выбирать свой следующий устройство!