Каким способом работает распознавание лицевых образов в смартфонах

Зачем мы выбираем разлочивание по лицу

В прошлые годы распознавание физиономий стало одной из самых популярных опций для деблокировки умных телефонов. Всего несколько лет назад основная масса пользователей довольствовались PIN-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением подобных технологий, как admiral x, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь превращает данную функцию очень нужной? Во-первых, это удобно: не нужно помнить замысловатые пароли или искать верный палец в тьме. Во-вторых, это мгновенно: современные программы идентифицируют лицо фактически за доли секунды. В-третью очередь, это впечатление футуристичности — как будто в кинолентах про admiral x официальный сайт разведчиков.

Тем не менее за данной видимой простотой скрывается весь вселенная комплексных технологий и инженерных решений. Давайте исследовать, как именно работает фейсканирование в новейших мобильных телефонах, какие бывают способы, насколько они защищены и что нас ждёт впереди.

Короткая повествование прогресса техники

Идентификация лиц как техника существует уже более 50 лет. Изначальные попытки автоматизированного изучения лиц были сделаны еще в 1960-х годах в лабораториях США. Тогда компьютеры умели лишь обозначать контуры черепа и определять дистанции между очами и ртом на черно-белых снимках.

Начальные торговые установки возникли в девяностых годах, но они были несовершенны: функционировали медленно и часто ошибались. Только с эволюцией искусственных сетей и таких платформ, как адмирал х, сильных мобильных чипов идентификация лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным идентификацией лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять свои разработки.

Главные шаги действия системы идентификации

Процесс идентификации лица можно примерно сегментировать на несколько ключевых этапов:

1. Распознавание лица — аппарат определяет наличие человеческого лица в изображении.
2. Определение признаков — механизм исследует контуры лица: конфигурацию глаз, обонятельного органа, губ, позицию бровей.
3. Построение модели — создаётся уникальный цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с образцом — полученный модель сравнивается с сохранённой при внесении биометрической информацией владельца.
5. Принятие решения — если соответствие достаточно высокое, смартфон деблокируется.

Любой из этих этапов нуждается в индивидуальных алгоритмов и улучшений для оперативной работы непосредственно на девайсе.

Аппаратные элементы: что скрыто внутри

Стандартная селфи камера.

Простейший несложный метод распознавания лица использует только лицевую видеокамеру мобильного устройства. Такой подход осуществлён во различных бюджетных версиях Android-устройств.

Достоинства:

• Не нуждается в потребляет внешних датчиков.
• Быстро действует при качественном освещении.

Слабые стороны:

• Просто одурачить снимком или видеозаписью.
• Неправильно действует при низком освещении или непривычных точках зрения.

ИК камера и точечный проекционный аппарат

Более совершенные системы, такие как адмирал х, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика лежит в основе Face ID от Apple.

Каким способом это действует:

• Точечный проекционный прибор отображает на физиономию пользователя невидимую структуру из тысяч инфракрасных точек (например, Face ID использует около 30 000 пятен).
• ИК устройство фиксирует изменение формы этой сетки по поверхности лица.
• Получается трехмерная карта глубины глубинности, что почти что невозможна для подделки обычной снимком или маской.

Достоинства

• Надёжная деятельность даже в полной тьме.
• Высокая сопротивляемость к подделкам.
• Точность распознавания свыше 99%.

Добавочные сенсоры

В определённых девайсах используются также дополнительные датчики: ToF (Time-of-Flight), которые измеряют время прохождения света до цели и обратно; RGB-датчики дальности; специальные световые измерители расстояния для построения более аккуратной 3D-модели физиономии.

Эти разработки применяются в основном во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: синтетический ум в исполнении

Современные устройства идентификации физиономий немыслимы без эксплуатации ИИ и machine learning. Именно благодаря таким технологиям, как адмирал х, гаджет способно идентифицировать юзера даже при трансформациях облика: новая причёска, борода, оптика или грим не становятся препятствием для разблокировки.

Обнаружение физиономии

В начальном стадии программа должна быстро распознать ликовое изображение среди целого кадра камеры. Для этого задействуются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены распознавать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN может распознавать физиономию даже в случае частичном закрытии (например, платком или рукой).

Идентификация важных аспектов

После идентификации лица система, такая как адмирал х, вычисляет положение главных точек: края глаз, кончик носа, контуры губ и так далее. Обычно задействуется от 68 до 128 главных маркеров на лице.

Это действие нужно для нормализации картинки: если человек держит смартфон под наклоном, или склонил головку, программа “выпрямляет” изображение до стандартного положения для дальнейшего анализа.

Создание биометрии модели

Далее нейросеть строит уплотненное математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 флоатов.

Такой образец очень сложно имитировать: он не сохраняет непосредственно картинку юзера, а лишь исключительные особенности его вида, что делает его совершенным для таких площадок, как admiral-x.

Сравнительный анализ и вынесение заключения

Когда юзер хочет открыть смартфон взором, система осуществляет все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный уровень (обычно превышает 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ не предоставляется.

Привыкание к изменениям внешности

Увлекательная особенность современных системы — возможность самообучения. Если вы постоянно открываете смартфон с свежей прической или очками, система постепенно освежает основной шаблон вашего облика для повышения точности работы без ухудшения безопасности.

Защита биометрических данных информации.

Множество пользователи беспокоятся держать свои биометрические идентификационные данные на мобильном устройстве из-за риска утечки данных или хакерской атаки. Некоторые фирмы, вроде admiral-x, предлагают варианты для улучшения защиты сведений пользователей.

• Локальное сбережение: Преимущественно девайсов записывает биометричные модели исключительно в пределах защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из аппарат и закрыты включая создателю.

• Шифрование: Все данные сохраняются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения сторонних девелоперов не обладают прямого возможности доступа к биометрическим; они могут лишь требовать подтверждение верификации личности через системный API.

Стоит упомянуть важную деталь: в случае, если какой-то человек сможет получить доступ к вашему телефону физически (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители внедряют защиту от автоматического разблокирования — в частности, просят открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются виды распознавания лиц на изображениях?

Сегодня можно определить определить 3 главных способа к осуществлению этой операции:

Программируемое двухмерное идентификация

Применяется только передняя камера без дополнительных детекторов глубины. Этот способ встречается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; умеренная стоимость; быстрая функционирование при хорошем свете.
Минусы: просто обмануть фотографией; неустойчивая функционирование ночью; недостаточная охрана.

Аппаратное трёхмерное сканирование

Применяет ИК камеру + проектор точек + сенсоры глубины (Face ID от Apple; аналогичные технологии у Huawei Mate).
Плюсы: значительная надёжность; невозможно обмануть фото/видео; устойчивая функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные способы с интеграцией ИИ

Используют комбинацию программируемых методов + аппаратную обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, например адмирал х и Google Pixel Face Unlock современных поколений, комбинируют фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Примеры эксплуатации разных методов

• iPhone линейки X/11/12/13/14 применяют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition первый раз предложил подобие Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное 2D определение по изображению селфи-камерой, так и датчик ириса глаза.
• Huawei Mate20 Pro использует комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Проблемы безопасности и неверные сигналы

Несмотря на впечатляющий развитие технологий за прошедшие лет, совершенных механизмов пока не наблюдается:

1. Вероятность подвоха: Бюджетные смартфоны легко открываются качественной снимком владельца или же видеозаписью с экрана другого устройства.
2. Идентичные близнецы: Даже самые идеальные устройства могут перепутать между монозиготными близнецами либо родичами с очень похожей внешностью.
3. Трансформации внешнего вида: Внезапное снижение веса/увеличение массы тела, пластические операции или повреждения в некоторых случаях необходимы для обновления данных биометрии.
4. Условия записи: Интенсивная подсветка солнечным светом либо глубокая тень могут понизить аккуратность идентификации признаков.

Вот пара подсказок по защищённому эксплуатации:

• Для значимых операций всегда применяйте двухэтапную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
• Регулярно обновляйте прошивку прошивку телефона для предотвращения угроз от актуальных атак;
• Включайте функцию “Требовать открытых глаз” везде, где она доступна.

Где ещё используется технология помимо смартфонов?

Хотя основная мысль нашей публикации сосредоточена на именно смартфонам и планшетам, следует отметить других сферах применения технологии:

• Управление прохода в офисах и жилых домах;
• Платёжные аппараты банков (“Face Pay”);
• Виртуальные идентификационные документы нового поколения;
• Комплексы видеомониторинга муниципальных служб;
• Механизация отслеживания явки учебных заведений/институтов;
• Авторизация юзеров компьютеров/ноутбуков.

Например: В городском метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без карты или телефона! Аналогичные проекты осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким способом трансформируется технология в наше время?

Любой год появляются новые концепции для усовершенствования стандарта деятельности систем распознавания лиц:

1. Увеличивается чёткость сенсоров — чем больше элементов фиксируется видеокамерой/глубинными сенсорами, тем меньше риск погрешности;
2. Совершенствуются нейронные сети — новейшие структуры типа MobileNetV3 дают возможность оперативно осваивать дополнительным чертам вида владельца непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Развиваются методы антиспуфинга — теперь смартфоны умеют отличать подлинные живые лица от фиксированных фото/масок по мельчайшим движениям кожи.
4. Взаимодействие со интеллектуальными приборами — умные часы могут самостоятельно блокировать смартфон, если владелец ушёл далеко.
5. Появляются смешанные механизмы — в частности совмещающие речевую аутентификацию + лицо + пальцевой отпечаток.

Итак, которые направления в особенности популярны сейчас:

1) Уменьшение компонентов

Производители пытаются уменьшить величину выреза (“чёлки”) для датчики на экране за счёт встраивания миниатюрных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для увеличения приватности всё больше расчётов происходит на месте без передачи информации во дополнительный облачный услугу.

3) Унификация норм

Google активно продвигает стандарт BiometricPrompt API, чтобы подобные площадки, как admiral x, и все Android-программы были совместимы с всеми формами биометрии стандартизированно.

Что решить сегодня?

Если тебе важна максимальная сохранность данных, выбирайте топовые аппараты с интегрированным ИК-проектором либо ToF-датчиком глубины.

• iPhone каждого актуальных поколений
• Huawei Partner/P серии
• Xiaomi Professional
• Vivo X модели
• Оппо Обнаружить Х линейки.

Если средства скромен – лучше предпочесть традиционным методам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в admiral x, задействовать только как второстепенную возможность удобства.

Каким способом повысить удобство использования функции?

Есть пара советов для пользователей, кто уже применяет функцию распознавания лица:

1. Регулярно меняйте свою фото-шаблон, если сильно изменяется облик.
2. Не упускайте из виду протирать объектив фронтальной камеры – загрязнения могут понизить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам активирует камеру когда вы поднимаете его.
4. Во время регистрации старайтесь удерживать лицо ровно впереди видеоустройства исключая значительного наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отворачиваетесь от дисплея.

Перспективы развития инноваций

В ближайшие годы можно предполагать развития полностью бесконтактных способов опознания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: облик + звучание + манера ходьбы + движения рук!

Также вероятно развитие современных методов защиты конфиденциальности – например, переменное корректировка диджитал образца после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее увлекательных техник нашего периода! Она предоставляет интеракцию со телефоном удобнее чем когда-либо прежде, и такие приложения, как admiral-x, могут в разы повысить ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы понимаете, как устроена эта методика в деталях, – сумеете более осмысленно определять свой следующий устройство!