Как работает идентификация лиц в мобильных устройствах

Почему мы останавливаемся на разлочивание по лицевому распознаванию

В последние времена определение физиономий стало одной из самых популярных возможностей для разблокировки умных телефонов. Лишь некоторые годков назад большинство юзеров обходились PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но с появлением подобных технологий, как admiral x, нам вполне лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь обуславливает эту конкретную функцию такой востребованной? Для начала, это практично: не нужно помнить сложные пароли или отыскивать правильный палец в тьме. Во-вторых, это быстро: современные алгоритмы узнают лицо практически за мгновения ока. В-третьих, это ощущение футуристичности — как будто в кинолентах про адмирал х официальный сайт разведчиков.

Тем не менее за такой на первый взгляд несложностью таится целый мир сложных технологий и инженерных концепций. Позвольте нам понять, как точно действует идентификация по лицу в актуальных мобильных телефонах, какие бывают способы, насколько они защищены и что нас ждёт впереди.

Сжатая хроника прогресса инноваций

Распознавание лиц как методика присутствует уже более 50 годов. Начальные эксперименты машинного анализа лица были предприняты еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ способны были лишь определять очертания головы и вычислять дистанции между очами и устами на ахроматических фотографиях.

Начальные бизнес установки возникли в девяностых годах, но они были несовершенны: функционировали медленно и нередко ошибались. Только с прогрессом синтетических сетей и таких площадок, как адмирал х, мощных мобильных микросхем определение лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным сканированием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять свои решения.

Ключевые этапы функционирования устройства идентификации

Процесс идентификации лица можно условно сегментировать на несколько важных этапов:

1. Обнаружение лиц — аппарат выявляет присутствие гуманного лица в кадре.
2. Извлечение особенностей — механизм изучает особенности физиономии: очертания зрительных органов, обонятельного органа, уст, расположение надбровных дуг.
3. Построение структуры — создаётся уникальный виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со образцом — полученный модель сравнивается с записанной при регистрации биометрической информацией владельца.
5. Принятие решения — если соответствие достаточно высокое, смартфон деблокируется.

Всякий из указанных шагов запрашивает специальных методов и усовершенствований для быстрой работы прямо на устройстве.

Технические компоненты: что прячется в их недрах

Обычная передняя камера.

Самый простой несложный вариант распознавания облика использует исключительно лицевую видеокамеру мобильного устройства. Данный подход реализован во многих доступных моделях Android-девайсов.

Сильные стороны:

• Не потребляет дополнительных датчиков.
• Быстро работает при хорошем освещённости.

Слабые стороны:

• Просто обмануть фотографией или роликом.
• Неправильно функционирует при плохом освещённости или нестандартных углах обзора.

ИК фотокамера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как адмирал х, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология лежит в основе Face ID от Apple.

Каким образом это функционирует:

• Точечный проектор проецирует на облик юзера невидимую решетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 точек).
• Инфракрасная камера записывает изменение формы этой решетки по поверхности лица.
• Создаётся 3D глубинная карта глубины, которая практически неподвластна для подделки типичной фотографией или маскировкой.

Выигрыши

• Надёжная деятельность даже в полной неосвещённости.
• Большая сопротивляемость к имитациям.
• Точность распознавания свыше 99%.

Добавочные сенсоры

В отдельных аппаратах используются также экстра сенсорные устройства: ToF (Time-of-Flight), которые определяют время распространения луча до предмета и обратно; RGB-датчики дальности; специальные оптические лидары для построения более детализированной 3D-модели физиономии.

Эти инновации применяются в основном во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: синтетический ум на исполнении

Нынешние устройства опознания физиономий немыслимы при отсутствии использования ИИ и machine learning. Именно из-за таким разработкам, как адмирал х, гаджет способно идентифицировать владельца даже при трансформациях облика: новая причёска, щетина, очки или грим не становятся препятствием для разблокировки.

Распознавание физиономии

В стартовом этапе система должна быстро обнаружить лицо среди полного снимка камеры. Для этой задачи применяются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые “обучены” распознавать лица людей среди множества других объектов.

Пример: метод MTCNN в состоянии находить физиономию даже в случае частичном перекрытии (например, платком или ладонью).

Выделение ключевых моментов

После идентификации лица система, такая как адмирал х, определяет местоположение основных точек: уголки глаз, кончик носа, края губ и так далее. Часто используется от 68 до 128 главных точек на лицевой поверхности.

Это действие требуется для выравнивания визуала: если юзер держит телефон под наклоном, или наклонил головку, программа корректирует картинку до обычного угла для последующего изучения.

Создание биометрического идентификатора модели

Далее нейронная сеть строит сжатое числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Такой образец весьма трудно подделать: он не хранит само фото пользователя, а лишь исключительные черты его внешности, что делает его идеальным для таких площадок, как admiral-x.

Сравнение и вынесение решения

Если пользователь намеревается разлочить смартфон глазами, система повторяет все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ блокируется.

Привыкание к изменениям облика

Увлекательная особенность нынешних систем — способность самостоятельного обучения. Если вы часто доступаете к смартфон с обновленной стрижкой или очками, программа постепенно модернизирует эталонный образец вашего лица для увеличения точности действия без снижения уровня безопасности.

Безопасность биометрии данных.

Многие пользователи опасаются хранить свои биометрические данные на смартфоне из-за риска потери данных или хакерской атаки. Некоторые фирмы, например admiral-x, предоставляют методы для улучшения безопасности данных клиентов.

• Локальное хранение: Большинство аппаратов сохраняет биометричные шаблоны лишь внутрь защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают гаджет и недоступны включая изготовителю.

• Шифрование: Все данные сберегаются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Программы внешних разработчиков не имеют прямого доступа к биометрическим данным; они могут лишь запрашивать подтверждение подтверждения идентичности через системный API.

Необходимо отметить существенную особенность: в случае, если кто-то достанет доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство производители реализуют меры безопасности от автоматического разблокирования — в частности, требуют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют категории идентификации лиц на изображениях?

В настоящее время можно выделить различить 3 ключевых метода к реализации этой функции:

Софтверное двухмерное идентификация

Используется только лицевая видеокамера без дополнительных детекторов глубины. Этот подход наблюдается чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность воплощения; низкая стоимость; скоростная работа при качественном свете.
Минусы: легко одурачить фотографией; ненадежная деятельность ночью; слабая защищенность.

Оборудование для трёхмерное сканирование

Задействует ИК видеокамеру + проектор точек + датчики глубины (Face ID у Apple; подобные решения у Huawei Mate).
Достоинства: высокая надежность; не получится исказить фото/видео; стабильная работа в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с дополнением ИИ

Используют комбинацию программных методов + аппаратно-техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, например адмирал х и Google Pixel Face Unlock новейших поколений, комбинируют фронтальную камеру c инфракрасным сенсором мобильности Soli Radar для предотвращения от подделок руками/масками/видеоэкранами чужих устройств.

Образцы эксплуатации различных техник

• iPhone линейки X/11/12/13/14 используют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition первый раз предложил аналог Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как софтверное плоское определение по фото фронтальной камерой, так и датчик ириса глаза.
• Huawei Mate20 Pro задействует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Трудности охраны и ложные сигналы

Несмотря на поразительный развитие технологий за последние лет, безупречных механизмов пока не наблюдается:

1. Вероятность мошенничества: Доступные телефоны просто открываются качественной снимком пользователя или же видео с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые безупречные системы могут спутать между монозиготными близнецами либо семьями с очень аналогичной внешностью.
3. Трансформации облика: Резкое утрата веса/увеличение массы тела, косметические процедуры либо травмы порой требуют перерегистрации биометрии.
4. Условия записи: Интенсивная подсветка солнечным светом или же глубокая затенение могут уменьшить аккуратность распознавания признаков.

Ниже несколько советов для защищённому применению:

• Для значимых операций всегда внедряйте двухфакторную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Регулярно обновляйте прошивку мобильного устройства для предотвращения угроз от современных угроз;
• Включайте функцию “Требовать распахнутых глаз” везде, где она есть.

В каких местах также используется технологии за исключением смартфонов?

Несмотря на то, что основная мысль данной работы сосредоточена на в частности смартфонам и планшетам, стоит упомянуть о альтернативных областях использования технологии:

• Мониторинг доступа в офисах и многоквартирных зданиях;
• Платёжные устройства банков (“Face Pay”);
• Виртуальные удостоверения личности современного типа;
• Системы видеомониторинга городских подразделений;
• Автоматизация регистрации присутствия учебных заведений/институтов;
• Аутентификация юзеров компьютеров/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — нужно лишь пройти через барьер без карты или телефона! Аналогичные программы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким способом меняется технология в наше время?

Любой год появляются свежие концепции для усовершенствования уровня работы систем распознавания лиц:

1. Увеличивается чёткость датчиков — чем больше деталей фиксируется камерой/датчиками глубины, тем меньше шанс погрешности;
2. Развиваются искусственные интеллекты — передовые архитектуры типа MobileNetV3 обеспечивают возможность быстро обучаться новым характеристикам облика владельца непосредственно на девайсе без отправки данных в облако.
3. Совершенствуются технологии антиспуфинга — теперь телефоны умеют распознавать подлинные живые лица от неподвижных снимков/маскировок по микроскопическим движениям кожи.
4. Интеграция со интеллектуальными приборами — смарт-часы могут самостоятельно закрыть доступ к смартфон, если владелец удалился на значительное расстояние.
5. Возникают комбинированные механизмы — в частности комбинирующие аудио опознание + облик + отпечаток пальца.

Вот, какие тенденции в особенности актуальны сейчас:

1) Миниатюризация элементов

Изготовители пытаются минимизировать габариты отверстия (“чёлки”) для сенсоры на экране за счёт интеграции маленьких ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на девайсе

Для увеличения конфиденциальности всё более обработки данных происходит внутри устройства без отправки данных во внешний облачный сервис.

3) Стандартизация стандартов

Гугл интенсивно пропагандирует стандарт BiometricPrompt API, для того чтобы такие площадки, например как admiral x, и каждые Android-приложения могли взаимодействовать с различными типами биометрии унифицированно.

Какое решить на сегодня?

Если вам всем важна предельная сохранность информации, остановите выбор на передовые аппараты с вмонтированным ИК-излучателем или же ToF-сенсором глубины.

• iPhone всех последних моделей
• Huawei Partner/P Series линейки
• Mix Expert
• Vivo X серии
• Оппо Обнаружить Х серии.

Если средства невелик – лучше предпочесть традиционным способам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в admiral x, задействовать только как второстепенную возможность удобства.

Как улучшить практичность функционирования функции?

Есть некоторые советов для пользователей, кто уже использует разблокировку по лицу:

1. Регулярно обновляйте свою изображение-шаблон, если значительно меняется облик.
2. Не упускайте из виду очищать линзу передней камеры – загрязнения могут уменьшить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам запускает камеру если вы поднимаете его.
4. В процессе регистрационного процесса пытайтесь сохранять лицо ровно напротив камеры без сильного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвернулись от дисплея.

Будущее прогресса инноваций

В предстоящие времена можно предвкушать возникновения полностью дистанционных способов идентификации человека сразу по нескольким биометрическим данным параметрам одновременно: облик + речь + манера ходьбы + движения рук!

Также возможно появление новых методов защиты конфиденциальности – скажем, изменяющееся изменение электронного паттерна после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень захватывающих инноваций нашего периода! Она делает общение со мобильным устройством удобнее чем раньше, и такие аппы, как admiral-x, могут существенно повысить ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как устроена эта методика изнутри, – будете в состоянии более осмысленно подбирать свой следующий устройство!