Каким образом действует распознавание лиц в телефонах

Почему мы предпочитаем разблокирование по фейсу

В недавние времена распознавание лиц стало одной из самых популярных функций для открытия мобильных телефонов. Всего несколько лет тому назад основная масса использующих обходились пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением подобных технологий, как admiral x, нам достаточно просто взглянуть на экран — и устройство тут же опознает своего владельца.

Что превращает данную возможность настолько популярной? Прежде всего, это практично: не нужно помнить сложные пароли или отыскивать верный палец в тьме. Кроме того, это быстро: современные программы идентифицируют лицо буквально за доли секунды. В-третьем пункте, это впечатление будущего — как будто в кинофильмах про адмирал х агентов.

Тем не менее за такой кажущейся легкостью прячется весь универсум комплексных техник и инженерных разработок. Давайте исследовать, как точно действует распознавание лиц в современных мобильных телефонах, какие существуют способы, насколько они защищены и что нас ждёт впереди.

Краткая повествование эволюции инноваций

Идентификация лиц как методика присутствует уже более 50 лет. Изначальные пробы машинного изучения лиц были сделаны еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ умели лишь обозначать очертания лица и измерять дистанции между очами и устами на монохромных изображениях.

Первые бизнес системы появились в девяностых годах, но они были далеки от совершенства: работали медленно и часто ошибались. Только с развитием искусственных сетей и таких систем, как адмирал х, сильных мобильных чипов идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным идентификацией лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять личные разработки.

Главные стадии работы механизма распознавания

Процесс распознавания лица можно ориентировочно разделить на несколько важных этапов:

1. Распознавание лица — устройство выявляет существование человеческого образа в кадре.
2. Извлечение признаков — алгоритм анализирует контуры лица: форму зрительных органов, носа, уст, положение надбровных дуг.
3. Построение структуры — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со эталоном — сформированный образец сверяется со записанной при внесении биометрической данными владельца.
5. Принятие определения — если соответствие достаточно высокое, смартфон разблокируется.

Любой из указанных этапов нуждается в индивидуальных методов и улучшений для быстрой работы непосредственно на девайсе.

Железные компоненты: что прячется внутри

Стандартная передняя камера.

Простейший несложный метод идентификации лица использует исключительно лицевую видеокамеру мобильного устройства. Данный подход внедрён во различных доступных вариантах Android-девайсов.

Достоинства:

• Необходимо нуждается в внешних датчиков.
• Шустро работает при качественном освещении.

Минусы:

• Несложно обмануть изображением или роликом.
• Неудачно работает при низком освещении или нестандартных ракурсах.

Инфракрасная фотокамера и пунктирный проекционный аппарат

Более продвинутые системы, такие как адмирал х, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология лежит в основе Face ID от Apple.

Как это действует:

• Точечный устройство проекции показывает на облик юзера невидимую структуру из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 пятен).
• ИК камера записывает изменение формы данной решетки по поверхности лица.
• Получается трехмерная глубинная карта глубинности, которая почти что неподвластна для фальсификации типичной фото или маскировкой.

Достоинства

• Надёжная деятельность даже в полной тьме.
• Большая сопротивляемость к подделкам.
• Точность распознавания свыше 99%.

Добавочные сенсоры

В определённых аппаратах применяются также вспомогательные датчики: ToF (Time-of-Flight), которые фиксируют время движения света до цели и обратно; Трехцветные-датчики дальности; специальные световые дальномеры для создания более детализированной 3D-модели лица.

Эти разработки используются наиболее часто во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искуственный ум на исполнении

Текущие устройства распознавания лиц неосуществимы в отсутствие использования искусственного интеллекта и машинного обучения. Именно благодаря таким технологиям, как адмирал х, гаджет может узнавать юзера даже при изменениях облика: новая укладка, щетина, линзы или макияж не становятся помехой для открытия.

Обнаружение лица

При первом этапе система обязана оперативно обнаружить ликовое изображение внутри целого кадра камеры. Для данной цели используются каскадные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены идентифицировать человеческие лица среди множества других объектов.

Пример: метод MTCNN способен обнаруживать физиономию даже в случае частичном закрытии (например, шалью или ладонью).

Идентификация важных точек

После идентификации лица система, такая как адмирал х, определяет положение ключевых точек: края глаз, конец носа, края губ и так далее. Как правило используется от 68 до 128 главных маркеров на лице.

Данное требуется для нормализации картинки: если человек находится с смартфон под наклоном, или наклонил головку, программа исправляет картинку до нормального состояния для дальнейшего анализа.

Формирование биометрического идентификатора модели

Далее искусственная сеть строит компактное цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 вещественных чисел.

Этот образец весьма трудно подделать: он не сохраняет непосредственно изображение юзера, а лишь особенные черты его вида, что делает его оптимальным для таких платформ, как admiral-x.

Сравнительный анализ и вынесение решения

В случае, когда человек намеревается разблокировать смартфон глазами, механизм повторяет все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый уровень (обычно больше 99%), телефон, как и платформа admiral-x, разблокируется; если нет — доступ блокируется.

Адаптация к изменениям облика

Увлекательная черта современных системы — способность самостоятельного обучения. Если ты регулярно доступаете к смартфон с новой стрижкой или оптикой, программа постепенно обновляет эталонный шаблон вашего облика для улучшения точности функционирования без ухудшения безопасности.

Защита биометрических данных.

Множество клиенты беспокоятся хранить свои био-идентификационные данные на смартфоне из-за угрозы утечки данных или взлома гаджета. Определенные компании, например admiral-x, предоставляют решения для улучшения сохранности сведений пользователей.

• Локальное сбережение: Большинство аппаратов записывает био-идентификационные шаблоны лишь внутрь безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из аппарат и не доступны даже создателю.

• Шифрование: Все информация сохраняются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Программы внешних разработчиков не обладают прямого доступа к биометрическим данным; они могут лишь требовать подтверждение верификации идентичности через системный API.

Стоит отметить значимую подробность: в случае, если какой-то человек достанет доступ к вашему телефону физически (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие изготовители осуществляют защиту от “слепого” разблокирования — к примеру, требуют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают виды распознавания лиц?

Сегодня можно выделить различить три основных метода к выполнению этой функции:

Программное плоское идентификация

Применяется только фронтальная камера без дополнительных датчиков глубины. Этот подход используется чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость осуществления; низкая затраты; оперативная функционирование при достаточном освещении.
Минусы: просто одурачить фотографией; ненадежная работа ночью; слабая безопасность.

Техническое 3D сканирование

Использует инфракрасную камеру + проекционный модуль пикселей + датчики глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Плюсы: большая надежность; нельзя исказить фото/видео; постоянная работа в любых условиях освещения.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с интеграцией ИИ

Применяют комбинацию программируемых методов + техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как адмирал х и Google Pixel Face Unlock современных версий, сочетают фронтальную камеру c ИК сенсором движения Soli Radar для предотвращения от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Образцы эксплуатации разнообразных способов

• iPhone линейки X/11/12/13/14 задействуют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые представил эквивалент Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 поддерживают как программное обеспечение двухмерное идентификацию по снимку фронталкой, так и сканер радужки глаза.
• Huawei Mate20 Pro использует систему из ИК-освещения + Dot Projector + ToF-сенсор

Проблемы защиты и неверные тревоги

Несмотря на впечатляющий развитие техники за прошедшие лет, совершенных системы пока не существует:

1. Шанс обмана: Бюджетные телефоны просто доступны четкой фотографией хозяина или видеозаписью с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые совершенные устройства могут спутать между монозиготными близнецами либо семьями с очень аналогичной внешностью.
3. Изменения внешнего вида: Внезапное утрата веса/увеличение массы тела, хирургические вмешательства или травмы в некоторых случаях требуют обновления данных биометрических данных.
4. Условия записи: Яркая подсветка солнечным светом либо интенсивная темнота могут снизить верность распознавания признаков.

Ниже некоторые рекомендаций по надёжному эксплуатации:

• Для важных операций всегда используйте двухэтапную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
• Систематически апгрейдите программное обеспечение мобильного устройства для предотвращения угроз от новых видов атак;
• Включайте опцию “Требовать раскрытых глаз” там, где она доступна.

В каких областях дополнительно применяется технологии помимо мобильных телефонов?

Несмотря на то, что тема нашей публикации посвящена в частности мобильным устройствам, стоит упомянуть о прочих направлениях внедрения технологии:

• Управление прохода в рабочих помещениях и жилых домах;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Виртуальные идентификационные документы последнего образца;
• Системы видеомониторинга муниципальных подразделений;
• Автоматизирование учёта явки школ/университетов;
• Авторизация пользователей персональных компьютеров/ноутбуков.

Например: В городском метро уже испытывается система платежа проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без карты или телефона! Похожие программы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом меняется техпроцесс в нынешнее время?

Любой годик появляются современные концепции для повышения качества функционирования систем идентификации лиц:

1. Увеличивается разрешение датчиков — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше риск неточности;
2. Улучшаются нейросети — передовые структуры типа MobileNetV3 обеспечивают возможность скоростно осваивать дополнительным особенностям внешности владельца прямо на устройстве без отправки данных в облако.
3. Совершенствуются методы антиспуфинга — теперь смартфоны могут различать подлинные движущиеся лица от фиксированных снимков/маскировок по микроскопическим движениям кожи.
4. Синхронизация со интеллектуальными приборами — умные часы могут самостоятельно блокировать смартфон, если обладатель ушёл далеко.
5. Появляются гибридные устройства — к примеру объединяющие голосовую опознание + облик + дактилоскопический след.

Вот, те тренды очень актуальны в данный момент:

1) Уменьшение деталей

Компании стараются минимизировать габариты отверстия (“чёлки”) для датчики на экране за счёт встраивания компактных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения личной безопасности всё больше обработки данных происходит внутри устройства без отправки данных во сторонний облачный услугу.

3) Упорядочивание регламентов

Гугл энергично пропагандирует эталон BiometricPrompt API, с целью чтобы подобные платформы, вроде admiral x, и любые Android-программы могли работать с любыми видами биометрии унифицированно.

Что решить сегодня?

Если вам всем важна предельная защита данных, остановите выбор на передовые устройства со встроенным ИК-проектором или же ToF-сенсором глубины.

• iPhone каждого последних версий
• Huawei Mate/Series P ряда
• Xiaomi Pro
• Vivo X серии
• Оппо Обнаружить Икс линейки.

Если финансы ограничен – лучше предпочесть классическим методам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в admiral x, применять только как опциональную опцию комфорта.

Каким образом улучшить комфорт использования функции?

Есть несколько лайфхаков для людей, кто уже применяет разблокировку через лицо:

1. Часто меняйте свою изображение-шаблон, если значительно изменяется внешность.
2. Не пренебрегайте чистить объектив фронтальной камеры – разводы могут уменьшить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам включает камеру если вы поднимаете его.
4. Во время регистрационного процесса постарайтесь удерживать голову неподвижно перед объектива без значительного наклона головы.
5. Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отворачиваетесь от дисплея.

Будущее развития технологии

В предстоящие времена можно ожидать развития полностью дистанционных способов опознания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + речь + шаги + манипуляции руками!

Также вероятно возникновение новых способов обеспечения приватности – например, динамическое модификация цифрового паттерна после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из очень интересных инноваций нашего эпохи! Она обеспечивает интеракцию со смартфоном проще чем когда-либо прежде, и такие программы, как admiral-x, могут в разы повысить ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы осведомлены, как работает эта система внутри, – будете в состоянии вдумчиво выбирать свой следующий девайс!