Каким образом действует идентификация лиц в мобильных устройствах

Зачем мы предпочитаем разлочивание по фейсу

В прошлые годы определение лиц превратилось в одной из наиболее востребованных опций для деблокировки мобильных телефонов. Еще несколько годков тому назад основная масса пользователей довольствовались пин-кодами, паролями или сканерами отпечатков пальцев. Но с появлением подобных технологий, например admiral x, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект обуславливает эту конкретную возможность настолько популярной? Для начала, это удобно: не нужно помнить сложные пароли или отыскивать верный палец в тьме. Также, это мгновенно: современные системы узнают лицо фактически за мгновение. В-третью очередь, это впечатление футуристичности — как будто в кинофильмах про адмирал х агентов.

Однако за такой видимой простотой прячется полный мир комплексных техник и инженерных концепций. Позвольте нам понять, как именно действует идентификация по лицу в новейших смартфонах, какие бывают методы, насколько они защищены и что нас ждёт впереди.

Короткая повествование эволюции техники

Распознавание лиц как технология имеется уже более пятидесяти годов. Изначальные эксперименты автоматизированного анализа облика были сделаны еще в 1960-х годы в научных учреждениях США. Тогда компьютеры могли лишь выделять силуэты лица и измерять расстояния между зрачками и губами на монохромных изображениях.

Начальные бизнес платформы возникли в девяностых годах, но они были неидеальны: действовали неспешно и нередко ошибались. Только с прогрессом нейронных сетей и таких площадок, как адмирал х, мощных мобильных процессоров идентификация лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали интегрировать свои разработки.

Основные этапы работы устройства распознавания

Процесс определения лица можно условно поделить на несколько основных этапов:

1. Обнаружение лица — устройство выявляет существование гуманного лица в снимке.
2. Извлечение характеристик — система исследует контуры облика: конфигурацию глаз, носа, уст, расположение бровей.
3. Построение модели — создаётся уникальный электронный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с стандартом — созданный шаблон сопоставляется с сохранённой при внесении биометрической данными владельца.
5. Принятие выбора — если соответствие достаточно высокое, смартфон открывается.

Каждый из данных стадий нуждается в особых процедур и улучшений для скорой работы непосредственно на девайсе.

Аппаратные компоненты: что находится в их недрах

Обычная фронтальная камера.

Самый легкий вариант определения физиономии использует исключительно переднюю камеру мобильного устройства. Подобный метод реализован во многих бюджетных моделях Android-девайсов.

Преимущества:

• Не требует дополнительных датчиков.
• Оперативно действует при хорошем свете.

Недостатки:

• Легко одурачить изображением или видео.
• Неправильно функционирует при плохом свете или непривычных точках зрения.

ИК камера и пунктирный проекционный аппарат

Более совершенные системы, такие как адмирал х, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика составляет базу Face ID от Apple.

Каким способом это работает:

• Точечный проектор показывает на физиономию пользователя невидимую структуру из тысяч инфракрасных меток (например, Face ID применяет около 30 000 меток).
• ИК устройство регистрирует изменение формы этой сетки по поверхности физиономии.
• Формируется трехмерная карта глубины глубины, которая почти неосуществима для подделки обычной фото или маскировкой.

Преимущества

• Надёжная деятельность даже в полной неосвещённости.
• Высокая устойчивость к подделкам.
• Точность распознавания свыше 99%.

Добавочные сенсорные устройства

В отдельных аппаратах применяются также экстра датчики: ToF (Time-of-Flight), которые фиксируют время распространения луча до объекта и обратно; Цветные-датчики глубины; специальные оптические лидары для создания более аккуратной 3D-модели лица.

Эти инновации используются в основном во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искуственный интеллект в работе

Современные устройства идентификации лиц невозможны без использования artificial intelligence и machine learning. Именно вследствие таким технологиям, как адмирал х, аппарат способно узнавать пользователя даже при трансформациях внешности: новая причёска, борода, очки или грим не становятся помехой для открытия.

Распознавание лица

При стартовом стадии программа обязана мгновенно найти образ лица в пределах целого изображения камеры. Для этого задействуются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые “обучены” находить человеческие лица среди множества других объектов.

Пример: метод MTCNN способен распознавать лицо даже при частичном закрытии (например, шалью или рукой).

Определение ключевых моментов

После идентификации лица механизм, такая как адмирал х, определяет расположение ключевых точек: края глаз, конец носа, границы губ и так далее. Часто задействуется от 68 до 128 ключевых точек на лицевой области.

Это требуется для выравнивания картинки: если юзер находится с смартфон под углом, или повернул голову, программа корректирует изображение до стандартного положения для последующего изучения.

Формирование биометрического идентификатора модели

Далее искусственная сеть строит сжатое числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 вещественных чисел.

Этот формат очень трудно имитировать: он не удерживает само изображение юзера, а лишь уникальные особенности его облика, что делает его оптимальным для таких систем, как admiral-x.

Сравнение и вынесение заключения

Если человек намеревается открыть смартфон взором, механизм осуществляет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный границу (обычно выше 99%), телефон, как и платформа admiral-x, доступен; если нет — доступ блокируется.

Адаптация к изменениям внешности

Занимательная особенность актуальных систем — возможность самостоятельного обучения. Если ты регулярно разблокируете телефон с свежей прической или очками, алгоритм постепенно обновляет базовый модель вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Защита биометрии данных.

Множество юзеры беспокоятся сохранять свои био-идентификационные данные на телефоне из-за вероятности утечки информации или хакерской атаки. Иные фирмы, такие как admiral-x, предоставляют методы для повышения безопасности информации клиентов.

• Локальное сохранение: Преимущественно девайсов сохраняет био-идентификационные образцы исключительно в пределах защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не оставляют гаджет и недоступны в том числе производителю.

• Шифрование: Все информация сберегаются только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих разработчиков не имеют непосредственного возможности доступа к биометрическим; они могут лишь требовать подтверждение верификации личности через системный API.

Следует упомянуть значимую деталь: в случае, если кто-то достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие компании реализуют меры безопасности от неосознанного разблокирования — к примеру, заставляют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие бывают типы идентификации лиц на изображениях?

На сегодняшний день можно выделить выделить три основных способа к реализации этой задачи:

Программное двухмерное распознавание

Используется только лицевая видеокамера без вспомогательных датчиков дистанции. Подобный метод используется наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость реализации; умеренная затраты; оперативная работа при хорошем свете.
Минусы: просто ввести в заблуждение снимком; ненадежная деятельность ночью; слабая охрана.

Техническое объёмное сканирование

Использует инфракрасную видеокамеру + проекционный модуль точек + сенсоры дистанции (Face ID от Apple; аналогичные технологии у Huawei Mate).
Плюсы: высокая надёжность; нельзя подделать изображение/видеозапись; устойчивая деятельность при любом освещении.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с дополнением ИИ

Задействуют комбинацию программных методов + техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как адмирал х и Google Pixel Face Unlock последних поколений, комбинируют фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для предотвращения от фальсификаций руками/масками/видеодисплеями чужих устройств.

Примеры эксплуатации различных методов

• iPhone модели X/11/12/13/14 применяют только аппаратное трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые предложил аналог Face ID в числе Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как программное обеспечение двухмерное определение по изображению селфи-камерой, так и датчик глазного ириса.
• Huawei Mate20 Pro применяет комплекс из ИК-освещения + Dot Projector + ToF-сенсор

Вопросы защиты и ошибочные срабатывания

Несмотря на впечатляющий развитие техники за прошедшие лет, совершенных механизмов пока не наблюдается:

1. Возможность подвоха: Недорогие телефоны просто открываются качественной фотографией хозяина или же роликом с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые идеальные механизмы могут перепутать между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
3. Трансформации внешности: Стремительное утрата веса/увеличение массы тела, пластические операции или повреждения иногда необходимы для перерегистрации биометрии.
4. Условия записи: Яркая освещённость солнцем либо интенсивная темнота могут снизить аккуратность идентификации признаков.

Ниже несколько рекомендаций для защищённому применению:

• Для важных операций всегда внедряйте дополнительную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
• Регулярно обновляйте прошивку телефона для обеспечения безопасности от актуальных атак;
• Включайте настройку “Требовать раскрытых глаз” в тех местах, где она есть.

Где ещё используется технология за исключением смартфонов?

Хотя предмет данной статьи касается конкретно портативным гаджетам, стоит упомянуть о альтернативных областях использования технологии:

• Мониторинг доступа в рабочих помещениях и резиденциях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Цифровые удостоверения личности нового типа;
• Установки видеомониторинга городских подразделений;
• Автоматизация регистрации посещаемости учебных заведений/университетов;
• Аутентификация юзеров компьютеров/ноутбуков.

Например: В городском метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без карты или телефона! Аналогичные проекты развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как трансформируется технология в наше время?

Любой годик появляются современные мысли для повышения стандарта деятельности систем лицевого распознавания:

1. Увеличивается разрешение датчиков — чем больше информации фиксируется фотоаппаратом/датчиками глубины, тем меньше шанс погрешности;
2. Развиваются искусственные интеллекты — новейшие конструкции типа MobileNetV3 обеспечивают возможность быстро осваивать новым характеристикам облика обладателя непосредственно на девайсе без отправки данных в облако.
3. Улучшаются методы антиспуфинга — теперь телефоны могут различать реальные анимированные лица от фиксированных фотографий/маскировок по микроскопическим микродвижениям.
4. Синхронизация со умными устройствами — интеллектуальные часы могут авто закрыть доступ к телефон, если владелец удалился на значительное расстояние.
5. Проявляются гибридные системы — например совмещающие речевую идентификацию + облик + дактилоскопический след.

Здесь, которые направления особенно популярны на сегодняшний день:

1) Сокращение деталей

Изготовители намереваются минимизировать размер отверстия (“чёлки”) под сенсоры на экране за счёт внедрения маленьких ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для увеличения приватности всё более расчётов происходит на месте без отправки данных во внешний облачный услугу.

3) Упорядочивание норм

Google интенсивно продвигает стандарт BiometricPrompt API, с целью чтобы такие платформы, вроде admiral x, и каждые Android-аппы были совместимы с любыми видами биометрии унифицированно.

Что решить сегодня?

В случае если вам всем необходима наивысшая безопасность информации, остановите выбор на флагманские устройства с вмонтированным ИК-проектором или ToF-сенсором глубины.

• iPhone всех последних моделей
• Huawei Partner/P линейки
• Mi Pro
• Vivo X линейки
• Oppo Find X серии.

Если финансы невелик – лучше предпочесть обычным средствам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в admiral x, использовать только как второстепенную опцию комфорта.

Каким образом повысить удобство использования функции?

Есть некоторые лайфхаков для тех, кто уже использует разблокировку через лицо:

1. Регулярно обновляйте свою фотографию-шаблон, если сильно изменяется внешность.
2. Не пренебрегайте чистить линзу передней камеры – загрязнения могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам активирует фотоаппарат когда вы берёте его в руки.
4. При записи постарайтесь сохранять лицевую часть ровно напротив камеры без значительного наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от дисплея.

Перспективы эволюции инноваций

В ближайшие годы можно предполагать появления полностью дистанционных способов распознавания персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + звучание + манера ходьбы + движения рук!

Также предполагается возникновение свежих способов охраны приватности – скажем, переменное изменение электронного шаблона после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из очень захватывающих технологий нашего эпохи! Она делает взаимодействие со смартфоном удобнее чем раньше, и такие аппы, как admiral-x, могут существенно оптимизировать ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы понимаете, как работает эта технология в деталях, – сумеете вдумчиво определять свой следующий гаджет!