Как работает распознавание лицевых образов в мобильных устройствах

Почему мы выбираем разблокирование по лицевому распознаванию

В недавние времена определение физиономий превратилось в одной из самых распространённых возможностей для разблокировки мобильных телефонов. Всего пару лет ранее основная часть использующих довольствовались пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением подобных технологий, как вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект обуславливает данную особенность такой востребованной? Во-первых, это практично: не нужно помнить трудные пароли или находить верный палец в тьме. Также, это быстро: современные программы распознают лицо фактически за доли секунды. В-третьих, это впечатление футуризма — как будто в кинофильмах про vulkan russia шпионов.

Тем не менее за данной видимой простотой таится весь универсум трудных технологий и инженерных разработок. Давайте исследовать, как конкретно действует фейсканирование в новейших смартфонах, какие существуют методы, насколько они безопасны и что нас ожидает в будущем.

Короткая история прогресса техники

Распознавание лиц как методика присутствует уже более пятидесяти годов. Изначальные попытки машинного анализа лиц были предприняты еще в 1960-х годах в научных учреждениях США. Тогда вычислительные машины умели лишь определять очертания черепа и определять промежутки между глазами и устами на монохромных снимках.

Первые торговые установки возникли в девяностых годах, но они были несовершенны: действовали неспешно и нередко ошибались. Только с развитием нейронных сетей и таких систем, как вулкан россии, сильных мобильных чипов идентификация лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным идентификацией лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять свои разработки.

Ключевые этапы функционирования системы определения

Процесс идентификации лица можно ориентировочно разделить на несколько основных этапов:

1. Распознавание лица — устройство распознает существование человеческого лица в кадре.
2. Извлечение особенностей — механизм изучает особенности лица: форму зрительных органов, носа, губ, положение бровей.
3. Построение модели — создаётся уникальный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с образцом — полученный шаблон сравнивается со записанной при внесении биометрической данными владельца.
5. Принятие решения — если сходство достаточно высокое, смартфон разблокируется.

Любой из указанных этапов запрашивает специальных алгоритмов и улучшений для оперативной работы прямо на устройстве.

Технические составляющие: что находится внутри них

Обычная передняя камера.

Самый простой метод определения облика применяет исключительно лицевую видеокамеру смартфона. Данный способ осуществлён во многочисленных доступных моделях Android-девайсов.

Плюсы:

• Необходимо нуждается в дополнительных сенсоров.
• Шустро действует при качественном освещённости.

Минусы:

• Просто обмануть фотографией или видео.
• Неудачно действует при плохом освещённости или нестандартных углах обзора.

Инфракрасная фотокамера и точечный проекционный аппарат

Более совершенные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика составляет базу Face ID от Apple.

Как это работает:

• Точечный проектор показывает на физиономию юзера невидимую структуру из тысяч инфракрасных меток (например, Face ID применяет около 30 000 точек).
• ИК камера записывает изменение формы этой решетки по плоскости лица.
• Получается трёхмерная глубинная карта глубины, которая почти неосуществима для подделки стандартной фото или маскировкой.

Преимущества

• Надёжная работа даже в полной темноте.
• Сильная устойчивость к фальсификациям.
• Точность идентификации выше 99%.

Дополнительные датчики

В определённых девайсах используются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые измеряют время распространения луча до предмета и обратно; Трехцветные-датчики глубины; специальные оптические дальномеры для построения более точной 3D-модели лица.

Эти технологии используются в основном во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искусственный ум в работе

Современные механизмы идентификации физиономий немыслимы в отсутствие эксплуатации artificial intelligence и машинного обучения. Именно вследствие таким технологиям, как вулкан россии, аппарат в состоянии узнавать пользователя даже при метаморфозах облика: новая стрижка, щетина, линзы или грим не становятся барьером для разблокировки.

Распознавание физиономии

При первом стадии алгоритм необходимо быстро обнаружить лицо в пределах целого кадра камеры. Для этой задачи применяются каскадные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены распознавать лица людей среди множества других объектов.

Пример: метод MTCNN в состоянии находить физиономию даже в случае частичном перекрытии (например, шалью или рукой).

Идентификация основных аспектов

После обнаружения лица система, такая как вулкан россии, определяет положение основных точек: уголки глаз, верхушка носа, границы губ и так далее. Часто задействуется от 68 до 128 главных маркеров на лицевой поверхности.

Данное нужно для стабилизации картинки: если юзер держит мобильник под наклоненным, или наклонил голову, программа корректирует изображение до обычного угла для последующего изучения.

Построение биометрии шаблона

Далее нейросеть строит компактное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Такой образец очень трудно сфальсифицировать: он не сохраняет непосредственно фото пользователя, а лишь исключительные особенности его внешности, что делает его оптимальным для таких платформ, как vulkan russia.

Сравнительный анализ и вынесение заключения

В случае, когда юзер намеревается разлочить смартфон глазами, механизм повторяет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный уровень (обычно выше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ блокируется.

Адаптация к трансформациям облика

Интересная особенность современных систем — возможность самостоятельного обучения. Если вы регулярно разблокируете смартфон с свежей стрижкой или очками, алгоритм постепенно модернизирует базовый шаблон вашего облика для улучшения точности функционирования без ухудшения безопасности.

Безопасность биометрии информации.

Большинство юзеры опасаются хранить свои биометрические идентификационные данные на мобильном устройстве из-за угрозы утечки данных или хакерской атаки. Иные фирмы, вроде vulkan russia, предлагают варианты для увеличения безопасности сведений клиентов.

• Локальное хранение: Преимущественно устройств записывает биометричные шаблоны только в пределах защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают устройство и недоступны включая создателю.

• Шифрование: Все информация сохраняются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих девелоперов не обладают прямого возможности доступа к биометрическим; они могут лишь запрашивать факт верификации идентичности через системный API.

Необходимо упомянуть существенную подробность: в случае, если кто-то получит физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство изготовители реализуют меры безопасности от неосознанного разблокирования — в частности, заставляют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют типы распознавания лиц?

В настоящее время можно выделить различить 3 ключевых способа к выполнению этой операции:

Софтверное 2D определение

Используется только лицевая видеокамера без вспомогательных датчиков дистанции. Такой подход используется обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость воплощения; минимальная цена; оперативная работа при качественном свете.
Минусы: просто ввести в заблуждение снимком; неустойчивая функционирование ночью; недостаточная охрана.

Оборудование для 3D сканирование

Применяет ИК камеру + проектор пикселей + сенсоры дистанции (Face ID от Apple; подобные технологии у Huawei Mate).
Плюсы: большая достоверность; невозможно обмануть фото/видео; стабильная деятельность в любых условиях освещения.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с дополнением ИИ

Задействуют комбинацию софтверных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, например вулкан россии и Google Pixel Face Unlock последних версий, объединяют фронталку c инфракрасным сенсором движения Soli Radar для защиты от подделок руками/масками/видеодисплеями чужих устройств.

Образцы эксплуатации разных техник

• iPhone серии X/11/12/13/14 применяют только физическое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition впервые внедрил подобие Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 имеют как программное 2D идентификацию по снимку селфи-камерой, так и датчик глазного ириса.
• Huawei Mate20 Pro применяет набор из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Проблемы защиты и неверные тревоги

Несмотря на поразительный успехи техники за последние лет, безупречных системы пока не имеется:

1. Вероятность обмана: Недорогие мобильники без труда открываются качественной снимком пользователя или роликом с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые безупречные механизмы могут ошибиться между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
3. Метаморфозы облика: Резкое снижение веса/увеличение массы тела, пластические операции либо травмы в некоторых случаях необходимы для обновления данных биометрии.
4. Условия записи: Яркая засветка солнечным светом либо интенсивная тень могут понизить точность определения признаков.

Ниже некоторые подсказок для защищённому эксплуатации:

• Для критически важных операций всегда внедряйте дополнительную аутентификацию;
• Не запускайте функцию “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
• Регулярно обновляйте прошивку программное обеспечение телефона для предотвращения угроз от актуальных атак;
• Включайте настройку “Требовать открытых глаз” в тех местах, где она имеется.

В каких местах также применяется технологии кроме смартфонов?

Хотя основная мысль данной работы посвящена конкретно смартфонам и планшетам, следует отметить прочих направлениях внедрения технологии:

• Контроль доступа в деловых центрах и жилых домах;
• Платёжные устройства банков (“Face Pay”);
• Цифровые удостоверения личности нового образца;
• Установки видеоконтроля муниципальных сервисов;
• Автоматизирование отслеживания посещаемости школ/университетов;
• Аутентификация пользователей ПК/ноутбуков.

Например: В столичном метро уже тестируется система платежа проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или мобильника! Аналогичные проекты развиваются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом изменяется техпроцесс сегодня?

Всякий годик возникают свежие мысли для усовершенствования стандарта функционирования систем идентификации лиц:

1. Увеличивается детализация сенсоров — чем больше информации фиксируется камерой/глубинными сенсорами, тем меньше вероятность погрешности;
2. Улучшаются нейронные сети — передовые конструкции типа MobileNetV3 обеспечивают возможность скоростно осваивать новым характеристикам вида владельца напрямую на гаджете без отправки данных в облако.
3. Улучшаются способы антиспуфинга — теперь телефоны могут распознавать реальные живые лица от статичных фото/масок по микроскопическим микродвижениям.
4. Синхронизация со умными устройствами — смарт-часы могут самостоятельно заблокировать мобильный телефон, если обладатель отошёл далеко.
5. Появляются смешанные механизмы — в частности комбинирующие речевую опознание + физиономию + пальцевой отпечаток.

Итак, которые тренды очень востребованы на сегодняшний день:

1) Сокращение компонентов

Производители стараются минимизировать размер выреза (“чёлки”) под сенсоры на дисплее за счёт встраивания компактных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на аппарате

Для повышения конфиденциальности всё более обработки данных выполняется внутри устройства без передачи данных во дополнительный облачный сервис.

3) Унификация стандартов

Гугл энергично пропагандирует эталон BiometricPrompt API, с целью чтобы такие площадки, как вулкан россия, и каждые Android-программы могли взаимодействовать с всеми формами биометрии единообразно.

Какое решить на сегодня?

Если вам всем важна максимальная защита информации, подбирайте передовые аппараты с вмонтированным ИК-излучателем или ToF-сенсором глубины.

• iPhone каждого последних поколений
• Huawei Partner/Series P ряда
• Mix Professional
• Vivo X серии
• Oppo Обнаружить X серий.

Если бюджет скромен – лучше предпочесть обычным способам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, применять только как опциональную опцию комфорта.

Каким образом увеличить практичность использования функции?

Есть некоторые лайфхаков для людей, кто уже применяет разблокировку через лицо:

1. Регулярно обновляйте свою изображение-шаблон, если сильно изменяется внешний вид.
2. Не упускайте из виду чистить объектив передней камеры – загрязнения могут снизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам включает фотоаппарат как только вы поднимаете его.
4. В процессе регистрационного процесса постарайтесь сохранять лицевую часть неподвижно перед камеры без значительного наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвели взгляд от экрана.

Будущее развития инноваций

В скоро наступающие времена можно предполагать возникновения полностью дистанционных способов опознания человека сразу по нескольким биометрическим данным параметрам одновременно: лицо + голос + походка + жесты рук!

Также возможно развитие современных методов защиты личной информации – к примеру, изменяющееся модификация цифрового образца после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых увлекательных технологий нашего времени! Она делает общение со смартфоном удобнее чем до этого, и такие программы, как vulkan russia, могут в разы оптимизировать ваш опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы понимаете, как устроена эта система в деталях, – сумеете вдумчиво определять свой будущий гаджет!