Каким образом функционирует идентификация лиц в смартфонах

Для чего мы останавливаемся на разблокирование по лицу

В последние годы определение физиономий является одной из самых распространённых опций для разблокировки умных телефонов. Еще пару годков назад основная масса использующих удовлетворялись пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением подобных технологий, например admiral x, нам достаточно просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Что делает данную особенность настолько популярной? Для начала, это комфортно: не нужно удерживать в памяти трудные пароли или отыскивать нужный палец в мраке. Кроме того, это мгновенно: современные программы распознают лицо фактически за мгновения ока. В-третью очередь, это чувство футуризма — будто в кинофильмах про admiral x зеркало шпионов.

Впрочем за такой видимой легкостью прячется целый вселенная сложных техник и инженерных концепций. Позвольте нам понять, как точно функционирует идентификация по лицу в актуальных смартфонах, какие бывают способы, насколько они безопасны и что нас ожидает в будущем.

Сжатая повествование эволюции технологии

Распознавание лиц как техника имеется уже более 50 годов. Начальные пробы автоматизированного исследования лиц были сделаны еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ умели лишь определять силуэты черепа и измерять дистанции между глазами и устами на монохромных изображениях.

Начальные бизнес платформы стали доступны в 1990-х годах, но они были несовершенны: работали медленно и часто ошибались. Только с эволюцией искусственных сетей и таких систем, как адмирал х, высокопроизводительных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным распознаванием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять личные разработки.

Ключевые стадии действия механизма определения

Процесс определения лица можно условно сегментировать на несколько ключевых этапов:

1. Идентификация лица — камера определяет присутствие людского лица в кадре.
2. Извлечение особенностей — механизм анализирует контуры физиономии: конфигурацию глаз, обонятельного органа, губ, позицию надбровных дуг.
3. Построение шаблона — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со стандартом — сформированный модель сопоставляется с зафиксированной при внесении биометрической информацией владельца.
5. Принятие решения — если соответствие достаточно существенное, смартфон разблокируется.

Всякий из этих стадий нуждается в специальных алгоритмов и улучшений для скорой работы прямо на устройстве.

Технические элементы: что прячется внутри

Стандартная фронтальная камера.

Простейший легкий способ идентификации облика применяет лишь переднюю камеру смартфона смартфона. Подобный способ осуществлён во многочисленных бюджетных вариантах Android-девайсов.

Положительные стороны:

• Не потребляет дополнительные сенсоров.
• Быстро функционирует при хорошем освещении.

Слабые стороны:

• Легко одурачить снимком или роликом.
• Неудачно работает при низком освещении или необычных углах обзора.

ИК камера и точечный проектор

Более усовершенствованные системы, такие как адмирал х, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология составляет базу Face ID от Apple.

Каким способом это работает:

• Точечный проектор показывает на лицо использующего невидимую решетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 пятен).
• Инфракрасная камера записывает искривление данной решетки по плоскости физиономии.
• Формируется 3D карта глубины, что практически неподвластна для подделки обычной снимком или маскировкой.

Преимущества

• Надёжная работа даже в полной тьме.
• Сильная устойчивость к подделкам.
• Точность распознавания выше 99%.

Дополнительные сенсорные устройства

В некоторых устройствах применяются также дополнительные датчики: ToF (Time-of-Flight), которые измеряют время движения луча до предмета и обратно; Трехцветные-датчики глубины; специальные оптические лидары для построения более аккуратной 3D-модели физиономии.

Эти разработки применяются в основном во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: синтетический интеллект в исполнении

Нынешние системы распознавания лиц невозможны при отсутствии эксплуатации artificial intelligence и machine learning. Именно из-за таким технологиям, как адмирал х, устройство способно узнавать пользователя даже при трансформациях внешности: новая стрижка, борода, оптика или макияж не становятся барьером для разблокировки.

Обнаружение физиономии

На стартовом шаге программа обязана мгновенно найти образ лица среди полного изображения с камеры. Для этого задействуются последовательные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые «обучены» находить лиц человека среди множества других объектов.

Пример: метод MTCNN может находить облик даже в случае неполном перекрытии (например, платком или ладонью).

Определение основных моментов

После распознавания лица система, такая как адмирал х, вычисляет расположение главных точек: уголки глаз, кончик носа, контуры губ и так далее. Часто применяется от 68 до 128 ключевых точек на лицевой области.

Это действие необходимо для нормализации картинки: если пользователь держит телефон под углом, или склонил голову, программа «выпрямляет» изображение до стандартного положения для дальнейшего анализа.

Создание биометрии модели

Далее нейронная сеть строит сжатое цифровое представление («эмбеддинг») внешности пользователя — своеобразный цифровой «отпечаток» лица длиной от 128 до 512 вещественных чисел.

Такой формат весьма затруднительно подделать: он не хранит само картинку пользователя, а лишь уникальные характеристики его вида, что делает его оптимальным для таких площадок, как admiral-x.

Сопоставление и принятие заключения

Если человек желает открыть телефон взглядом, программа осуществляет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный порог (обычно больше 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ запрещается.

Адаптация к трансформациям внешнего вида

Интересная характеристика современных систем — возможность самостоятельного обучения. Если ты часто доступаете к телефон с новой стрижкой или очками, программа постепенно модернизирует основной модель вашего внешности для увеличения точности действия без ухудшения безопасности.

Защита биометрических данных данных.

Множество пользователи опасаются хранить свои биометрические данные на смартфоне из-за риска потери данных или взлома устройства. Определенные фирмы, вроде admiral-x, предлагают решения для улучшения сохранности сведений юзеров.

• Локальное хранение: Преимущественно аппаратов сохраняет био-идентификационные образцы исключительно внутрь защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из аппарат и закрыты в том числе создателю.

• Шифрование: Все данные сберегаются только в шифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения сторонних разработчиков не обладают прямого возможности доступа к биометрическим; они могут лишь требовать факт подтверждения идентичности через системный API.

Следует упомянуть существенную особенность: если кто-либо сможет получить физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании реализуют защиту от «слепого» разблокирования — к примеру, просят открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют типы распознавания лиц?

На сегодняшний день можно выделить 3 ключевых метода к осуществлению этой задачи:

Программное двухмерное идентификация

Используется только фронтальная камера без дополнительных датчиков дистанции. Этот способ встречается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота воплощения; умеренная цена; оперативная работа при хорошем свете.
Минусы: легко одурачить фотографией; неустойчивая функционирование ночью; слабая защищенность.

Оборудование для объёмное сканирование

Применяет инфракрасную камеру + проекционный модуль пикселей + датчики дистанции (Face ID у Apple; подобные технологии у Huawei Mate).
Достоинства: значительная надежность; не получится обмануть изображение/видеозапись; постоянная функционирование при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана («чёлка»)

Гибридные подходы с дополнением ИИ

Применяют комбинацию программных методов + техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам («anti-spoofing»). Например, такие изделия, например адмирал х и Google Pixel Face Unlock последних поколений, комбинируют фронталку c ИК сенсором мобильности Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.

Иллюстрации применения разных техник

• iPhone линейки X/11/12/13/14 используют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 поддерживают как софтверное двухмерное идентификацию по снимку фронталкой, так и датчик радужки глаза.
• Huawei Mate20 Pro задействует систему из ИК-освещения + Dot Projector + ToF-датчик

Вопросы охраны и неверные тревоги

Несмотря на поразительный развитие инноваций за последние лет, безупречных системы пока не существует:

1. Шанс подвоха: Доступные телефоны без труда открываются высококачественной снимком пользователя или же роликом с экрана другого устройства.
2. Идентичные близнецы: Даже самые безупречные механизмы могут ошибиться между однояйцевыми близнецами либо родственниками с очень похожей внешностью.
3. Трансформации внешнего вида: Внезапное похудение/набор веса, косметические процедуры или повреждения в некоторых случаях необходимы для обновления данных биометрических данных.
4. Условия съёмки: Сильная освещённость солнцем либо плотная тень могут снизить точность распознавания признаков.

Ниже пара подсказок по надёжному использованию:

• Для критически важных операций всегда используйте дополнительную аутентификацию;
• Не запускайте опцию «Разблокировка по лицу» на недорогих моделях без ИК-сенсоров;
• Постоянно обновляйте прошивку прошивку телефона для защиты от современных угроз;
• Включайте функцию «Требовать раскрытых глаз» в тех местах, где она имеется.

В каких областях ещё находится применение технология кроме смартфонов?

Хотя предмет этой статьи посвящена именно портативным гаджетам, стоит упомянуть о других сферах применения технологии:

• Контроль прохода в рабочих помещениях и резиденциях;
• Платёжные устройства финансовых учреждений («Face Pay»);
• Виртуальные удостоверения личности нового образца;
• Комплексы видеоконтроля городских подразделений;
• Автоматизирование регистрации явки школ/институтов;
• Авторизация пользователей персональных компьютеров/ноутбуков.

Например: В городском метро уже испытывается система платежа проезда по фейсу («Face Pay») — хватит пройти через турникет без карты или телефона! Аналогичные проекты реализуются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом меняется технический процесс в нынешнее время?

Всякий год появляются современные идеи для повышения стандарта работы систем идентификации лиц:

1. Увеличивается чёткость датчиков — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше риск неточности;
2. Совершенствуются нейронные сети — новейшие архитектуры типа MobileNetV3 позволяют быстро обучаться новым характеристикам облика владельца напрямую на гаджете без отправки данных в облако.
3. Улучшаются методы антиспуфинга — теперь мобильные устройства умеют отличать настоящие живые облики от статичных снимков/масок по мельчайшим движениям кожи.
4. Взаимодействие со умными устройствами — интеллектуальные часы могут авто блокировать телефон, если обладатель ушёл далеко.
5. Проявляются гибридные механизмы — в частности совмещающие аудио аутентификацию + облик + отпечаток пальца.

Здесь, те направления в особенности востребованы в данный момент:

1) Сокращение элементов

Компании намереваются минимизировать размер выреза («чёлки») для датчики на дисплее за счёт интеграции компактных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения приватности всё больше обработки данных осуществляется на месте без передачи данных во дополнительный облачный сервис.

3) Стандартизация стандартов

Google энергично продвигает стандарт BiometricPrompt API, с целью чтобы подобные системы, например как admiral x, и каждые Android-программы могли работать с любыми видами биометрии единообразно.

Какое выбрать на сегодня?

В случае если тебе важна наивысшая защита информации, остановите выбор на флагманские устройства с интегрированным ИК-излучателем либо ToF-сенсором глубины.

• iPhone всех существующих последних поколений
• Huawei Companion/P линейки
• Mix Expert
• Vivo X серии
• Oppo Find Икс серии.

Если бюджет ограничен – лучше выбирать обычным методам защиты (PIN-код/сканер пальца), а опцию «разблокировка по лицу», такую как в admiral x, задействовать только как опциональную опцию удобства.

Каким способом улучшить удобство функционирования возможности?

Есть некоторые советов для тех, кто уже применяет разблокировку через лицо:

1. Регулярно меняйте свою фотографию-шаблон, если сильно меняется внешность.
2. Не пренебрегайте протирать линзу фронтальной камеры – загрязнения могут уменьшить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам включает фотоаппарат когда вы поднимаете его.
4. При регистрационного процесса старайтесь удерживать лицевую часть прямо перед камеры без резкого наклона головы.
5. Используйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвели взгляд от экрана.

Будущее развития инноваций

В ближайшие времена можно предвкушать появления полностью дистанционных способов идентификации индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + звучание + шаги + жесты рук!

Также вероятно возникновение свежих подходов обеспечения приватности – к примеру, динамическое изменение цифрового образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень увлекательных инноваций нашего периода! Она делает взаимодействие со смартфоном удобнее чем когда-либо прежде, и такие аппы, как admiral-x, могут существенно оптимизировать ваш опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы понимаете, как функционирует эта технология изнутри, – сумеете вдумчиво определять свой следующий гаджет!