Каким способом работает определение лиц в мобильных устройствах

Зачем мы останавливаемся на разблокирование по фейсу

В прошлые годы идентификация лиц превратилось в одной из самых популярных опций для деблокировки мобильных телефонов. Еще несколько лет назад большинство использующих удовлетворялись PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением таких технологий, например Вулкан Платинум, нам вполне лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект обуславливает данную функцию такой востребованной? Для начала, это комфортно: не нужно помнить трудные пароли или находить нужный палец в мраке. Во-вторых, это оперативно: современные программы распознают лицо буквально за доли секунды. В-третьих, это впечатление футуристичности — словно в кинофильмах про вулкан платинум шпионов.

Тем не менее за такой на первый взгляд несложностью скрывается полный универсум комплексных технологий и инженерных решений. Попробуем понять, как конкретно действует фейсканирование в современных гаджетах, какие бывают технологии, насколько они надёжны и что нас предстоит.

Краткая история прогресса техники

Распознавание лиц как методика имеется уже более 50 лет. Начальные попытки машинного анализа лица были предприняты еще в 1960-х годы в научных учреждениях США. Тогда компьютеры могли лишь обозначать очертания черепа и измерять расстояния между зрачками и устами на черно-белых фотографиях.

Начальные торговые системы появились в 1990-х годах, но они были неидеальны: работали медленно и часто ошибались. Только с развитием синтетических сетей и таких площадок, как Vulkan Platinum, сильных мобильных чипов распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным распознаванием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и другие стали интегрировать свои решения.

Основные шаги действия устройства распознавания

Процесс определения лица можно примерно сегментировать на несколько важных этапов:

1. Обнаружение лица — аппарат выявляет присутствие гуманного образа в изображении.
2. Извлечение признаков — система исследует черты лица: конфигурацию глаз, обонятельного органа, уст, положение бровей.
3. Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с эталоном — полученный шаблон сверяется с сохранённой при учёте биометрической данными владельца.
5. Принятие выбора — если сходство достаточно существенное, смартфон разблокируется.

Любой из данных этапов требует индивидуальных процедур и усовершенствований для оперативной работы прямо на устройстве.

Железные составляющие: что скрыто внутри них

Обычная передняя камера.

Простейший несложный вариант определения лица задействует исключительно переднюю камеру смартфона смартфона. Такой способ внедрён во многочисленных доступных версиях Android-девайсов.

Сильные стороны:

• Необходимо нуждается в дополнительные датчиков.
• Шустро функционирует при качественном освещённости.

Слабые стороны:

• Легко обмануть фотографией или роликом.
• Неправильно работает при низком свете или нестандартных точках зрения.

ИК фотокамера и точечный проекционный аппарат

Более продвинутые системы, такие как Vulkan Platinum, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс лежит в основе Face ID от Apple.

Как это работает:

• Точечный проектор проецирует на физиономию пользователя невидимую решетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 меток).
• ИК камера записывает изменение формы данной сетки по поверхности лица.
• Получается трёхмерная карта глубинности, что почти неподвластна для имитации обычной снимком или маскировкой.

Преимущества

• Надёжная деятельность даже в полной неосвещённости.
• Большая сопротивляемость к фальсификациям.
• Точность идентификации более 99%.

Добавочные сенсоры

В отдельных устройствах используются также вспомогательные сенсоры: ToF (Time-of-Flight), которые измеряют период распространения света до предмета и обратно; Трехцветные-датчики дальности; специальные лазерные измерители расстояния для формирования более детализированной 3D-модели физиономии.

Эти разработки применяются наиболее часто во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искуственный интеллект на действии

Нынешние механизмы распознавания физиономий немыслимы в отсутствие применения artificial intelligence и машинного обучения. Именно вследствие таким технологиям, как Vulkan Platinum, аппарат в состоянии узнавать юзера даже при изменениях внешности: новая стрижка, растительность на лице, линзы или косметика не становятся препятствием для открытия.

Обнаружение лица

В начальном стадии система должна мгновенно обнаружить образ лица внутри всего изображения с камеры. Для данной цели применяются последовательные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены идентифицировать лиц человека среди множества других объектов.

Пример: алгоритм MTCNN способен обнаруживать лицо даже в случае частичном закрытии (например, платком или ладонью).

Определение ключевых моментов

После идентификации лица устройство, такая как Vulkan Platinum, вычисляет расположение главных точек: уголки глаз, верхушка носа, контуры губ и так далее. Часто применяется от 68 до 128 ключевых маркеров на лицевой области.

Это действие нужно для нормализации картинки: если юзер держит мобильник под наклоном, или наклонил головку, программа исправляет картинку до стандартного положения для дальнейшего анализа.

Формирование биометрического шаблона

Далее нейронная сеть строит сжатое цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след лица длиной от 128 до 512 чисел с плавающей запятой.

Этот шаблон крайне трудно имитировать: он не хранит само картинку пользователя, а лишь исключительные особенности его вида, что делает его оптимальным для таких платформ, как Вулкан Казино Платинум.

Сравнение и принятие заключения

В случае, когда юзер хочет разблокировать мобильник взглядом, механизм осуществляет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный границу (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ блокируется.

Приспособление к изменениям внешности

Занимательная черта актуальных систем — способность самостоятельного обучения. Если ты часто доступаете к телефон с обновленной прической или очками, система постепенно модернизирует основной образец вашего лица для повышения точности работы без снижения уровня безопасности.

Охрана биометрических информации.

Большинство клиенты беспокоятся хранить свои био-идентификационные данные на телефоне из-за угрозы утечки данных или хакерской атаки. Некоторые компании, например Вулкан Казино Платинум, предлагают решения для увеличения безопасности сведений клиентов.

• Локальное сохранение: Преимущественно аппаратов сохраняет био-идентификационные модели только внутри защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не покидают устройство и не доступны включая изготовителю.

• Шифрование: Все сведения хранятся только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы сторонних разработчиков не имеют прямого доступа к биометрическим; они могут лишь требовать подтверждение подтверждения идентичности через системный API.

Необходимо подчеркнуть значимую особенность: в случае, если кто-то сможет получить доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители внедряют систему защиты от неосознанного разблокирования — в частности, заставляют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются категории идентификации лиц на изображениях?

Сегодня можно выделить выделить три ключевых метода к выполнению этой функции:

Программируемое двухмерное определение

Используется только лицевая камера без экстра сенсоров дистанции. Этот способ используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота реализации; умеренная затраты; скоростная работа при хорошем освещении.
Минусы: легко обмануть фотографией; неустойчивая работа ночью; слабая охрана.

Оборудование для трёхмерное сканирование

Использует инфракрасную камеру + проекционный модуль пикселей + сенсоры дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Преимущества: значительная надёжность; невозможно исказить фото/видео; постоянная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные методы с ИИ-дополнением

Задействуют комбинацию программных методов + аппаратно-техническую обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие товары, как Vulkan Platinum и Google Pixel Face Unlock новейших версий, сочетают фронталку c инфракрасным датчиком движения Soli Radar для защиты от подделок руками/масками/видеодисплеями посторонних устройств.

Иллюстрации применения различных методов

• iPhone модели X/11/12/13/14 применяют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз внедрил подобие Face ID среди Android.
• Samsung Galaxy S10/S20 поддерживают как программное 2D распознавание по изображению фронталкой, так и сенсор ириса глаза.
• Huawei Mate20 Pro задействует набор из ИК-инфракрасного света + Dot Projector + ToF-датчик

Проблемы охраны и неверные сигналы

Несмотря на впечатляющий успехи технологий за последние годы, совершенных механизмов пока не наблюдается:

1. Шанс мошенничества: Бюджетные смартфоны без труда открываются качественной снимком пользователя или же видео с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные механизмы могут перепутать между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
3. Трансформации облика: Стремительное похудение/набор веса, косметические процедуры либо повреждения иногда необходимы для обновления данных биометрии.
4. Условия съёмки: Интенсивная подсветка солнечным светом либо плотная тень могут понизить верность определения признаков.

Вот некоторые рекомендаций по надёжному применению:

• Для значимых операций всегда применяйте дополнительную аутентификацию;
• Не активируйте возможность “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Постоянно апгрейдите программное обеспечение мобильного устройства для защиты от новых видов атак;
• Включайте настройку “Требовать распахнутых глаз” там, где она имеется.

В каких областях также находится применение технология помимо смартфонов?

Хотя предмет данной статьи сосредоточена на в частности мобильным устройствам, необходимо сказать о прочих направлениях внедрения технологии:

• Управление прохода в офисах и многоквартирных зданиях;
• Платёжные устройства банков (“Face Pay”);
• Цифровые паспорта последнего поколения;
• Комплексы видеонаблюдения городских подразделений;
• Механизация учёта посещаемости школ/институтов;
• Вход участников персональных компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система оплаты проезда по лицу (“Face Pay”) — хватит пройти через барьер без пластика или телефона! Схожие проекты реализуются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом изменяется технический процесс в наше время?

Каждый год проявляются свежие мысли для усовершенствования качества функционирования систем лицевого распознавания:

1. Увеличивается разрешение датчиков — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность ошибки;
2. Развиваются искусственные интеллекты — передовые структуры типа MobileNetV3 позволяют скоростно обучаться дополнительным особенностям внешности владельца напрямую на гаджете без пересылки информации в облачное хранилище.
3. Совершенствуются способы антиспуфинга — теперь смартфоны могут различать настоящие живые облики от неподвижных фотографий/маскировок по мельчайшим микродвижениям.
4. Синхронизация со умными устройствами — умные часы могут авто закрыть доступ к телефон, если владелец ушёл далеко.
5. Возникают смешанные системы — к примеру объединяющие аудио опознание + облик + отпечаток пальца.

Здесь, какие направления особенно популярны сейчас:

1) Миниатюризация элементов

Изготовители стараются уменьшить величину отверстия (“чёлки”) под датчики на дисплее за счёт встраивания миниатюрных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на аппарате

Для улучшения приватности всё больше расчётов происходит локально без отправки информации во сторонний облачный услугу.

3) Упорядочивание норм

Гугл энергично пропагандирует эталон BiometricPrompt API, для того чтобы такие системы, как Вулкан Платинум, и каждые Android-программы могли взаимодействовать с различными типами биометрии единообразно.

Что подобрать на сегодня?

В случае если вам необходима предельная сохранность данных, выбирайте передовые модели с интегрированным ИК-проектором или ToF-датчиком глубины.

• iPhone каждого новейших версий
• Huawei Mate/Series P ряда
• Mi Pro
• Vivo X модели
• Oppo Find X серий.

Если бюджет ограничен – лучше отдавать предпочтение традиционным способам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, задействовать только как опциональную возможность комфорта.

Каким образом повысить комфорт работы функции?

Есть несколько лайфхаков для пользователей, кто уже пользуется разблокировку по лицу:

1. Часто обновляйте свою фото-шаблон, если значительно трансформируется внешний вид.
2. Не пренебрегайте протирать объектив фронтальной камеры – пятна могут понизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам активирует фотоаппарат как только вы поднимаете его.
4. В процессе регистрации постарайтесь удерживать лицевую часть неподвижно перед объектива не допуская резкого наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отворачиваетесь от дисплея.

Возможности развития техники

В ближайшие периоды можно предвкушать возникновения полностью дистанционных способов распознавания персоны сразу по нескольким биометрическим данным параметрам одновременно: лицо + голос + шаги + манипуляции руками!

Также возможно появление новых методов обеспечения приватности – например, переменное модификация цифрового паттерна после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых захватывающих техник нашего времени! Она обеспечивает взаимодействие со мобильным устройством проще чем до этого, и такие приложения, как Вулкан Казино Платинум, могут существенно улучшить ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы осведомлены, как устроена эта система изнутри, – сможете вдумчиво определять свой будущий устройство!