Как функционирует идентификация лиц в мобильных устройствах

Почему мы выбираем разблокировку по фейсу

В прошлые годы распознавание лиц является одной из наиболее востребованных возможностей для разблокировки умных телефонов. Лишь некоторые годов ранее основная часть пользователей обходились пин-кодами, паролями или сканерами отпечатков пальцев. Но при появлением таких технологий, как Вулкан Платинум, нам достаточно лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Что обуславливает данную возможность настолько популярной? Для начала, это комфортно: не нужно запоминать замысловатые пароли или находить правильный палец в темноте. Кроме того, это мгновенно: современные системы распознают лицо практически за мгновения ока. В-третьих, это чувство футуризма — словно в кинолентах про vulkan platinum агентов.

Впрочем за данной на первый взгляд простотой таится целый универсум трудных технологий и инженерных концепций. Попробуем понять, как конкретно функционирует фейсканирование в актуальных гаджетах, какие существуют методы, насколько они безопасны и что нас ждёт впереди.

Сжатая повествование развития инноваций

Распознавание лиц как методика имеется уже более пятидесяти лет. Начальные эксперименты автоматического исследования лица были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда ЭВМ могли лишь определять контуры лица и определять промежутки между зрачками и губами на ахроматических изображениях.

Начальные коммерческие системы стали доступны в 90-х, но они были далеки от совершенства: функционировали медленно и часто ошибались. Только с прогрессом искусственных сетей и таких систем, как Vulkan Platinum, высокопроизводительных мобильных микросхем определение лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным идентификацией лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять свои решения.

Главные этапы работы системы определения

Процесс распознавания лица можно условно сегментировать на несколько основных этапов:

1. Распознавание лица — камера распознает существование людского образа в изображении.
2. Извлечение характеристик — система исследует особенности лица: форму зрительных органов, обонятельного органа, губ, позицию бровей.
3. Построение шаблона — создаётся уникальный цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со эталоном — полученный шаблон сверяется с записанной при внесении биометрической данными владельца.
5. Принятие определения — если сходство достаточно высокое, смартфон разблокируется.

Каждый из указанных стадий требует индивидуальных алгоритмов и улучшений для оперативной работы прямо на устройстве.

Технические элементы: что прячется внутри

Обычная фронтальная камера.

Простейший простой вариант распознавания облика применяет только переднюю камеру смартфона мобильного устройства. Данный подход внедрён во различных доступных моделях Android-девайсов.

Достоинства:

• Необходимо нуждается в дополнительных сенсоров.
• Шустро действует при качественном свете.

Отрицательные стороны:

• Легко одурачить изображением или видео.
• Неправильно работает при слабом освещении или необычных ракурсах.

ИК фотокамера и пунктирный проектор

Более совершенные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс лежит в основе Face ID от Apple.

Каким способом это работает:

• Точечный проектор показывает на лицо пользователя невидимую решетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 пятен).
• Инфракрасная камера регистрирует искривление данной сетки по плоскости физиономии.
• Создаётся 3D глубинная карта глубины, которая практически невозможна для подделки обычной фото или маской.

Преимущества

• Надёжная деятельность даже в полной неосвещённости.
• Большая сопротивляемость к подделкам.
• Точность определения выше 99%.

Дополнительные датчики

В некоторых девайсах задействуются также вспомогательные сенсоры: ToF (Time-of-Flight), которые фиксируют время прохождения луча до цели и обратно; Трехцветные-датчики дальности; специальные световые лидары для формирования более аккуратной 3D-модели физиономии.

Эти инновации используются чаще всего во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искусственный ум на исполнении

Современные механизмы идентификации лиц невозможны в отсутствие эксплуатации artificial intelligence и машинного обучения. Именно вследствие таким технологиям, как Vulkan Platinum, устройство в состоянии распознавать пользователя даже при изменениях облика: новая причёска, борода, оптика или косметика не становятся помехой для деблокировки.

Детектирование лица

На начальном этапе алгоритм обязана оперативно распознать ликовое изображение внутри всего кадра камеры. Для данной цели задействуются многоуровневые классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены находить лица людей среди множества других объектов.

Пример: метод MTCNN может обнаруживать физиономию даже с частичном перекрытии (например, шарфом или ладонью).

Идентификация важных точек

После обнаружения лица система, такая как Vulkan Platinum, устанавливает положение главных точек: края глаз, кончик носа, края губ и так далее. Часто применяется от 68 до 128 основных меток на лицевой области.

Это нужно для нормализации изображения: если юзер удерживает телефон под наклоненным, или наклонил голову, программа “выпрямляет” картинку до стандартного положения для последующего изучения.

Создание биометрического идентификатора образца

Далее нейронная сеть строит сжатое цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 флоатов.

Этот образец очень сложно подделать: он не удерживает само картинку пользователя, а лишь особенные особенности его вида, что делает его оптимальным для таких площадок, как Вулкан Казино Платинум.

Сравнение и осуществление заключения

Когда человек намеревается разблокировать мобильник глазами, механизм осуществляет все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый порог (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ не предоставляется.

Адаптация к трансформациям облика

Интересная особенность нынешних системы — возможность самостоятельного обучения. Если вы постоянно открываете смартфон с свежей стрижкой или оптикой, программа постепенно обновляет основной образец вашего облика для повышения точности работы без ухудшения безопасности.

Защита биометрических информации.

Многие юзеры боятся держать свои био-идентификационные данные на смартфоне из-за вероятности утечки информации или хакерской атаки. Иные фирмы, такие как Вулкан Казино Платинум, предоставляют методы для улучшения сохранности информации клиентов.

• Локальное сохранение: Преимущественно аппаратов хранит биометрические шаблоны лишь в пределах защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают гаджет и закрыты включая создателю.

• Шифрование: Все данные сохраняются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних девелоперов не имеют прямого возможности доступа к биометрическим данным; они могут лишь требовать факт подтверждения идентичности через системный API.

Необходимо упомянуть значимую подробность: в случае, если какой-то человек сможет получить физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители осуществляют защиту от автоматического разблокирования — к примеру, требуют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются категории распознавания лиц на изображениях?

В настоящее время можно выделить определить 3 основных подхода к выполнению этой задачи:

Программируемое 2D идентификация

Применяется только лицевая видеокамера без дополнительных сенсоров глубины. Такой метод используется наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость реализации; умеренная стоимость; быстрая работа при качественном освещении.
Минусы: просто обмануть фотографией; ненадежная работа ночью; слабая охрана.

Оборудование для объёмное сканирование

Использует инфракрасную видеокамеру + проектор точек + датчики глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Достоинства: значительная достоверность; нельзя обмануть фото/видео; стабильная деятельность при любом освещении.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с интеграцией ИИ

Используют комбинацию софтверных методов + аппаратную обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, например Vulkan Platinum и Google Pixel Face Unlock современных поколений, комбинируют фронтальную камеру c ИК датчиком мобильности Soli Radar для защиты от подделок руками/масками/видеоэкранами посторонних устройств.

Иллюстрации эксплуатации различных методов

• iPhone линейки X/11/12/13/14 задействуют только аппаратное трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые внедрил аналог Face ID в числе Android.
• Samsung Galaxy S10/S20 имеют как программное двухмерное идентификацию по снимку селфи-камерой, так и сканер ириса глаза.
• Huawei Mate20 Pro задействует комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Проблемы безопасности и ошибочные тревоги

Несмотря на впечатляющий прогресс технологий за недавние лет, совершенных системы пока не имеется:

1. Шанс мошенничества: Доступные телефоны просто доступны качественной фотографией пользователя или же видео с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые идеальные механизмы могут перепутать между однояйцевыми близнецами либо семьями с очень схожей внешностью.
3. Метаморфозы облика: Резкое снижение веса/увеличение массы тела, хирургические вмешательства или травмы порой необходимы для перерегистрации биометрических данных.
4. Условия фотографирования: Яркая подсветка солнечным светом или же глубокая тень могут уменьшить точность определения признаков.

Здесь пара рекомендаций по защищённому эксплуатации:

• Для важных операций всегда применяйте двухэтапную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
• Постоянно обновляйте прошивку прошивку телефона для защиты от актуальных атак;
• Включайте функцию “Требовать открытых глаз” там, где она есть.

Где ещё используется технологии помимо смартфонов?

Несмотря на то, что основная мысль этой работы посвящена именно смартфонам и планшетам, следует отметить прочих направлениях внедрения технологии:

• Мониторинг входа в рабочих помещениях и резиденциях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Цифровые удостоверения личности современного поколения;
• Комплексы видеоконтроля муниципальных служб;
• Механизация отслеживания посещаемости образовательных учреждений/вузов;
• Авторизация юзеров персональных компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система платежа проезда по лицу (“Face Pay”) — достаточно пройти через турникет без карты или телефона! Похожие проекты развиваются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом трансформируется технический процесс в нынешнее время?

Любой годочек появляются современные мысли для усовершенствования качества деятельности систем распознавания лиц:

1. Увеличивается разрешение сенсоров — чем больше информации фиксируется фотоаппаратом/датчиками глубины, тем меньше риск неточности;
2. Совершенствуются нейросети — передовые структуры вида MobileNetV3 позволяют оперативно обучаться свежим чертам внешности обладателя прямо на устройстве без пересылки информации в облачное хранилище.
3. Совершенствуются способы антиспуфинга — теперь телефоны умеют распознавать подлинные живые лица от неподвижных фотографий/маскировок по незаметным движениям кожи.
4. Взаимодействие со интеллектуальными приборами — интеллектуальные часы могут самостоятельно блокировать телефон, если владелец отошёл далеко.
5. Возникают смешанные системы — например объединяющие речевую идентификацию + облик + пальцевой отпечаток.

Вот, какие направления в особенности востребованы сейчас:

1) Миниатюризация компонентов

Производители пытаются сократить величину отверстия (“чёлки”) под датчики на дисплее за счёт внедрения компактных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для улучшения приватности всё более обработки данных происходит локально без пересылки информации во внешний облачный услугу.

3) Унификация стандартов

Google энергично продвигает норму BiometricPrompt API, чтобы подобные системы, вроде Вулкан Платинум, и каждые Android-программы могли работать с различными типами биометрии стандартизированно.

Какое подобрать на сегодня?

В случае если вам важна наивысшая сохранность информации, остановите выбор на флагманские устройства со встроенным ИК-проектором или ToF-сенсором глубины.

• iPhone каждого последних версий
• Huawei Companion/P Series ряда
• Mix Professional
• Vivo X модели
• Oppo Обнаружить X серии.

Если бюджет невелик – лучше предпочесть классическим способам защиты (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как опциональную возможность удобства.

Каким образом увеличить удобство работы функции?

Есть пара хитростей для людей, кто уже пользуется разблокировку по лицу:

1. Часто обновляйте свою фотографию-шаблон, если сильно изменяется внешний вид.
2. Не забывайте очищать линзу фронтальной камеры – пятна могут снизить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам запускает фотоаппарат если вы берёте его в руки.
4. В процессе регистрации пытайтесь удерживать лицо неподвижно впереди камеры без значительного наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отвели взгляд от дисплея.

Возможности развития технологии

В предстоящие годы можно предполагать возникновения полностью бесконтактных способов распознавания индивидуума сразу по нескольким биометрическим параметрам одновременно: физиономия + голос + манера ходьбы + движения рук!

Также предполагается возникновение свежих подходов защиты конфиденциальности – скажем, динамическое изменение цифрового паттерна после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень интересных технологий нашего времени! Она делает интеракцию со мобильным устройством комфортнее чем когда-либо прежде, и такие приложения, как Вулкан Казино Платинум, могут существенно повысить ваш опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как работает эта технология внутри, – будете в состоянии вдумчиво подбирать свой будущий девайс!