Как действует определение лицевых образов в мобильных устройствах

Зачем мы предпочитаем разблокировку по фейсу

В прошлые времена идентификация лиц является одной из самых распространённых возможностей для открытия мобильных телефонов. Еще несколько лет назад большинство пользователей обходились PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, как Вулкан Платинум, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Что делает данную возможность такой востребованной? Для начала, это удобно: не нужно помнить сложные пароли или искать правильный палец в мраке. Также, это оперативно: современные программы распознают лицо фактически за доли секунды. В-третью очередь, это впечатление футуризма — как будто в фильмах про вулкан платинум зеркало шпионов.

Впрочем за данной видимой легкостью прячется весь мир комплексных техник и инженерных разработок. Давайте разобраться, как конкретно функционирует идентификация по лицу в новейших гаджетах, какие бывают методы, насколько они безопасны и что нас предстоит.

Короткая хроника развития технологии

Распознавание лиц как методика присутствует уже более 50 годов. Изначальные пробы автоматического исследования лица были осуществлены еще в 1960-х годах в лабораториях США. Тогда компьютеры могли лишь выделять контуры лица и определять расстояния между зрачками и устами на черно-белых изображениях.

Первые торговые системы возникли в девяностых годах, но они были далеки от совершенства: функционировали медленно и часто ошибались. Только с развитием синтетических сетей и таких систем, как Vulkan Platinum, сильных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным распознаванием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали внедрять свои решения.

Основные этапы функционирования устройства идентификации

Процесс идентификации лица можно ориентировочно сегментировать на несколько важных этапов:

1. Обнаружение лица — аппарат распознает существование человеческого лица в изображении.
2. Определение особенностей — механизм анализирует контуры облика: очертания глаз, обонятельного органа, уст, позицию надбровных дуг.
3. Построение модели — создаётся неповторимый электронный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с стандартом — созданный модель сверяется со записанной при учёте биометрической сведениями владельца.
5. Принятие выбора — если совпадение достаточно значительное, смартфон разблокируется.

Любой из данных этапов нуждается в специальных методов и оптимизаций для скорой работы непосредственно на девайсе.

Аппаратные составляющие: что скрыто внутри них

Типичная передняя камера.

Наиболее легкий способ идентификации физиономии применяет лишь фронтальную камеру смартфона смартфона. Данный способ осуществлён во многих доступных версиях Android-девайсов.

Положительные стороны:

• Необходимо требует дополнительных сенсоров.
• Быстро действует при достаточном свете.

Минусы:

• Легко одурачить фотографией или видеозаписью.
• Неудачно функционирует при низком свете или нестандартных ракурсах.

Инфракрасная фотокамера и точечный проекционный аппарат

Более продвинутые системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс составляет базу Face ID от Apple.

Каким способом это работает:

• Точечный проектор показывает на лицо использующего невидимую сетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 пятен).
• Инфракрасная камера записывает искривление данной сетки по поверхности физиономии.
• Формируется трёхмерная карта глубинности, которая почти что невозможна для подделки стандартной снимком или маской.

Преимущества

• Надёжная функционирование даже в полной тьме.
• Высокая сопротивляемость к подделкам.
• Точность идентификации более 99%.

Добавочные сенсорные устройства

В некоторых девайсах задействуются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые измеряют период распространения луча до цели и обратно; RGB-датчики глубины; специальные лазерные дальномеры для построения более аккуратной 3D-модели физиономии.

Эти технологии применяются в основном во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искуственный разум в действии

Современные системы распознавания лиц немыслимы без использования artificial intelligence и машинного обучения. Именно из-за таким разработкам, как Vulkan Platinum, аппарат может узнавать пользователя даже при изменениях облика: новая причёска, растительность на лице, оптика или макияж не становятся барьером для разблокировки.

Детектирование лица

На стартовом этапе алгоритм должна быстро распознать лицо среди целого кадра с камеры. Для данной цели используются каскадные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые “обучены” находить лиц человека среди множества других объектов.

Пример: метод MTCNN в состоянии находить физиономию даже с частичном закрытии (например, платком или ладонью).

Выделение ключевых аспектов

После обнаружения лица система, такая как Vulkan Platinum, устанавливает местоположение основных точек: края глаз, верхушка носа, границы губ и так далее. Часто применяется от 68 до 128 главных точек на лице.

Это требуется для нормализации визуала: если юзер находится с смартфон под углом, или склонил голову, программа “выпрямляет” картинку до стандартного положения для дальнейшего анализа.

Построение биометрического шаблона

Далее нейросеть строит уплотненное цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 вещественных чисел.

Такой формат весьма затруднительно подделать: он не хранит само картинку пользователя, а лишь уникальные характеристики его вида, что делает его совершенным для таких систем, как Вулкан Казино Платинум.

Сравнительный анализ и вынесение выбора

Если человек намеревается разблокировать телефон взглядом, система осуществляет все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный границу (обычно превышает 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ не предоставляется.

Адаптация к изменениям внешнего вида

Интересная черта актуальных системы — возможность самообучения. Если вы часто доступаете к смартфон с новой стрижкой или оптикой, программа постепенно обновляет базовый модель вашего внешности для улучшения точности функционирования без снижения уровня безопасности.

Защита биометрии информации.

Многие пользователи опасаются сохранять свои биометрические данные на смартфоне из-за риска утечки информации или хакерской атаки. Определенные организации, такие как Вулкан Казино Платинум, предоставляют варианты для повышения защиты данных юзеров.

• Локальное хранение: Основная часть устройств сохраняет биометричные модели исключительно внутри защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают аппарат и закрыты в том числе создателю.

• Шифрование: Все сведения хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения внешних девелоперов не обладают непосредственного доступа к биометрическим данным; они могут лишь запрашивать факт верификации личности через системный API.

Стоит подчеркнуть существенную деталь: если какой-то человек получит доступ к вашему телефону физически (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство производители осуществляют систему защиты от неосознанного разблокирования — в частности, заставляют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают типы определения лиц на изображениях?

На сегодняшний день можно выделить различить три основных подхода к осуществлению этой функции:

Софтверное двухмерное определение

Эксплуатируется только фронтальная камера без экстра сенсоров дистанции. Такой метод используется чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность воплощения; минимальная цена; быстрая работа при достаточном свете.
Минусы: несложно обмануть снимком; нестабильная работа ночью; низкая защищенность.

Техническое объёмное сканирование

Задействует инфракрасную видеокамеру + проекционный модуль пикселей + сенсоры дистанции (Face ID от Apple; аналогичные технологии у Huawei Mate).
Преимущества: высокая надёжность; невозможно подделать изображение/видеозапись; устойчивая деятельность в любых условиях освещения.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с дополнением ИИ

Применяют комбинацию софтверных методов + техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как Vulkan Platinum и Google Pixel Face Unlock новейших версий, сочетают фронталку c ИК датчиком движения Soli Radar для предотвращения от подделок руками/масками/видеоэкранами чужих устройств.

Иллюстрации применения разнообразных методов

• iPhone линейки X/11/12/13/14 используют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз предложил подобие Face ID среди Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как программное обеспечение 2D определение по изображению фронтальной камерой, так и датчик радужки глаза.
• Huawei Mate20 Pro использует комплекс из ИК-освещения + Dot Projector + ToF-датчик

Проблемы охраны и ложные срабатывания

Несмотря на замечательный успехи инноваций за недавние годы, безупречных системы пока не существует:

1. Шанс мошенничества: Бюджетные телефоны легко доступны четкой снимком владельца или же роликом с экрана другого устройства.
2. Идентичные близнецы: Даже самые совершенные механизмы могут спутать между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
3. Изменения внешнего вида: Стремительное похудение/увеличение массы тела, пластические операции или травмы в некоторых случаях необходимы для повторной регистрации биометрии.
4. Условия фотографирования: Сильная подсветка солнцем или же интенсивная затенение могут снизить точность определения признаков.

Здесь пара советов для надёжному применению:

• Для критически важных операций всегда внедряйте двухэтапную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Регулярно обновляйте ПО мобильного устройства для обеспечения безопасности от новых видов атак;
• Включайте функцию “Требовать открытых глаз” везде, где она доступна.

В каких областях ещё используется технология за исключением смартфонов?

Хотя основная мысль данной работы посвящена конкретно смартфонам и планшетам, необходимо сказать о прочих направлениях внедрения технологии:

• Контроль прохода в деловых центрах и многоквартирных зданиях;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Электронные паспорта современного образца;
• Системы видеонаблюдения муниципальных сервисов;
• Автоматизация учёта посещаемости школ/институтов;
• Вход участников персональных компьютеров/ноутбуков.

Например: В городском метро уже тестируется система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без карты или телефона! Аналогичные проекты развиваются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом меняется техпроцесс сегодня?

Каждый год проявляются новые концепции для повышения стандарта функционирования систем распознавания лиц:

1. Увеличивается разрешение сенсоров — чем больше элементов фиксируется фотоаппаратом/глубинными сенсорами, тем меньше риск погрешности;
2. Совершенствуются нейронные сети — передовые конструкции типа MobileNetV3 дают возможность скоростно обучаться свежим чертам вида обладателя напрямую на гаджете без отправки данных в облако.
3. Улучшаются технологии антиспуфинга — теперь телефоны могут распознавать реальные движущиеся лица от фиксированных фото/масок по мельчайшим микродвижениям.
4. Синхронизация со смарт-гаджетами — смарт-часы могут автоматически заблокировать телефон, если обладатель отошёл далеко.
5. Возникают комбинированные системы — к примеру комбинирующие голосовую аутентификацию + лицо + дактилоскопический след.

Вот, те тренды особенно популярны в данный момент:

1) Сокращение элементов

Производители намереваются сократить величину прорези (“чёлки”) под сенсоры на дисплее за счёт встраивания маленьких ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на аппарате

Для улучшения приватности всё более расчётов осуществляется внутри устройства без передачи данных во внешний облачный сервис.

3) Унификация норм

Гугл активно продвигает стандарт BiometricPrompt API, чтобы такие платформы, вроде Вулкан Платинум, и любые Android-аппы были совместимы с всеми формами биометрии единообразно.

Что выбрать сегодня?

Если вам необходима наивысшая безопасность информации, остановите выбор на топовые модели с интегрированным ИК-излучателем или ToF-датчиком глубины.

• iPhone всех новейших версий
• Huawei Companion/Series P серии
• Mix Pro
• Vivo X серии
• Oppo Обнаружить Икс линейки.

Если бюджет скромен – лучше предпочесть традиционным способам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в Вулкан Платинум, задействовать только как второстепенную возможность удобства.

Каким способом увеличить практичность функционирования опции?

Есть пара советов для пользователей, кто уже применяет разблокировку через лицо:

1. Периодически обновляйте свою фотографию-шаблон, если значительно меняется облик.
2. Не забывайте чистить линзу фронтальной камеры – пятна могут снизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам активирует фотоаппарат как только вы берёте его в руки.
4. Во время регистрации старайтесь держать лицевую часть прямо перед видеоустройства без сильного наклона головы.
5. Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвели взгляд от дисплея.

Будущее развития техники

В ближайшие времена можно предвкушать появления полностью дистанционных способов идентификации индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + речь + походка + жесты рук!

Также предполагается развитие новых подходов охраны конфиденциальности – к примеру, динамическое корректировка электронного шаблона после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – единственная из самых увлекательных инноваций нашего эпохи! Она обеспечивает взаимодействие со смартфоном удобнее чем до этого, и такие аппы, как Вулкан Казино Платинум, могут существенно повысить ваш юзерский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как функционирует эта методика внутри, – будете в состоянии более осмысленно определять свой следующий девайс!