Как работает идентификация лиц в телефонах

Почему мы выбираем разблокирование по лицевому распознаванию

В прошлые годы распознавание физиономий превратилось в одной из самых распространённых функций для разблокировки смартфонов. Лишь несколько лет назад основная часть использующих удовлетворялись пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, как вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект делает эту возможность такой востребованной? Во-первых, это комфортно: не нужно удерживать в памяти сложные пароли или отыскивать верный палец в темноте. Во-вторых, это мгновенно: современные программы распознают лицо буквально за доли секунды. В-третью очередь, это чувство футуристичности — словно в фильмах про казино вулкан разведчиков.

Впрочем за этой видимой несложностью скрывается полный вселенная сложных методов и инженерных разработок. Давайте понять, как точно действует фейсканирование в новейших смартфонах, какие бывают методы, насколько они безопасны и что нас ждёт впереди.

Краткая история прогресса технологии

Идентификация лиц как технология имеется уже более 50 лет. Начальные попытки автоматического исследования лица были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда ЭВМ способны были лишь выделять силуэты лица и определять расстояния между зрачками и губами на монохромных снимках.

Изначальные бизнес платформы появились в девяностых годах, но они были несовершенны: действовали неспешно и часто давали сбои. Только с эволюцией нейронных сетей и таких платформ, как вулкан россии, мощных мобильных чипов идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным распознаванием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие стали интегрировать личные разработки.

Основные шаги функционирования системы идентификации

Процесс определения лица можно условно разделить на несколько важных этапов:

1. Распознавание лиц — камера выявляет наличие гуманного образа в снимке.
2. Извлечение характеристик — механизм изучает особенности физиономии: очертания зрительных органов, носа, уст, расположение надбровных дуг.
3. Построение модели — создаётся неповторимый виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со эталоном — созданный образец сверяется со записанной при учёте биометрической сведениями владельца.
5. Принятие решения — если совпадение достаточно существенное, смартфон деблокируется.

Любой из этих стадий запрашивает индивидуальных процедур и улучшений для скорой работы прямо на устройстве.

Железные элементы: что скрыто в их недрах

Обычная фронтальная камера.

Самый легкий способ определения лица использует лишь фронтальную камеру смартфона. Такой способ осуществлён во различных доступных вариантах Android-девайсов.

Положительные стороны:

• Не нуждается в потребляет внешних сенсоров.
• Шустро действует при достаточном освещении.

Недостатки:

• Несложно обмануть снимком или роликом.
• Плохо действует при низком свете или нестандартных точках зрения.

ИК камера и точечный проекционный аппарат

Более продвинутые системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс лежит в основе Face ID от Apple.

Как это функционирует:

• Точечный проекционный прибор отображает на лицо юзера невидимую решетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 меток).
• ИК устройство записывает искривление данной сетки по поверхности лица.
• Получается трёхмерная глубинная карта глубины, которая практически неподвластна для фальсификации стандартной снимком или маской.

Преимущества

• Надёжная деятельность даже в полной неосвещённости.
• Высокая защита к фальсификациям.
• Точность распознавания выше 99%.

Добавочные сенсорные устройства

В определённых устройствах используются также дополнительные датчики: ToF (Time-of-Flight), которые фиксируют время движения луча до цели и обратно; Трехцветные-датчики глубины; специальные световые измерители расстояния для создания более аккуратной 3D-модели лица.

Эти разработки применяются наиболее часто во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искусственный интеллект в исполнении

Современные устройства опознания лиц неосуществимы в отсутствие использования artificial intelligence и машинного обучения. Именно благодаря таким технологиям, как вулкан россии, устройство способно распознавать пользователя даже при метаморфозах облика: новая стрижка, борода, оптика или грим не становятся барьером для разблокировки.

Детектирование физиономии

При начальном этапе система должна мгновенно распознать лицо среди всего кадра с камеры. Для этой задачи применяются каскадные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые “обучены” распознавать лиц человека среди множества других объектов.

Пример: процесс MTCNN способен распознавать лицо даже при неполном перекрытии (например, платком или рукой).

Идентификация основных аспектов

После идентификации лица система, такая как вулкан россии, вычисляет местоположение главных точек: кончики глаз, верхушка носа, границы губ и так далее. Как правило задействуется от 68 до 128 главных меток на лицевой поверхности.

Данное требуется для нормализации визуала: если юзер находится с телефон под наклоном, или склонил головку, программа корректирует картинку до нормального состояния для последующего изучения.

Создание биометрического модели

Далее нейронная сеть строит уплотненное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Этот образец очень затруднительно имитировать: он не сохраняет само изображение пользователя, а лишь особенные черты его вида, что делает его идеальным для таких площадок, как vulkan russia.

Сравнение и принятие заключения

Если человек хочет разблокировать телефон взором, механизм повторяет все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный границу (обычно превышает 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ запрещается.

Привыкание к метаморфозам облика

Занимательная характеристика нынешних системы — способность самостоятельного обучения. Если ты часто доступаете к смартфон с обновленной прической или очками, программа постепенно освежает эталонный шаблон вашего лица для повышения точности работы без ухудшения безопасности.

Защита биометрии информации.

Многие юзеры боятся сохранять свои био-идентификационные данные на смартфоне из-за вероятности потери данных или взлома устройства. Иные компании, такие как vulkan russia, предоставляют варианты для повышения защиты информации пользователей.

• Локальное сбережение: Большинство устройств хранит биометричные образцы лишь внутрь защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают устройство и закрыты в том числе производителю.

• Шифрование: Все сведения сберегаются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения внешних девелоперов не имеют непосредственного возможности доступа к биометрическим; они могут лишь запрашивать подтверждение подтверждения идентичности через системный API.

Необходимо упомянуть значимую деталь: в случае, если кто-то достанет доступ к вашему телефону физически (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство компании реализуют защиту от “слепого” разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют типы идентификации лиц?

В настоящее время можно определить выделить 3 ключевых способа к выполнению этой операции:

Софтверное плоское определение

Эксплуатируется только фронтальная камера без дополнительных датчиков глубины. Подобный подход наблюдается обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость реализации; минимальная стоимость; оперативная работа при качественном свете.
Минусы: несложно ввести в заблуждение снимком; нестабильная работа ночью; низкая охрана.

Аппаратное трёхмерное сканирование

Задействует ИК видеокамеру + проектор точек + датчики дистанции (Face ID у Apple; аналогичные решения у Huawei Mate).
Преимущества: высокая достоверность; нельзя исказить изображение/видеозапись; стабильная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с дополнением ИИ

Применяют комбинацию программных методов + техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, например вулкан россии и Google Pixel Face Unlock новейших поколений, комбинируют фронтальную камеру c ИК сенсором мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Примеры применения разных техник

• iPhone линейки X/11/12/13/14 задействуют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз внедрил эквивалент Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 поддерживают как софтверное 2D распознавание по фото фронталкой, так и сканер ириса глаза.
• Huawei Mate20 Pro использует систему из ИК-освещения + Dot Projector + ToF-сенсор

Проблемы безопасности и неверные срабатывания

Несмотря на впечатляющий развитие инноваций за последние лет, идеальных механизмов пока не существует:

1. Шанс обмана: Бюджетные смартфоны без труда доступны качественной фотографией хозяина или видео с экрана другого устройства.
2. Идентичные близняшки: Даже самые идеальные устройства могут спутать между монозиготными близнецами либо семьями с очень схожей внешностью.
3. Метаморфозы внешнего вида: Внезапное утрата веса/увеличение массы тела, косметические процедуры либо повреждения порой требуют повторной регистрации биометрических данных.
4. Условия съёмки: Интенсивная подсветка солнцем либо глубокая темнота могут понизить аккуратность определения признаков.

Здесь некоторые подсказок для безопасному применению:

• Для критически важных операций всегда используйте дополнительную аутентификацию;
• Не запускайте возможность “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
• Систематически апгрейдите программное обеспечение мобильного устройства для предотвращения угроз от новых видов атак;
• Включайте опцию “Требовать распахнутых глаз” везде, где она имеется.

В каких областях ещё находится применение технология помимо мобильных телефонов?

Несмотря на то, что предмет нашей работы сосредоточена на конкретно портативным гаджетам, необходимо сказать о других сферах применения технологии:

• Мониторинг прохода в деловых центрах и резиденциях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Цифровые удостоверения личности нового образца;
• Системы видеоконтроля муниципальных служб;
• Механизация учёта присутствия школ/университетов;
• Аутентификация участников ПК/ноутбуков.

Например: В городском метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без пластика или телефона! Аналогичные программы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом трансформируется технический процесс в нынешнее время?

Всякий год возникают новые концепции для повышения уровня работы систем идентификации лиц:

1. Увеличивается чёткость сенсорных устройств — чем больше деталей фиксируется фотоаппаратом/датчиками глубины, тем меньше риск ошибки;
2. Улучшаются искусственные интеллекты — передовые структуры модели MobileNetV3 обеспечивают возможность скоростно осваивать новым особенностям вида владельца непосредственно на девайсе без отправки данных в облако.
3. Развиваются методы антиспуфинга — теперь мобильные устройства умеют распознавать подлинные живые лица от неподвижных снимков/маскировок по микроскопическим микродвижениям.
4. Синхронизация со умными устройствами — смарт-часы могут самостоятельно закрыть доступ к смартфон, если пользователь ушёл далеко.
5. Проявляются комбинированные механизмы — в частности объединяющие аудио идентификацию + облик + отпечаток пальца.

Здесь, какие тенденции в особенности популярны в данный момент:

1) Сокращение элементов

Изготовители стараются уменьшить размер отверстия (“чёлки”) для сенсоры на экране за счёт внедрения миниатюрных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Переработка прямо на устройстве

Для улучшения личной безопасности всё больше обработки данных происходит внутри устройства без отправки данных во дополнительный облачный сервис.

3) Упорядочивание регламентов

Google интенсивно продвигает эталон BiometricPrompt API, с целью чтобы такие платформы, как вулкан россия, и каждые Android-программы были совместимы с различными типами биометрии унифицированно.

Какое решить на сегодня?

Если тебе нужна максимальная сохранность информации, остановите выбор на передовые модели со встроенным ИК-проектором либо ToF-датчиком глубины.

• iPhone каждого последних версий
• Huawei Companion/P Series линейки
• Mi Expert
• Vivo X линейки
• Оппо Найти Х линейки.

Если бюджет скромен – лучше предпочесть традиционным методам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, задействовать только как дополнительную возможность удобства.

Как повысить практичность функционирования опции?

Есть пара хитростей для пользователей, кто уже пользуется разблокировку через лицо:

1. Периодически обновляйте свою фото-шаблон, если значительно трансформируется внешность.
2. Не пренебрегайте очищать линзу фронтальной камеры – пятна могут понизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам запускает фотоаппарат как только вы поднимаете его.
4. При записи пытайтесь сохранять лицо прямо впереди объектива без резкого наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвернулись от дисплея.

Будущее прогресса техники

В скоро наступающие годы можно предвкушать возникновения полностью бесконтактных способов идентификации персоны сразу по нескольким биометрическим параметрам одновременно: лицо + речь + походка + манипуляции руками!

Также предполагается возникновение свежих методов обеспечения приватности – например, динамическое корректировка электронного шаблона после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из самых увлекательных инноваций нашего периода! Она делает интеракцию со смартфоном проще чем до этого, и такие аппы, как vulkan russia, могут значительно улучшить ваш юзерский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы осведомлены, как работает эта система изнутри, – сумеете более осмысленно подбирать свой будущий устройство!