Как действует распознавание лиц в смартфонах

Для чего мы останавливаемся на разблокировку по фейсу

В недавние годы идентификация лиц является одной из самых распространённых возможностей для открытия умных телефонов. Лишь пару лет ранее большинство юзеров довольствовались пин-кодами, паролями или датчиками отпечатков пальцев. Но при появлением подобных технологий, например Вулкан Платинум, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь обуславливает эту особенность очень нужной? Прежде всего, это практично: не нужно запоминать сложные пароли или искать правильный палец в мраке. Во-вторых, это оперативно: современные системы узнают лицо фактически за мгновение. В-третьих, это чувство будущего — будто в кинолентах про вулкан платинум разведчиков.

Однако за такой видимой несложностью таится целый мир комплексных методов и инженерных разработок. Попробуем исследовать, как конкретно действует распознавание лиц в новейших гаджетах, какие существуют способы, насколько они надёжны и что нас ждёт впереди.

Короткая повествование прогресса инноваций

Распознавание лиц как техника имеется уже более пятидесяти годов. Начальные пробы автоматизированного изучения лиц были предприняты еще в 1960-х годы в лабораториях США. Тогда компьютеры способны были лишь обозначать силуэты головы и вычислять расстояния между очами и устами на черно-белых фотографиях.

Изначальные бизнес установки стали доступны в девяностых годах, но они были неидеальны: действовали неспешно и часто ошибались. Только с эволюцией нейронных сетей и таких площадок, как Vulkan Platinum, высокопроизводительных мобильных процессоров распознавание лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным сканированием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять личные решения.

Главные стадии функционирования механизма определения

Процесс распознавания лица можно условно поделить на несколько ключевых этапов:

1. Идентификация лиц — устройство распознает присутствие гуманного образа в изображении.
2. Выделение признаков — алгоритм исследует черты физиономии: очертания зрительных органов, носа, губ, положение надбровных дуг.
3. Построение модели — создаётся неповторимый электронный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со образцом — созданный шаблон сверяется со сохранённой при внесении биометрической сведениями владельца.
5. Принятие определения — если соответствие достаточно существенное, смартфон разблокируется.

Любой из указанных этапов запрашивает специальных методов и улучшений для быстрой работы прямо на устройстве.

Технические компоненты: что находится в их недрах

Стандартная фронтальная камера.

Простейший простой способ определения лица использует исключительно лицевую камеру смартфона мобильного устройства. Данный метод осуществлён во многих бюджетных вариантах Android-устройств.

Положительные стороны:

• Необходимо нуждается в дополнительные сенсоров.
• Шустро функционирует при качественном освещённости.

Недостатки:

• Легко обмануть снимком или роликом.
• Неправильно работает при слабом свете или непривычных углах обзора.

Инфракрасная фотокамера и пунктирный проектор

Более усовершенствованные системы, такие как Vulkan Platinum, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика является основой Face ID от Apple.

Каким образом это работает:

• Точечный устройство проекции отображает на физиономию использующего невидимую сетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 меток).
• Инфракрасная устройство записывает деформацию этой решетки по поверхности физиономии.
• Создаётся трёхмерная карта глубины глубины, которая почти что неподвластна для фальсификации обычной фото или маской.

Выигрыши

• Надёжная деятельность даже в полной тьме.
• Сильная защита к имитациям.
• Точность определения более 99%.

Добавочные сенсорные устройства

В отдельных девайсах задействуются также вспомогательные датчики: ToF (Time-of-Flight), которые измеряют период прохождения луча до объекта и обратно; Трехцветные-датчики глубины; специальные оптические лидары для построения более точной 3D-модели физиономии.

Эти инновации применяются наиболее часто во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искуственный ум на действии

Текущие механизмы распознавания физиономий неосуществимы без применения artificial intelligence и machine learning. Именно из-за таким разработкам, как Vulkan Platinum, устройство может распознавать пользователя даже при метаморфозах внешности: новая стрижка, щетина, линзы или макияж не становятся барьером для открытия.

Распознавание лица

На начальном шаге система должна быстро найти ликовое изображение среди целого изображения с камеры. Для этого применяются последовательные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены находить лиц человека среди множества других объектов.

Пример: процесс MTCNN в состоянии находить лицо даже в случае неполном перекрытии (например, шарфом или рукой).

Определение основных моментов

После распознавания лица устройство, такая как Vulkan Platinum, устанавливает местоположение основных точек: уголки глаз, кончик носа, границы губ и так далее. Часто задействуется от 68 до 128 основных меток на лицевой поверхности.

Это действие нужно для стабилизации визуала: если пользователь находится с мобильник под наклоном, или склонил голову, программа корректирует изображение до стандартного положения для дальнейшего анализа.

Построение биометрии образца

Далее искусственная сеть строит сжатое математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Этот образец крайне трудно подделать: он не хранит непосредственно картинку юзера, а лишь исключительные черты его вида, что делает его оптимальным для таких платформ, как Вулкан Казино Платинум.

Сопоставление и вынесение решения

Когда человек хочет открыть мобильник взглядом, механизм воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный порог (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ не предоставляется.

Адаптация к трансформациям внешнего вида

Интересная черта актуальных систем — способность самостоятельного обучения. Если вы часто доступаете к смартфон с новой укладкой или оптикой, система постепенно модернизирует основной образец вашего внешности для повышения точности работы без ухудшения безопасности.

Защита биометрических данных информации.

Большинство пользователи боятся хранить свои биометрические данные на смартфоне из-за вероятности потери данных или хакерской атаки. Иные организации, такие как Вулкан Казино Платинум, предлагают методы для увеличения сохранности сведений пользователей.

• Локальное сбережение: Преимущественно девайсов хранит биометрические шаблоны только в пределах безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают гаджет и закрыты включая изготовителю.

• Шифрование: Все информация хранятся только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних разработчиков не имеют непосредственного доступа к биометрическим данным; они могут лишь запрашивать подтверждение подтверждения личности через системный API.

Необходимо отметить существенную подробность: в случае, если кто-то достанет доступ к вашему телефону физически (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители реализуют защиту от автоматического разблокирования — к примеру, просят разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют категории идентификации лиц на изображениях?

Сегодня можно определить выделить 3 основных метода к реализации этой операции:

Программное 2D определение

Используется только лицевая видеокамера без экстра сенсоров дистанции. Подобный способ встречается обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность реализации; умеренная стоимость; быстрая работа при хорошем свете.
Минусы: легко одурачить фотографией; неустойчивая деятельность ночью; недостаточная охрана.

Техническое трёхмерное оцифровка

Использует инфракрасную камеру + проектор пикселей + сенсоры дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Преимущества: большая надежность; не получится исказить фото/видео; стабильная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с дополнением ИИ

Применяют комбинацию программных методов + техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие товары, как Vulkan Platinum и Google Pixel Face Unlock последних версий, комбинируют фронталку c ИК сенсором мобильности Soli Radar для защиты от подделок жестами/масками/видеоэкранами чужих устройств.

Иллюстрации эксплуатации разнообразных способов

• iPhone модели X/11/12/13/14 применяют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз предложил подобие Face ID среди Android.
• Samsung Galaxy S10 версия/S20 обеспечивают как программное 2D идентификацию по изображению фронталкой, так и сканер глазного ириса.
• Huawei Mate20 Pro задействует комплекс из ИК-инфракрасного света + Dot Projector + ToF-датчик

Трудности охраны и неверные срабатывания

Несмотря на поразительный успехи инноваций за недавние лет, идеальных систем пока не существует:

1. Шанс обмана: Недорогие телефоны просто доступны четкой фотографией владельца или роликом с экрана другого устройства.
2. Идентичные близняшки: Даже самые идеальные устройства могут перепутать между однояйцевыми близнецами либо семьями с очень похожей внешностью.
3. Изменения облика: Стремительное похудение/набор веса, косметические процедуры или травмы иногда необходимы для перерегистрации биометрии.
4. Условия съёмки: Сильная засветка солнечным светом или плотная затенение могут снизить аккуратность определения признаков.

Ниже несколько рекомендаций для защищённому эксплуатации:

• Для важных операций всегда применяйте дополнительную аутентификацию;
• Не запускайте функцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Постоянно обновляйте прошивку ПО смартфона для предотвращения угроз от актуальных атак;
• Включайте опцию “Требовать распахнутых глаз” там, где она имеется.

Где дополнительно используется технология за исключением мобильных телефонов?

Пускай тема нашей публикации сосредоточена на именно смартфонам и планшетам, следует отметить прочих направлениях внедрения технологии:

• Мониторинг прохода в офисах и резиденциях;
• Платёжные терминалы банков (“Face Pay”);
• Виртуальные паспорта современного поколения;
• Системы видеоконтроля городских служб;
• Автоматизирование регистрации посещаемости учебных заведений/вузов;
• Аутентификация пользователей ПК/ноутбуков.

Например: В столичном метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — хватит пройти через барьер без карты или мобильника! Схожие проекты осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как изменяется технический процесс сегодня?

Любой годочек появляются современные мысли для усовершенствования уровня функционирования систем распознавания лиц:

1. Увеличивается разрешение сенсорных устройств — чем больше элементов фиксируется камерой/датчиками глубины, тем меньше вероятность погрешности;
2. Совершенствуются нейронные сети — новейшие структуры типа MobileNetV3 дают возможность оперативно осваивать дополнительным особенностям облика владельца прямо на устройстве без пересылки информации в облачное хранилище.
3. Развиваются методы антиспуфинга — теперь смартфоны могут отличать настоящие живые лица от фиксированных снимков/маскировок по микроскопическим микродвижениям.
4. Интеграция со смарт-гаджетами — смарт-часы могут авто блокировать мобильный телефон, если пользователь удалился на значительное расстояние.
5. Проявляются комбинированные механизмы — в частности объединяющие аудио идентификацию + облик + пальцевой отпечаток.

Здесь, какие тенденции очень популярны сейчас:

1) Миниатюризация деталей

Компании пытаются сократить габариты прорези (“чёлки”) под датчики на дисплее за счёт интеграции маленьких ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для увеличения конфиденциальности всё больше расчётов происходит локально без пересылки данных во внешний облачный сервис.

3) Стандартизация стандартов

Google активно пропагандирует норму BiometricPrompt API, чтобы аналогичные площадки, например как Вулкан Платинум, и любые Android-аппы были совместимы с различными типами биометрии стандартизированно.

Какое выбрать сегодня?

Когда тебе нужна максимальная сохранность информации, остановите выбор на передовые аппараты с интегрированным ИК-излучателем либо ToF-датчиком глубины.

• iPhone каждого актуальных версий
• Huawei Mate/Series P серии
• Mix Expert
• Vivo X модели
• Oppo Find X линейки.

Если бюджет ограничен – лучше отдавать предпочтение традиционным методам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как опциональную опцию удобства.

Каким способом повысить практичность функционирования функции?

Есть некоторые советов для людей, кто уже использует разблокировку по лицу:

1. Периодически меняйте свою изображение-шаблон, если значительно меняется внешний вид.
2. Не упускайте из виду очищать линзу передней камеры – пятна могут уменьшить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам запускает камеру когда вы берёте его в руки.
4. Во время регистрационного процесса старайтесь сохранять лицевую часть ровно перед объектива исключая сильного наклона головы.
5. Используйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отворачиваетесь от дисплея.

Перспективы прогресса инноваций

В предстоящие периоды можно предвкушать появления полностью безконтактных способов опознания человека сразу по нескольким биометрическим данным параметрам одновременно: лицо + звучание + манера ходьбы + жесты рук!

Также предполагается возникновение современных подходов охраны личной информации – к примеру, динамическое корректировка диджитал образца после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из очень увлекательных техник нашего периода! Она делает общение со смартфоном проще чем когда-либо прежде, и такие приложения, как Вулкан Казино Платинум, могут в разы повысить ваш опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как работает эта методика внутри, – будете в состоянии более осмысленно подбирать свой следующий девайс!