Каким образом функционирует определение лиц в мобильных устройствах

Для чего мы останавливаемся на разблокирование по фейсу

В прошлые времена распознавание физиономий превратилось в одной из самых популярных опций для разблокировки смартфонов. Всего несколько годков ранее большинство пользователей довольствовались пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но с появлением таких технологий, например Вулкан Платинум, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Что превращает данную особенность такой востребованной? Прежде всего, это комфортно: не нужно помнить сложные пароли или искать нужный палец в темноте. Также, это мгновенно: современные системы идентифицируют лицо фактически за доли секунды. В-третьих, это впечатление футуризма — будто в кинофильмах про вулкан платинум разведчиков.

Однако за этой кажущейся несложностью скрывается полный вселенная сложных технологий и инженерных разработок. Позвольте нам понять, как конкретно работает распознавание лиц в актуальных гаджетах, какие бывают методы, насколько они защищены и что нас ждёт впереди.

Короткая хроника прогресса технологии

Распознавание лиц как техника присутствует уже более 50 лет. Начальные пробы машинного изучения лиц были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда вычислительные машины могли лишь обозначать очертания лица и вычислять дистанции между глазами и губами на монохромных фотографиях.

Начальные бизнес системы стали доступны в 90-х, но они были далеки от совершенства: работали медленно и часто давали сбои. Только с эволюцией искусственных сетей и таких систем, как Vulkan Platinum, высокопроизводительных мобильных чипов определение лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным распознаванием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять личные решения.

Главные шаги действия системы идентификации

Процесс идентификации лица можно ориентировочно сегментировать на несколько основных этапов:

1. Распознавание лиц — аппарат выявляет присутствие человеческого образа в кадре.
2. Извлечение особенностей — система изучает черты физиономии: форму зрительных органов, носа, губ, позицию надбровных дуг.
3. Построение структуры — создаётся особенный цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с эталоном — сформированный модель сравнивается со зафиксированной при внесении биометрической сведениями владельца.
5. Принятие определения — если совпадение достаточно существенное, смартфон разблокируется.

Любой из этих стадий требует специальных алгоритмов и усовершенствований для оперативной работы непосредственно на девайсе.

Аппаратные компоненты: что скрыто в их недрах

Типичная селфи камера.

Самый простой легкий вариант распознавания физиономии применяет исключительно переднюю видеокамеру мобильного устройства. Данный метод внедрён во многих недорогих версиях Android-девайсов.

Сильные стороны:

• Необходимо нуждается в дополнительных датчиков.
• Оперативно функционирует при хорошем свете.

Отрицательные стороны:

• Легко ввести в заблуждение снимком или видеозаписью.
• Неправильно функционирует при низком освещённости или нестандартных углах обзора.

ИК камера и точечный проектор

Более совершенные системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика лежит в основе Face ID от Apple.

Каким образом это работает:

• Точечный устройство проекции отображает на облик пользователя невидимую сетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 точек).
• Инфракрасная камера записывает искривление данной решетки по поверхности лица.
• Формируется 3D глубинная карта глубинности, что почти что неосуществима для имитации стандартной снимком или маской.

Достоинства

• Надёжная функционирование даже в полной тьме.
• Высокая сопротивляемость к имитациям.
• Точность распознавания свыше 99%.

Добавочные сенсоры

В некоторых устройствах задействуются также экстра сенсоры: ToF (Time-of-Flight), которые фиксируют период движения луча до объекта и обратно; Трехцветные-датчики глубины; специальные лазерные лидары для создания более точной 3D-модели физиономии.

Эти технологии применяются наиболее часто во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: искуственный разум в действии

Текущие устройства опознания лиц невозможны в отсутствие применения искусственного интеллекта и machine learning. Именно вследствие таким технологиям, как Vulkan Platinum, аппарат в состоянии распознавать юзера даже при трансформациях внешнего вида: новая стрижка, растительность на лице, очки или грим не становятся помехой для деблокировки.

Детектирование физиономии

При стартовом стадии система должна мгновенно распознать ликовое изображение внутри всего кадра камеры. Для этого задействуются каскадные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые натренированы находить лица людей среди множества других объектов.

Пример: процесс MTCNN может обнаруживать физиономию даже с неполном перекрытии (например, шалью или рукой).

Выделение ключевых моментов

После распознавания лица система, такая как Vulkan Platinum, устанавливает расположение основных точек: кончики глаз, кончик носа, края губ и так далее. Как правило применяется от 68 до 128 ключевых точек на лицевой поверхности.

Это действие нужно для стабилизации визуала: если юзер держит мобильник под углом, или повернул головку, программа исправляет картинку до стандартного положения для дальнейшего анализа.

Создание биометрии образца

Далее нейросеть строит сжатое числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Этот шаблон весьма трудно сфальсифицировать: он не сохраняет непосредственно изображение пользователя, а лишь уникальные черты его внешности, что делает его идеальным для таких площадок, как Вулкан Казино Платинум.

Сравнительный анализ и вынесение решения

Когда человек намеревается разлочить смартфон глазами, механизм повторяет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный границу (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ не предоставляется.

Привыкание к изменениям внешности

Увлекательная черта актуальных систем — возможность самостоятельного обучения. Если ты регулярно открываете телефон с обновленной прической или оптикой, система постепенно обновляет базовый шаблон вашего внешности для повышения точности работы без снижения уровня безопасности.

Безопасность биометрических данных данных.

Многие юзеры беспокоятся хранить свои био-идентификационные данные на мобильном устройстве из-за риска утечки данных или взлома устройства. Иные организации, вроде Вулкан Казино Платинум, предлагают методы для увеличения безопасности данных юзеров.

• Локальное сбережение: Преимущественно девайсов сохраняет биометричные образцы лишь внутри защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают гаджет и не доступны в том числе производителю.

• Шифрование: Все сведения сохраняются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Программы внешних разработчиков не имеют прямого возможности доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Необходимо подчеркнуть значимую особенность: в случае, если кто-то сможет получить физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители реализуют систему защиты от “слепого” разблокирования — в частности, просят открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают типы определения лиц?

На сегодняшний день можно выделить выделить три главных метода к выполнению этой задачи:

Программное 2D идентификация

Используется только лицевая камера без вспомогательных сенсоров глубины. Подобный способ встречается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота осуществления; низкая стоимость; быстрая функционирование при хорошем свете.
Минусы: легко обмануть снимком; нестабильная функционирование ночью; низкая безопасность.

Аппаратное трёхмерное сканирование

Использует инфракрасную камеру + проектор точек + датчики глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Плюсы: значительная надёжность; невозможно подделать изображение/видеозапись; постоянная работа в любых условиях освещения.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с интеграцией ИИ

Задействуют комбинацию программируемых методов + техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как Vulkan Platinum и Google Pixel Face Unlock новейших версий, комбинируют фронтальную камеру c инфракрасным датчиком движения Soli Radar для защиты от подделок руками/масками/видеодисплеями чужих устройств.

Образцы использования разных методов

• iPhone серии X/11/12/13/14 применяют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз представил аналог Face ID среди Android.
• Samsung Galaxy S10/S20 обеспечивают как программное обеспечение 2D идентификацию по фото селфи-камерой, так и сканер глазного ириса.
• Huawei Mate20 Pro использует систему из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Трудности безопасности и ошибочные срабатывания

Несмотря на поразительный прогресс техники за недавние лет, безупречных систем пока не имеется:

1. Шанс подвоха: Недорогие телефоны легко доступны высококачественной изображением хозяина или видео с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые совершенные механизмы могут перепутать между однояйцевыми близнецами либо родственниками с очень похожей внешностью.
3. Изменения облика: Резкое похудение/набор веса, косметические процедуры либо травмы в некоторых случаях необходимы для обновления данных биометрических данных.
4. Условия фотографирования: Сильная засветка солнцем или интенсивная темнота могут понизить точность идентификации признаков.

Ниже пара подсказок по безопасному использованию:

• Для важных операций всегда применяйте дополнительную аутентификацию;
• Не включайте опцию “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Постоянно апгрейдите программное обеспечение мобильного устройства для защиты от новых видов атак;
• Включайте настройку “Требовать раскрытых глаз” там, где она имеется.

В каких областях также используется технология помимо смартфонов?

Пускай тема нашей работы сосредоточена на в частности мобильным устройствам, необходимо сказать о других сферах применения технологии:

• Мониторинг входа в рабочих помещениях и резиденциях;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Электронные идентификационные документы современного типа;
• Установки видеонаблюдения муниципальных подразделений;
• Автоматизирование регистрации посещаемости образовательных учреждений/вузов;
• Авторизация юзеров ПК/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без пластика или мобильника! Схожие инициативы развиваются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом трансформируется техпроцесс сегодня?

Любой годочек появляются свежие мысли для усовершенствования уровня функционирования систем распознавания лиц:

1. Увеличивается детализация сенсорных устройств — чем больше информации фиксируется видеокамерой/датчиками глубины, тем меньше шанс неточности;
2. Улучшаются нейронные сети — передовые архитектуры вида MobileNetV3 обеспечивают возможность скоростно адаптироваться к дополнительным чертам вида владельца непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Улучшаются технологии антиспуфинга — теперь телефоны могут различать настоящие живые облики от неподвижных снимков/масок по мельчайшим движениям кожи.
4. Синхронизация со умными устройствами — смарт-часы могут авто заблокировать смартфон, если обладатель удалился на значительное расстояние.
5. Возникают смешанные механизмы — например совмещающие речевую аутентификацию + лицо + пальцевой отпечаток.

Здесь, которые тенденции особенно популярны на сегодняшний день:

1) Уменьшение деталей

Изготовители пытаются минимизировать размер отверстия (“чёлки”) под датчики на дисплее за счёт внедрения миниатюрных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на аппарате

Для увеличения личной безопасности всё больше обработки данных осуществляется на месте без пересылки информации во сторонний облачный сервис.

3) Стандартизация стандартов

Google активно пропагандирует норму BiometricPrompt API, чтобы аналогичные системы, например как Вулкан Платинум, и каждые Android-аппы могли взаимодействовать с различными типами биометрии унифицированно.

Что решить сегодня?

В случае если тебе необходима предельная безопасность данных, выбирайте топовые устройства со встроенным ИК-излучателем или же ToF-сенсором глубины.

• iPhone каждого новейших версий
• Huawei Companion/P Series линейки
• Mix Expert
• Vivo X серии
• Oppo Найти X серии.

Если средства невелик – лучше отдавать предпочтение традиционным способам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как опциональную возможность удобства.

Как улучшить практичность работы опции?

Есть пара советов для тех, кто уже применяет разблокировку через лицо:

1. Периодически обновляйте свою изображение-шаблон, если значительно изменяется облик.
2. Не пренебрегайте чистить линзу передней камеры – пятна могут понизить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам включает камеру как только вы берёте его в руки.
4. Во время регистрационного процесса старайтесь удерживать лицевую часть ровно впереди объектива без значительного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвернулись от экрана.

Перспективы эволюции техники

В скоро наступающие времена можно ожидать развития полностью дистанционных способов опознания человека сразу по нескольким биометрическим данным параметрам одновременно: физиономия + звучание + манера ходьбы + движения рук!

Также вероятно развитие новых способов обеспечения приватности – к примеру, переменное изменение электронного шаблона после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее захватывающих технологий нашего периода! Она обеспечивает интеракцию со смартфоном комфортнее чем когда-либо прежде, и такие программы, как Вулкан Казино Платинум, могут существенно улучшить ваш пользовательский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы осведомлены, как устроена эта методика в деталях, – сумеете более осмысленно подбирать свой будущий устройство!