Каким образом действует идентификация лиц в мобильных устройствах

Для чего мы выбираем разлочивание по фейсу

В прошлые времена распознавание лиц стало одной из самых популярных возможностей для деблокировки мобильных телефонов. Всего некоторые годов ранее основная масса пользователей довольствовались пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением подобных технологий, например Вулкан Платинум, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Какой аспект превращает эту конкретную возможность настолько популярной? Прежде всего, это удобно: не нужно запоминать трудные пароли или отыскивать нужный палец в тьме. Во-вторых, это оперативно: современные программы узнают лицо практически за мгновения ока. В-третьем пункте, это чувство футуристичности — как будто в фильмах про вулкан платинум агентов.

Впрочем за этой на первый взгляд несложностью прячется полный мир трудных технологий и инженерных разработок. Позвольте нам понять, как именно функционирует идентификация по лицу в современных гаджетах, какие бывают способы, насколько они безопасны и что нас предстоит.

Сжатая история прогресса техники

Распознавание лиц как техника присутствует уже более пятидесяти годов. Начальные пробы машинного исследования облика были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины способны были лишь выделять очертания черепа и вычислять промежутки между зрачками и устами на черно-белых снимках.

Начальные коммерческие платформы стали доступны в 1990-х годах, но они были далеки от совершенства: функционировали медленно и нередко ошибались. Только с прогрессом искусственных сетей и таких площадок, как Vulkan Platinum, сильных мобильных микросхем идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным идентификацией лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали внедрять личные решения.

Ключевые этапы функционирования механизма распознавания

Процесс распознавания лица можно условно разделить на несколько основных этапов:

1. Идентификация лица — устройство определяет наличие гуманного образа в изображении.
2. Извлечение характеристик — алгоритм исследует контуры физиономии: очертания глаз, носа, уст, расположение бровей.
3. Построение модели — создаётся неповторимый электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с образцом — сформированный образец сопоставляется со сохранённой при регистрации биометрической информацией владельца.
5. Принятие решения — если сходство достаточно высокое, смартфон разблокируется.

Любой из этих стадий запрашивает индивидуальных методов и оптимизаций для оперативной работы прямо на устройстве.

Железные составляющие: что прячется внутри

Обычная фронтальная камера.

Самый простой простой метод распознавания облика использует только фронтальную камеру мобильного устройства. Данный метод внедрён во различных бюджетных версиях Android-девайсов.

Положительные стороны:

• Не нуждается в требует дополнительных датчиков.
• Оперативно действует при качественном освещённости.

Недостатки:

• Просто обмануть фотографией или видеозаписью.
• Плохо функционирует при плохом освещённости или необычных углах обзора.

Инфракрасная камера и пунктирный проектор

Более усовершенствованные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика является основой Face ID от Apple.

Каким образом это работает:

• Точечный проекционный прибор отображает на лицо использующего невидимую структуру из тысяч инфракрасных точек (например, Face ID задействует около 30 000 пятен).
• ИК камера фиксирует искривление данной решетки по плоскости физиономии.
• Создаётся 3D карта глубины, что почти что невозможна для имитации типичной фото или маскировкой.

Плюсы

• Надёжная деятельность даже в полной неосвещённости.
• Сильная защита к подделкам.
• Точность идентификации более 99%.

Дополнительные сенсорные устройства

В некоторых устройствах применяются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют период движения луча до цели и обратно; Цветные-датчики глубины; специальные лазерные измерители расстояния для создания более аккуратной 3D-модели физиономии.

Эти инновации применяются в основном во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искусственный интеллект в исполнении

Нынешние устройства опознания лиц неосуществимы в отсутствие применения ИИ и machine learning. Именно благодаря таким технологиям, как Vulkan Platinum, аппарат может идентифицировать пользователя даже при метаморфозах облика: новая укладка, щетина, очки или косметика не становятся помехой для открытия.

Обнаружение лица

На стартовом этапе алгоритм обязана оперативно найти лицо среди целого снимка камеры. Для данной цели применяются последовательные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые натренированы распознавать лиц человека среди множества других объектов.

Пример: метод MTCNN способен распознавать облик даже в случае неполном перекрытии (например, шалью или рукой).

Выделение ключевых точек

После распознавания лица механизм, такая как Vulkan Platinum, устанавливает местоположение ключевых точек: края глаз, верхушка носа, контуры губ и так далее. Часто используется от 68 до 128 главных маркеров на лицевой области.

Данное требуется для стабилизации изображения: если человек находится с телефон под углом, или склонил головку, программа корректирует изображение до обычного угла для последующего изучения.

Формирование биометрического шаблона

Далее нейросеть строит компактное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 вещественных чисел.

Этот образец весьма трудно имитировать: он не хранит само картинку пользователя, а лишь уникальные характеристики его облика, что делает его идеальным для таких платформ, как Вулкан Казино Платинум.

Сопоставление и вынесение заключения

Когда пользователь желает разлочить мобильник взором, механизм воспроизводит все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный уровень (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ не предоставляется.

Привыкание к изменениям внешности

Занимательная характеристика современных систем — возможность самообучения. Если вы регулярно разблокируете телефон с свежей укладкой или очками, система постепенно модернизирует основной шаблон вашего внешности для улучшения точности функционирования без ухудшения безопасности.

Безопасность биометрических данных данных.

Многие юзеры беспокоятся хранить свои биометрические идентификационные данные на смартфоне из-за вероятности потери данных или взлома гаджета. Некоторые компании, например Вулкан Казино Платинум, предоставляют методы для увеличения сохранности информации юзеров.

• Локальное сохранение: Преимущественно устройств хранит био-идентификационные шаблоны лишь в пределах безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют устройство и не доступны включая создателю.

• Шифрование: Все информация сберегаются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы сторонних разработчиков не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь требовать факт верификации личности через системный API.

Необходимо подчеркнуть важную особенность: если какой-то человек получит доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители внедряют меры безопасности от неосознанного разблокирования — к примеру, заставляют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют типы идентификации лиц на изображениях?

На сегодняшний день можно выделить 3 основных метода к реализации этой операции:

Софтверное двухмерное определение

Эксплуатируется только лицевая камера без дополнительных датчиков глубины. Этот подход встречается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность осуществления; низкая стоимость; быстрая работа при достаточном свете.
Минусы: легко обмануть фотографией; ненадежная функционирование ночью; слабая безопасность.

Техническое трёхмерное сканирование

Задействует ИК видеокамеру + проектор пикселей + сенсоры глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Достоинства: большая достоверность; не получится исказить фото/видео; постоянная работа при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с ИИ-дополнением

Задействуют комбинацию программных методов + аппаратную обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как Vulkan Platinum и Google Pixel Face Unlock новейших версий, комбинируют фронталку c ИК датчиком мобильности Soli Radar для защиты от подделок руками/масками/видеоэкранами чужих устройств.

Примеры применения разнообразных техник

• iPhone линейки X/11/12/13/14 используют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 имеют как программное плоское распознавание по фото фронталкой, так и сканер ириса глаза.
• Huawei Mate20 Pro применяет набор из ИК-подсветки + Dot Projector + ToF-сенсор

Трудности защиты и неверные срабатывания

Несмотря на поразительный успехи технологий за прошедшие лет, идеальных механизмов пока не имеется:

1. Вероятность подвоха: Недорогие телефоны просто доступны четкой изображением владельца либо видео с экрана другого устройства.
2. Идентичные двойняшки: Даже самые безупречные механизмы могут ошибиться между однояйцевыми близнецами либо родственниками с очень аналогичной внешностью.
3. Трансформации облика: Внезапное снижение веса/набор веса, хирургические вмешательства либо повреждения в некоторых случаях требуют повторной регистрации биометрических данных.
4. Условия съёмки: Яркая засветка солнцем или плотная тень могут понизить верность определения признаков.

Вот некоторые подсказок по защищённому эксплуатации:

• Для значимых операций всегда применяйте двухэтапную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Систематически обновляйте прошивку смартфона для предотвращения угроз от современных угроз;
• Включайте опцию “Требовать раскрытых глаз” везде, где она есть.

Где также используется технология помимо смартфонов?

Хотя тема этой публикации посвящена конкретно мобильным устройствам, следует отметить других сферах применения технологии:

• Контроль доступа в офисах и жилых домах;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Цифровые паспорта последнего образца;
• Установки видеоконтроля городских сервисов;
• Автоматизирование регистрации посещаемости учебных заведений/институтов;
• Вход пользователей ПК/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по фейсу (“Face Pay”) — нужно лишь пройти через барьер без пластика или мобильника! Схожие проекты реализуются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким способом изменяется технология в нынешнее время?

Всякий год появляются современные концепции для повышения качества функционирования систем распознавания лиц:

1. Увеличивается чёткость сенсорных устройств — чем больше деталей фиксируется фотоаппаратом/глубинными сенсорами, тем меньше шанс ошибки;
2. Совершенствуются искусственные интеллекты — передовые архитектуры модели MobileNetV3 дают возможность скоростно обучаться новым характеристикам вида обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Развиваются методы антиспуфинга — теперь смартфоны могут распознавать реальные анимированные лица от статичных фото/масок по микроскопическим микродвижениям.
4. Синхронизация со смарт-гаджетами — умные часы могут автоматически закрыть доступ к мобильный телефон, если обладатель ушёл далеко.
5. Проявляются комбинированные устройства — в частности комбинирующие речевую идентификацию + облик + дактилоскопический след.

Итак, те тренды очень востребованы сейчас:

1) Миниатюризация компонентов

Изготовители стараются уменьшить размер отверстия (“чёлки”) для сенсоры на экране за счёт интеграции маленьких ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на аппарате

Для улучшения приватности всё более вычислений осуществляется внутри устройства без отправки информации во внешний облачный услугу.

3) Упорядочивание стандартов

Гугл активно пропагандирует стандарт BiometricPrompt API, для того чтобы подобные платформы, например как Вулкан Платинум, и любые Android-аппы были совместимы с всеми формами биометрии единообразно.

Что решить на сегодня?

В случае если вам всем необходима наивысшая безопасность информации, выбирайте топовые устройства со встроенным ИК-проектором или ToF-датчиком глубины.

• iPhone всех существующих новейших версий
• Huawei Companion/Series P серии
• Mix Expert
• Vivo X линейки
• Oppo Найти Икс серий.

Если средства невелик – лучше выбирать обычным способам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, задействовать только как дополнительную опцию комфорта.

Каким способом повысить практичность работы опции?

Есть несколько лайфхаков для пользователей, кто уже использует функцию распознавания лица:

1. Часто меняйте свою изображение-шаблон, если значительно изменяется внешность.
2. Не пренебрегайте очищать линзу фронтальной камеры – пятна могут понизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам включает камеру когда вы берёте его в руки.
4. Во время регистрации пытайтесь удерживать лицо ровно напротив камеры без сильного наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отворачиваетесь от дисплея.

Возможности эволюции инноваций

В предстоящие времена можно предвкушать развития полностью безконтактных способов идентификации человека сразу по нескольким биометрическим параметрам одновременно: облик + речь + шаги + манипуляции руками!

Также возможно возникновение свежих способов обеспечения конфиденциальности – например, переменное изменение цифрового образца после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень увлекательных техник нашего эпохи! Она делает взаимодействие со смартфоном проще чем раньше, и такие аппы, как Вулкан Казино Платинум, могут в разы повысить ваш пользовательский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы понимаете, как работает эта система в деталях, – сможете более осмысленно подбирать свой очередной девайс!