Как функционирует идентификация лиц в мобильных устройствах

Почему мы предпочитаем разблокировку по лицу

В недавние времена распознавание лиц является одной из самых популярных функций для деблокировки мобильных телефонов. Еще некоторые лет назад основная масса пользователей удовлетворялись PIN-кодами, паролями или датчиками отпечатков пальцев. Но при появлением подобных технологий, например вулкан россия, нам достаточно просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект превращает данную возможность очень нужной? Для начала, это удобно: не нужно запоминать трудные пароли или отыскивать нужный палец в мраке. Также, это оперативно: современные системы узнают лицо фактически за доли секунды. В-третьих, это чувство будущего — как будто в кинолентах про вулкан россия агентов.

Однако за такой кажущейся несложностью таится целый универсум сложных технологий и инженерных концепций. Давайте понять, как конкретно работает распознавание лиц в актуальных мобильных телефонах, какие бывают технологии, насколько они надёжны и что нас ожидает в будущем.

Сжатая повествование развития техники

Распознавание лиц как технология существует уже более 50 годов. Изначальные попытки автоматического изучения лица были сделаны еще в 1960-х годы в научных учреждениях США. Тогда компьютеры могли лишь выделять контуры головы и вычислять расстояния между очами и ртом на монохромных изображениях.

Первые бизнес платформы возникли в 1990-х годах, но они были несовершенны: работали медленно и нередко ошибались. Только с эволюцией синтетических сетей и таких платформ, как вулкан россии, мощных мобильных микросхем идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным распознаванием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять свои решения.

Основные шаги работы механизма распознавания

Процесс определения лица можно ориентировочно разделить на несколько основных этапов:

1. Обнаружение лица — аппарат распознает наличие гуманного лица в кадре.
2. Извлечение особенностей — система анализирует контуры физиономии: форму глаз, носа, уст, положение бровей.
3. Построение шаблона — создаётся особенный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со эталоном — созданный модель сверяется с зафиксированной при регистрации биометрической информацией владельца.
5. Принятие решения — если сходство достаточно существенное, смартфон открывается.

Каждый из указанных шагов требует специальных алгоритмов и усовершенствований для оперативной работы прямо на устройстве.

Технические компоненты: что находится в их недрах

Стандартная передняя камера.

Наиболее несложный способ идентификации лица использует лишь переднюю видеокамеру смартфона. Такой подход внедрён во многочисленных недорогих версиях Android-девайсов.

Плюсы:

• Не требует внешних сенсоров.
• Быстро действует при хорошем освещённости.

Слабые стороны:

• Несложно ввести в заблуждение изображением или видеозаписью.
• Неправильно действует при слабом свете или непривычных ракурсах.

ИК камера и точечный проектор

Более совершенные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология является основой Face ID от Apple.

Каким способом это работает:

• Точечный устройство проекции отображает на физиономию пользователя невидимую структуру из тысяч инфракрасных меток (например, Face ID использует около 30 000 пятен).
• ИК камера записывает изменение формы этой решетки по плоскости физиономии.
• Получается трёхмерная глубинная карта глубинности, которая почти что неподвластна для подделки типичной фото или маскировкой.

Плюсы

• Надёжная функционирование даже в полной неосвещённости.
• Сильная защита к фальсификациям.
• Точность идентификации выше 99%.

Дополнительные сенсорные устройства

В некоторых аппаратах задействуются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые определяют период движения света до предмета и обратно; Цветные-датчики глубины; специальные лазерные лидары для построения более аккуратной 3D-модели физиономии.

Эти разработки встречаются в основном во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: синтетический разум на действии

Современные системы распознавания физиономий немыслимы без эксплуатации искусственного интеллекта и машинного обучения. Именно из-за таким инновациям, как вулкан россии, устройство в состоянии распознавать пользователя даже при трансформациях внешности: новая стрижка, щетина, линзы или косметика не становятся барьером для деблокировки.

Распознавание лиц

При первом шаге программа необходимо оперативно обнаружить ликовое изображение в пределах целого кадра камеры. Для этой задачи применяются многоуровневые классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены идентифицировать лиц человека среди множества других объектов.

Пример: процесс MTCNN может обнаруживать лицо даже в случае неполном перекрытии (например, платком или ладонью).

Идентификация основных точек

После распознавания лица устройство, такая как вулкан россии, определяет расположение основных точек: уголки глаз, конец носа, границы губ и так далее. Как правило задействуется от 68 до 128 главных меток на лице.

Это действие требуется для нормализации картинки: если юзер держит смартфон под углом, или склонил головку, программа корректирует изображение до обычного угла для дальнейшего анализа.

Создание биометрического идентификатора модели

Далее искусственная сеть строит уплотненное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 флоатов.

Такой формат крайне трудно сфальсифицировать: он не сохраняет непосредственно изображение пользователя, а лишь уникальные особенности его вида, что делает его совершенным для таких площадок, как vulkan russia.

Сопоставление и принятие выбора

Если человек хочет разблокировать телефон глазами, программа осуществляет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный порог (обычно превышает 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ не предоставляется.

Привыкание к изменениям внешнего вида

Увлекательная характеристика актуальных системы — возможность самообучения. Если ты регулярно разблокируете смартфон с обновленной стрижкой или очками, система постепенно обновляет базовый шаблон вашего облика для повышения точности работы без ухудшения безопасности.

Охрана биометрических информации.

Множество пользователи боятся хранить свои биометрические данные на мобильном устройстве из-за угрозы утечки данных или взлома гаджета. Некоторые фирмы, вроде vulkan russia, предоставляют методы для улучшения защиты данных пользователей.

• Локальное хранение: Преимущественно аппаратов сохраняет биометричные шаблоны только внутрь защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из аппарат и закрыты даже производителю.

• Шифрование: Все данные хранятся только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих девелоперов не обладают непосредственного возможности доступа к биометрическим; они могут лишь запрашивать подтверждение верификации личности через системный API.

Необходимо подчеркнуть значимую подробность: если кто-либо получит физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители реализуют меры безопасности от неосознанного разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие бывают категории распознавания лиц на изображениях?

В настоящее время можно выделить 3 ключевых способа к выполнению этой функции:

Программное двухмерное определение

Применяется только передняя видеокамера без вспомогательных детекторов глубины. Такой метод используется наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость реализации; минимальная цена; оперативная функционирование при достаточном освещении.
Минусы: просто обмануть снимком; неустойчивая функционирование ночью; низкая охрана.

Техническое трёхмерное сканирование

Использует ИК камеру + проектор пикселей + датчики дистанции (Face ID у Apple; аналогичные решения у Huawei Mate).
Плюсы: большая достоверность; невозможно исказить изображение/видеозапись; устойчивая функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с дополнением ИИ

Используют комбинацию программируемых методов + аппаратную обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, например вулкан россии и Google Pixel Face Unlock последних версий, комбинируют фронтальную камеру c инфракрасным датчиком движения Soli Radar для предотвращения от фальсификаций руками/масками/видеодисплеями чужих устройств.

Иллюстрации использования разных способов

• iPhone модели X/11/12/13/14 применяют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз предложил подобие Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 обеспечивают как программное плоское определение по фото селфи-камерой, так и сенсор радужки глаза.
• Huawei Mate20 Pro применяет комплекс из ИК-освещения + Dot Projector + ToF-датчик

Проблемы безопасности и ошибочные сигналы

Несмотря на впечатляющий прогресс технологий за прошедшие годы, совершенных системы пока не имеется:

1. Возможность мошенничества: Бюджетные смартфоны просто “разблокируются” качественной снимком пользователя или видеозаписью с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые идеальные механизмы могут ошибиться между монозиготными близнецами либо родичами с очень схожей внешностью.
3. Метаморфозы облика: Резкое утрата веса/увеличение массы тела, косметические процедуры либо травмы в некоторых случаях необходимы для перерегистрации биометрических данных.
4. Условия фотографирования: Яркая освещённость солнцем либо глубокая затенение могут понизить аккуратность идентификации признаков.

Ниже некоторые рекомендаций для надёжному применению:

• Для критически важных операций всегда внедряйте двухэтапную аутентификацию;
• Не активируйте возможность “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Постоянно апгрейдите прошивку телефона для предотвращения угроз от современных угроз;
• Включайте функцию “Требовать распахнутых глаз” там, где она имеется.

Где дополнительно применяется технологии за исключением мобильных телефонов?

Пускай предмет этой работы посвящена именно мобильным устройствам, стоит упомянуть о других сферах применения технологии:

• Мониторинг доступа в офисах и жилых домах;
• Платёжные аппараты банков (“Face Pay”);
• Электронные паспорта нового образца;
• Установки видеоконтроля муниципальных служб;
• Автоматизирование регистрации присутствия школ/университетов;
• Вход участников персональных компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через барьер без карты или мобильника! Похожие проекты реализуются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом трансформируется технический процесс в нынешнее время?

Каждый годик проявляются новые мысли для повышения качества деятельности систем распознавания лиц:

1. Увеличивается разрешение сенсоров — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше шанс неточности;
2. Развиваются нейросети — современные структуры модели MobileNetV3 позволяют оперативно обучаться новым характеристикам вида обладателя непосредственно на девайсе без отправки данных в облако.
3. Совершенствуются технологии антиспуфинга — теперь телефоны могут распознавать подлинные живые облики от фиксированных снимков/масок по мельчайшим движениям кожи.
4. Взаимодействие со умными устройствами — интеллектуальные часы могут автоматически блокировать телефон, если владелец отошёл далеко.
5. Возникают гибридные системы — к примеру комбинирующие аудио опознание + физиономию + дактилоскопический след.

Вот, которые тренды в особенности актуальны в данный момент:

1) Уменьшение элементов

Производители пытаются минимизировать габариты отверстия (“чёлки”) под сенсоры на дисплее за счёт встраивания маленьких ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для улучшения приватности всё больше расчётов осуществляется на месте без передачи информации во сторонний облачный сервис.

3) Стандартизация стандартов

Гугл интенсивно продвигает норму BiometricPrompt API, для того чтобы аналогичные платформы, как вулкан россия, и все Android-аппы могли взаимодействовать с всеми формами биометрии унифицированно.

Что решить на сегодня?

Если вам важна максимальная безопасность информации, остановите выбор на флагманские аппараты с вмонтированным ИК-излучателем или же ToF-сенсором глубины.

• iPhone всех существующих последних версий
• Huawei Companion/Series P ряда
• Mix Expert
• Vivo X линейки
• Oppo Find Х серий.

Если средства невелик – лучше отдавать предпочтение традиционным средствам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в вулкан россия, использовать только как опциональную опцию удобства.

Каким образом увеличить удобство функционирования опции?

Есть несколько хитростей для людей, кто уже пользуется разблокировку через лицо:

1. Часто обновляйте свою изображение-шаблон, если значительно изменяется внешний вид.
2. Не упускайте из виду протирать объектив фронтальной камеры – разводы могут снизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам запускает фотоаппарат когда вы поднимаете его.
4. При регистрационного процесса пытайтесь держать голову прямо перед камеры исключая значительного наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвели взгляд от дисплея.

Возможности эволюции техники

В ближайшие периоды можно предполагать появления полностью бесконтактных способов распознавания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + голос + шаги + жесты рук!

Также возможно появление свежих подходов защиты конфиденциальности – к примеру, динамическое изменение электронного образца после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень увлекательных техник нашего эпохи! Она предоставляет интеракцию со мобильным устройством удобнее чем когда-либо прежде, и такие программы, как vulkan russia, могут в разы оптимизировать ваш пользовательский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как функционирует эта методика внутри, – будете в состоянии более осмысленно определять свой будущий устройство!