Каким способом действует распознавание лицевых образов в телефонах

Зачем мы выбираем разблокирование по лицевому распознаванию

В недавние годы определение физиономий является одной из самых распространённых возможностей для открытия умных телефонов. Лишь несколько годков назад основная часть юзеров удовлетворялись пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением подобных технологий, как admiral x, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что превращает эту функцию очень нужной? Для начала, это удобно: не нужно запоминать трудные пароли или искать нужный палец в тьме. Кроме того, это оперативно: современные программы распознают лицо фактически за доли секунды. В-третьих, это впечатление будущего — словно в кинофильмах про адмирал х казино шпионов.

Впрочем за этой кажущейся легкостью скрывается целый вселенная комплексных техник и инженерных разработок. Давайте исследовать, как точно функционирует идентификация по лицу в новейших мобильных телефонах, какие существуют технологии, насколько они защищены и что нас ожидает в будущем.

Сжатая хроника прогресса технологии

Распознавание лиц как методика присутствует уже более 50 лет. Изначальные эксперименты автоматического исследования лица были сделаны еще в 1960-х годы в лабораториях США. Тогда вычислительные машины умели лишь обозначать силуэты черепа и измерять расстояния между очами и ртом на черно-белых снимках.

Начальные торговые установки возникли в девяностых годах, но они были несовершенны: действовали неспешно и часто давали сбои. Только с прогрессом нейронных сетей и таких площадок, как адмирал х, мощных мобильных чипов идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным идентификацией лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять личные разработки.

Основные стадии работы механизма распознавания

Процесс распознавания лица можно ориентировочно сегментировать на несколько основных этапов:

1. Идентификация лица — устройство выявляет наличие гуманного образа в кадре.
2. Определение особенностей — система исследует особенности облика: форму глаз, обонятельного органа, губ, положение надбровных дуг.
3. Построение модели — создаётся неповторимый цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с образцом — полученный модель сверяется с записанной при регистрации биометрической данными владельца.
5. Принятие решения — если сходство достаточно высокое, смартфон открывается.

Каждый из указанных этапов требует особых алгоритмов и оптимизаций для быстрой работы прямо на устройстве.

Технические компоненты: что скрыто внутри них

Обычная селфи камера.

Самый легкий метод определения лица задействует только фронтальную камеру смартфона. Подобный подход внедрён во многих бюджетных моделях Android-девайсов.

Плюсы:

• Не нуждается в дополнительные сенсоров.
• Быстро действует при хорошем освещении.

Слабые стороны:

• Легко ввести в заблуждение фотографией или видеозаписью.
• Неправильно функционирует при слабом свете или непривычных ракурсах.

Инфракрасная камера и пунктирный проекционный аппарат

Более совершенные системы, такие как адмирал х, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика лежит в основе Face ID от Apple.

Как это действует:

• Точечный устройство проекции проецирует на физиономию использующего невидимую структуру из тысяч инфракрасных меток (например, Face ID задействует около 30 000 пятен).
• ИК камера записывает искривление данной решетки по поверхности физиономии.
• Получается трёхмерная карта глубины глубины, которая почти что неосуществима для подделки типичной фотографией или маской.

Плюсы

• Надёжная работа даже в полной темноте.
• Сильная устойчивость к имитациям.
• Точность распознавания свыше 99%.

Дополнительные сенсорные устройства

В определённых аппаратах задействуются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые измеряют время распространения света до предмета и обратно; Цветные-датчики дальности; специальные оптические дальномеры для создания более аккуратной 3D-модели лица.

Эти инновации применяются наиболее часто во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искуственный разум на работе

Текущие механизмы опознания физиономий немыслимы без применения искусственного интеллекта и machine learning. Именно вследствие таким инновациям, как адмирал х, аппарат может идентифицировать юзера даже при изменениях облика: новая стрижка, щетина, очки или грим не становятся барьером для разблокировки.

Обнаружение физиономии

При первом этапе алгоритм должна оперативно распознать ликовое изображение внутри целого снимка с камеры. Для этого задействуются многоуровневые классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые “обучены” идентифицировать человеческие лица среди множества других объектов.

Пример: процесс MTCNN способен распознавать физиономию даже с частичном закрытии (например, шарфом или рукой).

Идентификация ключевых точек

После идентификации лица механизм, такая как адмирал х, определяет расположение основных точек: края глаз, конец носа, контуры губ и так далее. Как правило применяется от 68 до 128 главных маркеров на лицевой поверхности.

Данное требуется для нормализации изображения: если человек удерживает мобильник под углом, или наклонил голову, программа корректирует изображение до обычного угла для дальнейшего анализа.

Создание биометрического шаблона

Далее нейронная сеть строит компактное числовое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Данный шаблон весьма сложно подделать: он не хранит само картинку юзера, а лишь уникальные характеристики его вида, что делает его идеальным для таких платформ, как admiral-x.

Сравнительный анализ и принятие заключения

Если юзер хочет открыть мобильник взглядом, система осуществляет все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный уровень (обычно больше 99%), телефон, как и платформа admiral-x, доступен; если нет — доступ запрещается.

Приспособление к метаморфозам облика

Интересная характеристика нынешних системы — возможность самообучения. Если вы регулярно разблокируете смартфон с обновленной укладкой или очками, алгоритм постепенно обновляет эталонный шаблон вашего лица для повышения точности работы без ухудшения безопасности.

Безопасность биометрических информации.

Большинство юзеры боятся держать свои биометрические данные на мобильном устройстве из-за вероятности утечки данных или хакерской атаки. Определенные фирмы, вроде admiral-x, предлагают методы для повышения безопасности информации клиентов.

• Локальное хранение: Преимущественно устройств записывает био-идентификационные шаблоны только внутри защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют устройство и закрыты даже создателю.

• Шифрование: Все данные сберегаются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Программы третьих девелоперов не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь требовать подтверждение подтверждения личности через системный API.

Стоит упомянуть значимую подробность: в случае, если кто-то достанет физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители внедряют меры безопасности от автоматического разблокирования — в частности, просят открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют виды распознавания лиц на изображениях?

На сегодняшний день можно выделить 3 основных метода к выполнению этой операции:

Софтверное двухмерное определение

Используется только лицевая видеокамера без вспомогательных детекторов дистанции. Такой подход используется чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность осуществления; минимальная цена; быстрая деятельность при качественном свете.
Минусы: просто ввести в заблуждение снимком; неустойчивая функционирование ночью; низкая безопасность.

Оборудование для 3D оцифровка

Использует инфракрасную камеру + проекционный модуль пикселей + сенсоры глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Достоинства: значительная достоверность; не получится подделать фото/видео; постоянная функционирование при любом освещении.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с интеграцией ИИ

Задействуют комбинацию программируемых методов + техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие продукты, например адмирал х и Google Pixel Face Unlock последних поколений, комбинируют фронталку c инфракрасным сенсором мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами чужих устройств.

Примеры использования разных техник

• iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз внедрил аналог Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 имеют как программное обеспечение 2D распознавание по фото фронтальной камерой, так и сенсор ириса глаза.
• Huawei Mate20 Pro использует систему из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Проблемы защиты и ошибочные срабатывания

Несмотря на впечатляющий развитие техники за прошедшие годы, совершенных системы пока не наблюдается:

1. Шанс подвоха: Бюджетные смартфоны без труда доступны качественной фотографией пользователя либо видеозаписью с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые безупречные механизмы могут ошибиться между монозиготными близнецами либо родичами с очень схожей внешностью.
3. Трансформации облика: Стремительное снижение веса/увеличение массы тела, хирургические вмешательства или травмы иногда необходимы для повторной регистрации биометрических данных.
4. Условия фотографирования: Интенсивная подсветка солнечным светом или же плотная темнота могут понизить верность распознавания признаков.

Вот несколько подсказок для безопасному использованию:

• Для критически важных операций всегда применяйте двухэтапную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
• Регулярно обновляйте прошивку прошивку смартфона для предотвращения угроз от современных угроз;
• Включайте опцию “Требовать раскрытых глаз” там, где она имеется.

В каких местах дополнительно применяется технологии за исключением мобильных телефонов?

Хотя тема нашей статьи касается в частности мобильным устройствам, следует отметить других сферах применения технологии:

• Мониторинг входа в офисах и жилых домах;
• Платёжные терминалы банков (“Face Pay”);
• Виртуальные идентификационные документы нового образца;
• Системы видеомониторинга муниципальных подразделений;
• Автоматизирование отслеживания явки учебных заведений/университетов;
• Вход юзеров компьютеров/ноутбуков.

Например: В московском метро уже тестируется система оплаты проезда по лицу (“Face Pay”) — хватит пройти через барьер без пластика или телефона! Схожие инициативы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом изменяется технология сегодня?

Любой годочек появляются новые концепции для усовершенствования уровня работы систем распознавания лиц:

1. Увеличивается детализация датчиков — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше риск ошибки;
2. Развиваются нейросети — современные конструкции модели MobileNetV3 позволяют оперативно осваивать новым особенностям внешности владельца непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Улучшаются технологии антиспуфинга — теперь мобильные устройства способны различать подлинные анимированные облики от неподвижных фото/маскировок по мельчайшим микродвижениям.
4. Взаимодействие со умными устройствами — умные часы могут самостоятельно закрыть доступ к смартфон, если пользователь удалился на значительное расстояние.
5. Возникают смешанные устройства — в частности объединяющие речевую опознание + лицо + пальцевой отпечаток.

Итак, которые направления особенно актуальны сейчас:

1) Сокращение элементов

Производители пытаются минимизировать величину выреза (“чёлки”) для сенсоры на дисплее за счёт интеграции компактных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на аппарате

Для улучшения приватности всё более вычислений происходит на месте без пересылки информации во дополнительный облачный услугу.

3) Стандартизация регламентов

Гугл активно пропагандирует эталон BiometricPrompt API, с целью чтобы аналогичные системы, вроде admiral x, и любые Android-аппы могли работать с всеми формами биометрии унифицированно.

Что подобрать на сегодня?

Когда вам важна предельная безопасность информации, выбирайте топовые аппараты со встроенным ИК-излучателем или ToF-датчиком глубины.

• iPhone всех последних версий
• Huawei Partner/P Series серии
• Mix Expert
• Vivo X линейки
• Оппо Обнаружить Икс линейки.

Если финансы невелик – лучше предпочесть обычным средствам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в admiral x, задействовать только как дополнительную возможность удобства.

Каким способом увеличить удобство использования функции?

Есть некоторые советов для пользователей, кто уже применяет разблокировку по лицу:

1. Часто меняйте свою фотографию-шаблон, если сильно трансформируется облик.
2. Не упускайте из виду очищать линзу фронтальной камеры – пятна могут уменьшить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам включает фотоаппарат как только вы берёте его в руки.
4. Во время записи старайтесь сохранять голову ровно напротив объектива не допуская сильного наклона головы.
5. Используйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отворачиваетесь от дисплея.

Будущее прогресса техники

В предстоящие периоды можно ожидать развития полностью безконтактных способов опознания персоны сразу по нескольким биометрическим параметрам одновременно: лицо + речь + походка + манипуляции руками!

Также возможно возникновение новых способов охраны конфиденциальности – скажем, изменяющееся изменение диджитал образца после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее увлекательных инноваций нашего периода! Она предоставляет общение со мобильным устройством комфортнее чем раньше, и такие программы, как admiral-x, могут значительно оптимизировать ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы осведомлены, как функционирует эта методика в деталях, – будете в состоянии осознаннее определять свой будущий гаджет!