Каким способом работает распознавание лицевых образов в телефонах

Почему мы останавливаемся на разлочивание по лицевому распознаванию

В недавние годы определение физиономий превратилось в одной из наиболее востребованных возможностей для открытия мобильных телефонов. Лишь некоторые годков ранее основная масса использующих удовлетворялись PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но с появлением подобных технологий, например Вулкан Платинум, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект превращает эту конкретную возможность очень нужной? Для начала, это комфортно: не нужно запоминать сложные пароли или находить верный палец в мраке. Во-вторых, это оперативно: современные программы распознают лицо практически за мгновения ока. В-третьем пункте, это ощущение будущего — словно в кинофильмах про Вулкан казино агентов.

Впрочем за этой видимой несложностью скрывается весь универсум трудных технологий и инженерных разработок. Давайте исследовать, как точно действует идентификация по лицу в актуальных смартфонах, какие существуют методы, насколько они надёжны и что нас ждёт впереди.

Краткая история эволюции технологии

Идентификация лиц как техника имеется уже более 50 лет. Начальные пробы автоматического изучения облика были сделаны еще в 1960-х годах в научных учреждениях США. Тогда вычислительные машины могли лишь выделять силуэты головы и вычислять промежутки между глазами и ртом на монохромных изображениях.

Изначальные торговые платформы появились в 1990-х годах, но они были далеки от совершенства: работали медленно и часто давали сбои. Только с прогрессом нейронных сетей и таких площадок, как Vulkan Platinum, высокопроизводительных мобильных процессоров идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным сканированием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать собственные решения.

Основные этапы работы системы распознавания

Процесс идентификации лица можно примерно разделить на несколько ключевых этапов:

Распознавание лиц — аппарат выявляет существование человеческого лица в кадре.
Выделение признаков — система анализирует особенности лица: конфигурацию глаз, обонятельного органа, уст, расположение надбровных дуг.
Построение модели — создаётся уникальный электронный отпечаток (faceprint) на основе выделенных признаков.
Сравнение со стандартом — полученный образец сравнивается со сохранённой при учёте биометрической данными владельца.
Принятие решения — если сходство достаточно высокое, смартфон открывается.

Любой из этих этапов требует особых алгоритмов и оптимизаций для быстрой работы непосредственно на девайсе.

Железные компоненты: что находится в их недрах

Типичная селфи камера.

Самый простой легкий вариант распознавания лица задействует только фронтальную камеру смартфона смартфона. Данный способ реализован во многих недорогих версиях Android-девайсов.

Преимущества:

Не нуждается в нуждается в дополнительных сенсоров.
Шустро функционирует при достаточном свете.

Отрицательные стороны:

Несложно ввести в заблуждение фотографией или видеозаписью.
Плохо действует при низком освещённости или необычных точках зрения.

ИК камера и точечный проекционный аппарат

Более совершенные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс лежит в основе Face ID от Apple.

Как это функционирует:

Точечный устройство проекции показывает на физиономию пользователя невидимую структуру из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 точек).
ИК устройство регистрирует деформацию этой решетки по плоскости лица.
Создаётся трёхмерная карта глубины глубины, которая почти что неосуществима для фальсификации типичной фотографией или маской.

Преимущества

Надёжная деятельность даже в полной темноте.
Высокая сопротивляемость к фальсификациям.
Точность идентификации свыше 99%.

Дополнительные датчики

В некоторых устройствах используются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют время распространения света до объекта и обратно; Цветные-датчики дальности; специальные световые измерители расстояния для создания более аккуратной 3D-модели лица.

Эти разработки встречаются в основном во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искусственный интеллект на исполнении

Текущие механизмы идентификации физиономий невозможны при отсутствии эксплуатации artificial intelligence и machine learning. Именно из-за таким разработкам, как Vulkan Platinum, гаджет способно узнавать владельца даже при изменениях внешности: новая укладка, борода, очки или грим не становятся препятствием для разблокировки.

Обнаружение лиц

На стартовом шаге система обязана оперативно обнаружить ликовое изображение внутри целого изображения камеры. Для данной цели задействуются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые “обучены” находить лиц человека среди множества других объектов.

Пример: метод MTCNN в состоянии распознавать облик даже при неполном перекрытии (например, шарфом или ладонью).

Определение основных аспектов

После идентификации лица механизм, такая как Vulkan Platinum, вычисляет расположение основных точек: уголки глаз, верхушка носа, контуры губ и так далее. Как правило задействуется от 68 до 128 основных меток на лице.

Это нужно для стабилизации изображения: если пользователь держит мобильник под наклоном, или повернул головку, программа исправляет картинку до стандартного положения для дальнейшего анализа.

Создание биометрического модели

Далее искусственная сеть строит уплотненное цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 вещественных чисел.

Данный образец очень затруднительно имитировать: он не сохраняет непосредственно картинку пользователя, а лишь особенные особенности его внешности, что делает его идеальным для таких систем, как Вулкан Казино Платинум.

Сравнение и вынесение заключения

Если юзер желает разлочить телефон взором, система повторяет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый уровень (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ не предоставляется.

Привыкание к метаморфозам внешности

Занимательная характеристика актуальных систем — возможность самостоятельного обучения. Если вы часто доступаете к телефон с новой стрижкой или очками, система постепенно модернизирует основной шаблон вашего лица для увеличения точности действия без снижения уровня безопасности.

Безопасность биометрических данных.

Большинство пользователи опасаются сохранять свои биометрические идентификационные данные на мобильном устройстве из-за угрозы утечки данных или взлома гаджета. Иные компании, вроде Вулкан Казино Платинум, предлагают варианты для увеличения сохранности сведений юзеров.

Локальное сбережение: Большинство аппаратов сохраняет био-идентификационные модели только внутри безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не покидают устройство и недоступны даже изготовителю.
Шифрование: Все информация сохраняются только в кодированном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Приложения третьих разработчиков не обладают прямого доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Необходимо отметить важную особенность: если какой-то человек сможет получить доступ к вашему телефону физически (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество изготовители реализуют защиту от автоматического разблокирования — к примеру, просят открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются типы определения лиц на изображениях?

В настоящее время можно выделить различить три главных подхода к реализации этой операции:

Программируемое двухмерное распознавание

Применяется только передняя камера без вспомогательных сенсоров дистанции. Такой способ встречается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность воплощения; низкая затраты; быстрая работа при качественном свете.
Минусы: легко одурачить фотографией; ненадежная работа ночью; низкая защищенность.

Оборудование для объёмное оцифровка

Применяет инфракрасную видеокамеру + проекционный модуль точек + сенсоры дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Достоинства: высокая надёжность; нельзя обмануть фото/видео; устойчивая деятельность при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные подходы с ИИ-дополнением

Применяют комбинацию программных методов + аппаратную обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как Vulkan Platinum и Google Pixel Face Unlock современных версий, сочетают фронтальную камеру c инфракрасным датчиком движения Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Образцы применения различных способов

iPhone линейки X/11/12/13/14 применяют только аппаратное трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition впервые представил подобие Face ID в числе Android.
Samsung Galaxy S10/S20 обеспечивают как программное обеспечение двухмерное определение по фото фронтальной камерой, так и сканер ириса глаза.
Huawei Mate20 Pro задействует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Трудности охраны и неверные срабатывания

Несмотря на замечательный прогресс технологий за прошедшие годы, безупречных механизмов пока не существует:

Возможность обмана: Недорогие телефоны просто открываются четкой изображением пользователя либо видео с экрана другого устройства.
Идентичные близняшки: Даже самые безупречные системы могут ошибиться между однояйцевыми близнецами либо родичами с очень схожей внешностью.
Трансформации внешности: Внезапное похудение/набор веса, косметические процедуры либо повреждения порой требуют перерегистрации биометрических данных.
Условия съёмки: Сильная засветка солнцем или глубокая тень могут понизить точность распознавания признаков.

Ниже некоторые подсказок для безопасному применению:

Для важных операций всегда используйте дополнительную аутентификацию;
Не включайте опцию “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
Регулярно обновляйте прошивку смартфона для предотвращения угроз от современных угроз;
Включайте настройку “Требовать раскрытых глаз” везде, где она доступна.

Где ещё находится применение технологии кроме смартфонов?

Пускай тема данной работы сосредоточена на в частности смартфонам и планшетам, стоит упомянуть о других сферах применения технологии:

Контроль входа в деловых центрах и жилых домах;
Платёжные устройства банков (“Face Pay”);
Электронные удостоверения личности последнего типа;
Установки видеоконтроля городских служб;
Автоматизирование регистрации явки образовательных учреждений/вузов;
Авторизация пользователей компьютеров/ноутбуков.

Например: В столичном метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без карты или мобильника! Аналогичные инициативы осуществляются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким образом изменяется техпроцесс сегодня?

Всякий год возникают свежие мысли для усовершенствования уровня работы систем лицевого распознавания:

Увеличивается детализация сенсорных устройств — чем больше информации фиксируется камерой/датчиками глубины, тем меньше шанс неточности;
Развиваются искусственные интеллекты — передовые архитектуры типа MobileNetV3 позволяют скоростно осваивать дополнительным характеристикам внешности владельца непосредственно на девайсе без пересылки информации в облачное хранилище.
Развиваются технологии антиспуфинга — теперь телефоны способны отличать настоящие движущиеся лица от статичных фото/маскировок по незаметным микродвижениям.
Взаимодействие со смарт-гаджетами — интеллектуальные часы могут самостоятельно закрыть доступ к мобильный телефон, если пользователь отошёл далеко.
Проявляются гибридные системы — в частности комбинирующие голосовую опознание + облик + пальцевой отпечаток.

Здесь, которые тенденции в особенности популярны сейчас:

1) Миниатюризация деталей

Изготовители пытаются сократить величину прорези (“чёлки”) для сенсоры на экране за счёт встраивания миниатюрных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на устройстве

Для улучшения личной безопасности всё больше расчётов осуществляется внутри устройства без передачи информации во дополнительный облачный услугу.

3) Стандартизация норм

Google активно продвигает норму BiometricPrompt API, для того чтобы подобные площадки, как Вулкан Платинум, и все Android-программы были совместимы с любыми видами биометрии стандартизированно.

Что подобрать сегодня?

Если тебе нужна предельная защита данных, остановите выбор на топовые аппараты со встроенным ИК-проектором или же ToF-датчиком глубины.

iPhone всех существующих актуальных версий
Huawei Partner/Series P ряда
Xiaomi Expert
Vivo X серии
Oppo Найти Х серии.

Если финансы скромен – лучше предпочесть обычным методам безопасности (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, задействовать только как второстепенную опцию удобства.

Как улучшить комфорт использования возможности?

Есть некоторые хитростей для тех, кто уже пользуется функцию распознавания лица:

Часто обновляйте свою фото-шаблон, если кардинально меняется внешность.
Не пренебрегайте очищать линзу фронтальной камеры – пятна могут понизить точность!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам запускает фотоаппарат как только вы берёте его в руки.
В процессе регистрации постарайтесь сохранять лицо прямо напротив видеоустройства не допуская значительного наклона головы.
Используйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от дисплея.

Возможности развития технологии

В предстоящие времена можно предполагать развития полностью бесконтактных способов распознавания персоны сразу по нескольким биометрическим параметрам одновременно: лицо + звучание + манера ходьбы + манипуляции руками!

Также предполагается развитие свежих подходов защиты личной информации – например, переменное изменение диджитал образца после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из самых увлекательных инноваций нашего периода! Она делает взаимодействие со мобильным устройством удобнее чем раньше, и такие программы, как Вулкан Казино Платинум, могут в разы оптимизировать ваш опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как устроена эта технология в деталях, – сможете вдумчиво выбирать свой очередной девайс!