Каким образом действует идентификация лиц в смартфонах

Для чего мы выбираем разблокировку по лицу

В последние времена распознавание лиц стало одной из наиболее востребованных возможностей для деблокировки мобильных телефонов. Лишь несколько лет назад большинство пользователей довольствовались PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением подобных технологий, например вулкан россия, нам достаточно просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Что превращает эту функцию очень нужной? Во-первых, это комфортно: не нужно помнить замысловатые пароли или искать нужный палец в тьме. Во-вторых, это оперативно: современные системы распознают лицо буквально за мгновение. В-третьих, это впечатление футуристичности — словно в кинофильмах про vulkan casino агентов.

Впрочем за данной на первый взгляд легкостью таится весь универсум сложных техник и инженерных концепций. Попробуем понять, как точно работает идентификация по лицу в актуальных гаджетах, какие применяются способы, насколько они защищены и что нас ожидает в будущем.

Короткая повествование эволюции техники

Идентификация лиц как методика присутствует уже более пятидесяти лет. Первые эксперименты автоматического исследования лиц были предприняты еще в 1960-х годах в исследовательских центрах США. Тогда ЭВМ могли лишь выделять очертания головы и определять промежутки между глазами и ртом на монохромных изображениях.

Изначальные торговые платформы возникли в 90-х, но они были далеки от совершенства: действовали неспешно и нередко ошибались. Только с прогрессом нейронных сетей и таких платформ, как вулкан россии, мощных мобильных микросхем распознавание лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным сканированием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать свои разработки.

Главные стадии работы системы идентификации

Процесс определения лица можно примерно разделить на несколько важных этапов:

Распознавание лиц — камера распознает присутствие гуманного лица в изображении.
Выделение особенностей — алгоритм анализирует контуры физиономии: очертания глаз, обонятельного органа, губ, расположение надбровных дуг.
Построение шаблона — создаётся неповторимый электронный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с стандартом — созданный образец сопоставляется со зафиксированной при внесении биометрической сведениями владельца.
Принятие выбора — если совпадение достаточно значительное, смартфон деблокируется.

Всякий из указанных этапов нуждается в специальных процедур и улучшений для оперативной работы непосредственно на девайсе.

Технические составляющие: что скрыто внутри них

Стандартная передняя камера.

Самый легкий вариант определения облика применяет лишь фронтальную видеокамеру мобильного устройства. Подобный способ внедрён во многочисленных доступных моделях Android-устройств.

Плюсы:

Не нуждается в потребляет дополнительные датчиков.
Оперативно действует при хорошем свете.

Отрицательные стороны:

Легко одурачить изображением или видеозаписью.
Неудачно функционирует при низком свете или нестандартных углах обзора.

ИК фотокамера и точечный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс лежит в основе Face ID от Apple.

Как это функционирует:

Точечный устройство проекции проецирует на физиономию пользователя невидимую структуру из тысяч инфракрасных точек (например, Face ID применяет около 30 000 меток).
Инфракрасная камера записывает искривление этой сетки по плоскости лица.
Формируется трёхмерная карта глубины, что практически неподвластна для подделки типичной снимком или маскировкой.

Плюсы

Надёжная функционирование даже в полной неосвещённости.
Большая защита к подделкам.
Точность идентификации более 99%.

Дополнительные сенсоры

В определённых девайсах задействуются также дополнительные сенсоры: ToF (Time-of-Flight), которые измеряют время движения света до объекта и обратно; RGB-датчики глубины; специальные лазерные лидары для построения более точной 3D-модели физиономии.

Эти инновации встречаются наиболее часто во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искусственный ум в работе

Текущие системы опознания физиономий невозможны в отсутствие эксплуатации artificial intelligence и machine learning. Именно из-за таким инновациям, как вулкан россии, устройство способно идентифицировать пользователя даже при метаморфозах облика: новая стрижка, борода, оптика или косметика не становятся помехой для деблокировки.

Распознавание лиц

В начальном стадии программа обязана мгновенно найти лицо внутри полного изображения камеры. Для этой задачи применяются каскадные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые “обучены” распознавать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN может распознавать физиономию даже при частичном закрытии (например, шарфом или ладонью).

Выделение основных точек

После обнаружения лица система, такая как вулкан россии, определяет местоположение главных точек: края глаз, кончик носа, контуры губ и так далее. Как правило задействуется от 68 до 128 ключевых маркеров на лице.

Это необходимо для стабилизации картинки: если человек находится с смартфон под углом, или склонил головку, программа “выпрямляет” картинку до нормального состояния для последующего изучения.

Формирование биометрии модели

Далее искусственная сеть строит сжатое математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след лица длиной от 128 до 512 вещественных чисел.

Этот образец весьма трудно подделать: он не удерживает непосредственно фото пользователя, а лишь уникальные характеристики его облика, что делает его совершенным для таких систем, как vulkan russia.

Сравнительный анализ и принятие выбора

Если человек желает разлочить телефон взором, механизм повторяет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый границу (обычно больше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ не предоставляется.

Адаптация к трансформациям внешнего вида

Увлекательная особенность актуальных систем — способность самообучения. Если ты часто открываете телефон с свежей укладкой или очками, программа постепенно обновляет базовый образец вашего облика для увеличения точности действия без снижения уровня безопасности.

Охрана биометрии информации.

Большинство пользователи опасаются держать свои биометрические данные на смартфоне из-за угрозы утечки данных или взлома гаджета. Определенные компании, вроде vulkan russia, предлагают варианты для увеличения защиты сведений клиентов.

Локальное сбережение: Большинство девайсов хранит биометричные образцы исключительно внутри защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют устройство и недоступны даже изготовителю.
Шифрование: Все информация сохраняются только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция приложений: Приложения третьих разработчиков не имеют прямого доступа к биометрическим данным; они могут лишь требовать факт верификации идентичности через системный API.

Следует отметить важную подробность: в случае, если какой-то человек получит доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители внедряют меры безопасности от автоматического разблокирования — к примеру, просят разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют виды распознавания лиц?

В настоящее время можно выделить определить три ключевых метода к выполнению этой операции:

Софтверное плоское определение

Эксплуатируется только лицевая видеокамера без дополнительных датчиков дистанции. Такой метод используется обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость осуществления; минимальная стоимость; быстрая функционирование при качественном свете.
Минусы: легко одурачить снимком; нестабильная деятельность ночью; низкая защищенность.

Аппаратное объёмное сканирование

Применяет инфракрасную камеру + проекционный модуль точек + сенсоры глубины (Face ID от Apple; аналогичные технологии у Huawei Mate).
Плюсы: высокая достоверность; невозможно обмануть фото/видео; стабильная работа при любом освещении.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с дополнением ИИ

Применяют комбинацию программируемых методов + аппаратно-техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например вулкан россии и Google Pixel Face Unlock новейших версий, комбинируют фронталку c инфракрасным сенсором движения Soli Radar для предотвращения от фальсификаций жестами/масками/видеоэкранами чужих устройств.

Иллюстрации использования различных способов

iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition первый раз представил эквивалент Face ID среди Android.
Samsung Galaxy S10 модель/S20 обеспечивают как софтверное 2D распознавание по изображению фронталкой, так и сканер глазного ириса.
Huawei Mate20 Pro применяет систему из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Трудности безопасности и неверные сигналы

Несмотря на впечатляющий прогресс техники за недавние годы, совершенных систем пока не наблюдается:

Возможность подвоха: Недорогие телефоны легко “разблокируются” качественной изображением пользователя или роликом с экрана другого устройства.
Идентичные близняшки: Даже самые безупречные устройства могут ошибиться между однояйцевыми близнецами либо родичами с очень похожей внешностью.
Метаморфозы внешности: Резкое утрата веса/увеличение массы тела, пластические операции либо повреждения порой необходимы для перерегистрации биометрических данных.
Условия записи: Яркая засветка солнцем или же глубокая тень могут снизить верность определения признаков.

Здесь пара рекомендаций по безопасному использованию:

Для критически важных операций всегда внедряйте двухфакторную аутентификацию;
Не активируйте возможность “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
Постоянно обновляйте прошивку ПО смартфона для предотвращения угроз от современных угроз;
Включайте опцию “Требовать раскрытых глаз” везде, где она доступна.

В каких местах дополнительно используется технологии помимо мобильных телефонов?

Несмотря на то, что предмет нашей публикации касается в частности мобильным устройствам, необходимо сказать о прочих направлениях внедрения технологии:

Управление входа в деловых центрах и резиденциях;
Платёжные терминалы финансовых учреждений (“Face Pay”);
Цифровые удостоверения личности последнего образца;
Комплексы видеомониторинга городских сервисов;
Автоматизирование отслеживания явки учебных заведений/институтов;
Вход юзеров ПК/ноутбуков.

Например: В московском метро уже тестируется система платежа проезда по лицу (“Face Pay”) — хватит пройти через барьер без пластика или телефона! Похожие проекты реализуются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом трансформируется технический процесс сегодня?

Любой год появляются современные концепции для улучшения уровня функционирования систем идентификации лиц:

Увеличивается чёткость датчиков — чем больше информации фиксируется фотоаппаратом/датчиками глубины, тем меньше риск ошибки;
Улучшаются нейросети — новейшие конструкции типа MobileNetV3 позволяют быстро адаптироваться к дополнительным особенностям облика обладателя напрямую на гаджете без пересылки информации в облачное хранилище.
Совершенствуются методы антиспуфинга — теперь смартфоны способны отличать настоящие движущиеся лица от статичных фото/масок по незаметным микродвижениям.
Взаимодействие со умными устройствами — смарт-часы могут авто заблокировать смартфон, если владелец отошёл далеко.
Проявляются комбинированные системы — к примеру совмещающие голосовую опознание + облик + дактилоскопический след.

Итак, те тренды очень актуальны сейчас:

1) Сокращение компонентов

Компании пытаются минимизировать габариты выреза (“чёлки”) под датчики на дисплее за счёт интеграции миниатюрных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на девайсе

Для увеличения личной безопасности всё больше расчётов происходит локально без отправки данных во сторонний облачный сервис.

3) Упорядочивание регламентов

Гугл активно пропагандирует норму BiometricPrompt API, с целью чтобы подобные системы, как вулкан россия, и все Android-аппы могли работать с различными типами биометрии единообразно.

Какое решить сегодня?

Когда вам всем важна предельная сохранность информации, выбирайте флагманские устройства с интегрированным ИК-излучателем или ToF-сенсором глубины.

iPhone всех существующих актуальных моделей
Huawei Partner/P Series ряда
Mix Pro
Vivo X линейки
Оппо Обнаружить Х линейки.

Если финансы скромен – лучше отдавать предпочтение классическим методам защиты (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в вулкан россия, применять только как второстепенную возможность удобства.

Каким способом увеличить комфорт работы возможности?

Есть некоторые хитростей для людей, кто уже применяет разблокировку через лицо:

Регулярно обновляйте свою фото-шаблон, если значительно изменяется внешний вид.
Не пренебрегайте очищать линзу фронтальной камеры – пятна могут понизить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам активирует фотоаппарат когда вы берёте его в руки.
В процессе записи пытайтесь сохранять голову ровно впереди видеоустройства не допуская резкого наклона головы.
Используйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отвернулись от экрана.

Возможности эволюции технологии

В скоро наступающие периоды можно предвкушать развития полностью бесконтактных способов опознания человека сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + походка + жесты рук!

Также предполагается развитие современных методов обеспечения приватности – например, переменное корректировка цифрового образца после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых увлекательных техник нашего эпохи! Она предоставляет общение со телефоном удобнее чем когда-либо прежде, и такие аппы, как vulkan russia, могут в разы улучшить ваш опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы знаете, как работает эта технология в деталях, – сможете осознаннее подбирать свой будущий гаджет!