Каким способом действует распознавание лиц в смартфонах

Зачем мы останавливаемся на разблокировку по лицу

В последние годы распознавание физиономий стало одной из самых популярных возможностей для деблокировки умных телефонов. Лишь пару лет назад большинство использующих обходились пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением таких технологий, например Spinto, нам вполне просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какая вещь превращает эту возможность очень нужной? Прежде всего, это практично: не нужно помнить сложные пароли или находить нужный палец в мраке. Кроме того, это быстро: современные программы узнают лицо буквально за мгновение. В-третьем пункте, это чувство футуристичности — словно в фильмах про casino spinto разведчиков.

Тем не менее за такой кажущейся несложностью таится весь мир комплексных техник и инженерных концепций. Попробуем разобраться, как конкретно функционирует идентификация по лицу в современных гаджетах, какие бывают способы, насколько они защищены и что нас предстоит.

Краткая хроника прогресса техники

Идентификация лиц как технология имеется уже более пятидесяти годов. Изначальные эксперименты машинного изучения облика были осуществлены еще в 1960-х годах в лабораториях США. Тогда ЭВМ могли лишь определять очертания черепа и измерять расстояния между глазами и губами на черно-белых изображениях.

Изначальные торговые платформы возникли в 90-х, но они были неидеальны: функционировали медленно и часто давали сбои. Только с прогрессом нейронных сетей и таких систем, как Спинто, мощных мобильных микросхем распознавание лиц стало по-настоящему массовым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным распознаванием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать собственные решения.

Основные стадии функционирования устройства идентификации

Процесс определения лица можно ориентировочно сегментировать на несколько ключевых этапов:

Идентификация лиц — устройство определяет наличие гуманного образа в снимке.
Извлечение признаков — механизм исследует контуры физиономии: форму глаз, носа, губ, положение бровей.
Построение структуры — создаётся неповторимый виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со образцом — сформированный образец сравнивается с сохранённой при внесении биометрической информацией владельца.
Принятие выбора — если соответствие достаточно высокое, смартфон разблокируется.

Каждый из указанных этапов требует особых методов и улучшений для скорой работы непосредственно на девайсе.

Железные компоненты: что скрыто в их недрах

Стандартная селфи камера.

Наиболее несложный вариант определения лица задействует исключительно лицевую камеру смартфона мобильного устройства. Данный способ осуществлён во различных бюджетных вариантах Android-девайсов.

Достоинства:

Не нуждается в нуждается в дополнительные сенсоров.
Быстро функционирует при качественном освещении.

Слабые стороны:

Просто обмануть изображением или видео.
Плохо функционирует при плохом освещении или непривычных точках зрения.

ИК камера и точечный проекционный аппарат

Более совершенные системы, такие как Спинто, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология является основой Face ID от Apple.

Каким образом это действует:

Точечный проектор проецирует на лицо использующего невидимую структуру из тысяч инфракрасных меток (например, Face ID задействует около 30 000 точек).
Инфракрасная устройство записывает изменение формы данной решетки по поверхности лица.
Формируется 3D глубинная карта глубинности, которая почти неподвластна для фальсификации обычной фотографией или маской.

Достоинства

Надёжная работа даже в полной неосвещённости.
Сильная сопротивляемость к фальсификациям.
Точность определения свыше 99%.

Дополнительные датчики

В отдельных устройствах задействуются также экстра датчики: ToF (Time-of-Flight), которые фиксируют время прохождения света до объекта и обратно; Цветные-датчики дальности; специальные лазерные дальномеры для создания более детализированной 3D-модели лица.

Эти разработки применяются в основном во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: искуственный интеллект в исполнении

Нынешние устройства распознавания лиц неосуществимы без использования ИИ и машинного обучения. Именно из-за таким инновациям, как Спинто, аппарат способно узнавать юзера даже при трансформациях внешности: новая стрижка, растительность на лице, оптика или косметика не становятся препятствием для разблокировки.

Детектирование физиономии

При первом шаге алгоритм обязана мгновенно обнаружить лицо среди всего кадра камеры. Для этой задачи задействуются многоуровневые классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены находить человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN способен находить физиономию даже в случае частичном закрытии (например, платком или ладонью).

Определение основных точек

После обнаружения лица механизм, такая как Спинто, определяет расположение ключевых точек: уголки глаз, конец носа, контуры губ и так далее. Часто задействуется от 68 до 128 ключевых меток на лицевой поверхности.

Данное требуется для выравнивания визуала: если пользователь удерживает мобильник под наклоном, или склонил головку, программа корректирует изображение до обычного угла для дальнейшего анализа.

Формирование биометрического идентификатора образца

Далее нейросеть строит сжатое цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 чисел с плавающей запятой.

Данный образец крайне сложно имитировать: он не сохраняет непосредственно изображение пользователя, а лишь особенные черты его облика, что делает его совершенным для таких систем, как Спинто казино.

Сравнительный анализ и вынесение решения

В случае, когда человек намеревается открыть смартфон взором, механизм повторяет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный порог (обычно выше 99%), телефон, как и платформа Спинто казино, открывается; если нет — доступ блокируется.

Приспособление к трансформациям внешности

Интересная характеристика нынешних системы — способность самообучения. Если вы постоянно открываете смартфон с свежей укладкой или оптикой, система постепенно модернизирует эталонный шаблон вашего облика для увеличения точности действия без ухудшения безопасности.

Охрана биометрии данных.

Большинство клиенты боятся хранить свои биометрические данные на телефоне из-за риска утечки информации или взлома гаджета. Определенные организации, такие как Спинто казино, предлагают решения для улучшения безопасности сведений пользователей.

Локальное хранение: Большинство девайсов записывает био-идентификационные образцы лишь внутри защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют устройство и не доступны включая создателю.
Шифрование: Все информация сохраняются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция программ: Приложения внешних девелоперов не обладают непосредственного доступа к биометрическим данным; они могут лишь требовать факт подтверждения идентичности через системный API.

Стоит отметить важную деталь: если кто-то достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители реализуют меры безопасности от автоматического разблокирования — в частности, требуют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются категории определения лиц?

Сегодня можно определить определить 3 основных метода к осуществлению этой функции:

Программируемое 2D идентификация

Применяется только передняя видеокамера без экстра сенсоров глубины. Подобный подход используется обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность реализации; минимальная затраты; оперативная деятельность при достаточном освещении.
Минусы: просто одурачить фотографией; неустойчивая работа ночью; слабая безопасность.

Техническое 3D оцифровка

Задействует ИК видеокамеру + проектор точек + датчики глубины (Face ID от Apple; аналогичные технологии у Huawei Mate).
Достоинства: высокая достоверность; не получится обмануть фото/видео; устойчивая функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные способы с дополнением ИИ

Используют комбинацию программируемых методов + аппаратную обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как Спинто и Google Pixel Face Unlock последних версий, сочетают фронталку c ИК сенсором мобильности Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.

Образцы эксплуатации разных способов

iPhone линейки X/11/12/13/14 применяют только физическое трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition первый раз внедрил подобие Face ID в ряду Android.
Samsung Galaxy S10 модель/S20 имеют как программное двухмерное идентификацию по изображению фронтальной камерой, так и сенсор ириса глаза.
Huawei Mate20 Pro задействует систему из ИК-подсветки + Dot Projector + ToF-сенсор

Трудности безопасности и неверные сигналы

Несмотря на замечательный успехи инноваций за последние годы, идеальных систем пока не наблюдается:

Возможность подвоха: Бюджетные смартфоны без труда “разблокируются” качественной изображением хозяина или же видео с дисплея иного гаджета.
Идентичные близнецы: Даже самые безупречные устройства могут ошибиться между монозиготными близнецами либо родичами с очень аналогичной внешностью.
Трансформации внешнего вида: Внезапное похудение/увеличение массы тела, пластические операции или травмы в некоторых случаях требуют обновления данных биометрических данных.
Условия съёмки: Интенсивная освещённость солнцем или интенсивная затенение могут уменьшить верность распознавания признаков.

Вот некоторые рекомендаций для безопасному эксплуатации:

Для значимых операций всегда внедряйте двухфакторную аутентификацию;
Не запускайте функцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
Постоянно обновляйте прошивку телефона для предотвращения угроз от современных угроз;
Включайте функцию “Требовать открытых глаз” в тех местах, где она есть.

В каких местах ещё используется технологии кроме смартфонов?

Пускай основная мысль данной публикации сосредоточена на конкретно портативным гаджетам, необходимо сказать о альтернативных областях использования технологии:

Мониторинг прохода в офисах и многоквартирных зданиях;
Платёжные устройства финансовых учреждений (“Face Pay”);
Цифровые идентификационные документы современного поколения;
Комплексы видеомониторинга городских подразделений;
Автоматизация учёта присутствия образовательных учреждений/университетов;
Аутентификация пользователей персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по лицу (“Face Pay”) — достаточно пройти через барьер без пластика или мобильника! Похожие проекты реализуются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом изменяется технический процесс в нынешнее время?

Любой годик возникают свежие концепции для улучшения уровня работы систем лицевого распознавания:

Увеличивается чёткость датчиков — чем больше элементов фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность неточности;
Развиваются искусственные интеллекты — современные конструкции модели MobileNetV3 позволяют быстро осваивать свежим чертам облика владельца напрямую на гаджете без отправки данных в облако.
Развиваются способы антиспуфинга — теперь мобильные устройства могут отличать подлинные анимированные лица от статичных фото/масок по мельчайшим движениям кожи.
Взаимодействие со умными устройствами — умные часы могут самостоятельно закрыть доступ к телефон, если владелец удалился на значительное расстояние.
Появляются гибридные устройства — к примеру комбинирующие голосовую аутентификацию + лицо + отпечаток пальца.

Здесь, те тренды очень популярны на сегодняшний день:

1) Сокращение деталей

Производители намереваются сократить размер прорези (“чёлки”) для датчики на экране за счёт встраивания компактных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на аппарате

Для улучшения приватности всё более вычислений осуществляется локально без отправки информации во внешний облачный сервис.

3) Упорядочивание норм

Гугл энергично продвигает норму BiometricPrompt API, с целью чтобы такие платформы, как Spinto, и каждые Android-аппы могли работать с всеми формами биометрии стандартизированно.

Какое подобрать на сегодня?

Когда вам нужна максимальная защита информации, подбирайте топовые устройства с вмонтированным ИК-излучателем или ToF-датчиком глубины.

iPhone каждого последних моделей
Huawei Partner/P ряда
Mi Pro
Vivo X серии
Оппо Найти Икс серий.

Если финансы невелик – лучше предпочесть обычным средствам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в Spinto, применять только как опциональную опцию удобства.

Как улучшить комфорт функционирования опции?

Есть некоторые лайфхаков для пользователей, кто уже применяет разблокировку по лицу:

Периодически обновляйте свою фотографию-шаблон, если значительно меняется облик.
Не пренебрегайте протирать объектив фронтальной камеры – разводы могут уменьшить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам включает фотоаппарат когда вы берёте его в руки.
Во время записи постарайтесь сохранять лицевую часть неподвижно перед объектива исключая резкого наклона головы.
Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от дисплея.

Перспективы прогресса технологии

В предстоящие периоды можно предвкушать развития полностью дистанционных способов идентификации индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + звучание + манера ходьбы + жесты рук!

Также возможно развитие новых подходов охраны личной информации – например, переменное корректировка диджитал образца после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее увлекательных техник нашего времени! Она обеспечивает интеракцию со мобильным устройством удобнее чем до этого, и такие приложения, как Спинто казино, могут в разы повысить ваш пользовательский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как функционирует эта система изнутри, – будете в состоянии вдумчиво выбирать свой следующий гаджет!