Как действует распознавание лиц в мобильных устройствах

Почему мы останавливаемся на разлочивание по лицевому распознаванию

В последние времена идентификация физиономий является одной из наиболее востребованных возможностей для деблокировки мобильных телефонов. Всего несколько годков назад основная масса использующих довольствовались пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением подобных технологий, как Вулкан Платинум, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что превращает данную возможность такой востребованной? Прежде всего, это комфортно: не нужно помнить сложные пароли или отыскивать правильный палец в мраке. Кроме того, это мгновенно: современные программы узнают лицо практически за мгновение. В-третью очередь, это ощущение будущего — словно в кинолентах про вулкан платинум зеркало разведчиков.

Однако за такой на первый взгляд легкостью таится полный мир сложных методов и инженерных решений. Позвольте нам понять, как именно работает идентификация по лицу в актуальных смартфонах, какие применяются методы, насколько они защищены и что нас ждёт впереди.

Сжатая повествование прогресса техники

Распознавание лиц как методика существует уже более пятидесяти лет. Начальные эксперименты автоматизированного анализа лица были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда компьютеры способны были лишь обозначать контуры головы и определять промежутки между очами и устами на ахроматических фотографиях.

Начальные коммерческие системы стали доступны в 1990-х годах, но они были далеки от совершенства: работали медленно и нередко ошибались. Только с прогрессом синтетических сетей и таких систем, как Vulkan Platinum, сильных мобильных чипов определение лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным распознаванием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали интегрировать свои разработки.

Ключевые этапы действия устройства распознавания

Процесс идентификации лица можно условно сегментировать на несколько ключевых этапов:

1. Идентификация лица — устройство распознает существование человеческого лица в изображении.
2. Выделение особенностей — алгоритм изучает черты физиономии: форму зрительных органов, носа, губ, позицию надбровных дуг.
3. Построение структуры — создаётся уникальный цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с стандартом — полученный шаблон сопоставляется со сохранённой при внесении биометрической информацией владельца.
5. Принятие определения — если соответствие достаточно высокое, смартфон разблокируется.

Каждый из указанных этапов нуждается в специальных алгоритмов и улучшений для оперативной работы непосредственно на девайсе.

Железные элементы: что скрыто в их недрах

Типичная передняя камера.

Наиболее легкий вариант идентификации физиономии использует исключительно переднюю камеру смартфона. Такой способ внедрён во многих бюджетных моделях Android-устройств.

Плюсы:

• Не требует внешних датчиков.
• Быстро действует при достаточном освещении.

Слабые стороны:

• Легко одурачить снимком или видео.
• Неудачно функционирует при слабом свете или непривычных углах обзора.

ИК фотокамера и точечный проектор

Более усовершенствованные системы, такие как Vulkan Platinum, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология составляет базу Face ID от Apple.

Каким образом это действует:

• Точечный устройство проекции проецирует на облик юзера невидимую структуру из тысяч инфракрасных точек (например, Face ID задействует около 30 000 пятен).
• ИК устройство регистрирует деформацию данной сетки по поверхности лица.
• Создаётся трёхмерная глубинная карта глубины, которая почти неподвластна для имитации обычной снимком или маской.

Достоинства

• Надёжная функционирование даже в полной темноте.
• Большая устойчивость к подделкам.
• Точность распознавания свыше 99%.

Дополнительные сенсорные устройства

В некоторых девайсах задействуются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые определяют период прохождения луча до объекта и обратно; Трехцветные-датчики дальности; специальные лазерные лидары для формирования более точной 3D-модели лица.

Эти разработки используются в основном во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искуственный ум на действии

Современные устройства распознавания физиономий немыслимы в отсутствие эксплуатации ИИ и machine learning. Именно из-за таким инновациям, как Vulkan Platinum, аппарат способно узнавать пользователя даже при трансформациях внешности: новая причёска, щетина, очки или макияж не становятся барьером для открытия.

Обнаружение физиономии

В начальном стадии программа необходимо оперативно распознать лицо среди всего кадра камеры. Для данной цели применяются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые “обучены” идентифицировать лиц человека среди множества других объектов.

Пример: процесс MTCNN способен находить облик даже в случае частичном перекрытии (например, шалью или ладонью).

Выделение важных точек

После идентификации лица механизм, такая как Vulkan Platinum, определяет расположение главных точек: кончики глаз, верхушка носа, контуры губ и так далее. Как правило задействуется от 68 до 128 главных меток на лице.

Это требуется для стабилизации визуала: если юзер держит мобильник под углом, или склонил голову, программа исправляет изображение до нормального состояния для дальнейшего анализа.

Построение биометрии образца

Далее искусственная сеть строит сжатое числовое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 чисел с плавающей запятой.

Такой шаблон очень затруднительно подделать: он не сохраняет само картинку юзера, а лишь особенные особенности его внешности, что делает его оптимальным для таких систем, как Вулкан Казино Платинум.

Сравнение и осуществление решения

В случае, когда юзер намеревается разблокировать мобильник взглядом, программа воспроизводит все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный уровень (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ блокируется.

Привыкание к трансформациям облика

Интересная черта современных систем — способность самообучения. Если вы часто разблокируете мобильное устройство с свежей укладкой или оптикой, программа постепенно освежает базовый модель вашего внешности для повышения точности работы без ухудшения безопасности.

Безопасность биометрии данных.

Многие юзеры опасаются держать свои био-идентификационные данные на телефоне из-за риска утечки информации или хакерской атаки. Определенные фирмы, вроде Вулкан Казино Платинум, предоставляют решения для улучшения безопасности сведений пользователей.

• Локальное сбережение: Большинство девайсов записывает биометричные модели исключительно внутрь безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют устройство и закрыты даже создателю.

• Шифрование: Все информация сохраняются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения внешних девелоперов не имеют непосредственного доступа к биометрическим данным; они могут лишь требовать факт верификации личности через системный API.

Стоит отметить важную подробность: если какой-то человек сможет получить физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители реализуют систему защиты от неосознанного разблокирования — в частности, заставляют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие бывают категории распознавания лиц на изображениях?

Сегодня можно различить три главных метода к осуществлению этой задачи:

Софтверное двухмерное идентификация

Используется только передняя камера без экстра детекторов дистанции. Этот подход наблюдается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность осуществления; низкая цена; быстрая деятельность при достаточном освещении.
Минусы: легко ввести в заблуждение фотографией; нестабильная функционирование ночью; недостаточная охрана.

Техническое 3D сканирование

Задействует ИК камеру + проектор пикселей + датчики дистанции (Face ID у Apple; аналогичные решения у Huawei Mate).
Преимущества: значительная достоверность; не получится подделать изображение/видеозапись; постоянная работа при любом освещении.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Гибридные подходы с интеграцией ИИ

Задействуют комбинацию софтверных методов + аппаратную обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие товары, например Vulkan Platinum и Google Pixel Face Unlock последних поколений, объединяют фронталку c инфракрасным датчиком движения Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.

Примеры использования разнообразных техник

• iPhone серии X/11/12/13/14 применяют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз предложил аналог Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное плоское распознавание по изображению фронталкой, так и датчик глазного ириса.
• Huawei Mate20 Pro применяет комплекс из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Проблемы защиты и неверные тревоги

Несмотря на впечатляющий развитие инноваций за последние лет, совершенных механизмов пока не существует:

1. Вероятность мошенничества: Доступные мобильники просто открываются качественной снимком хозяина или же роликом с экрана другого устройства.
2. Идентичные двойняшки: Даже самые безупречные устройства могут спутать между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
3. Изменения внешности: Резкое снижение веса/набор веса, косметические процедуры или травмы порой требуют обновления данных биометрии.
4. Условия фотографирования: Сильная освещённость солнечным светом либо плотная тень могут уменьшить точность идентификации признаков.

Вот некоторые советов для защищённому применению:

• Для значимых операций всегда применяйте двухэтапную аутентификацию;
• Не запускайте функцию “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Регулярно апгрейдите прошивку мобильного устройства для предотвращения угроз от современных угроз;
• Включайте опцию “Требовать раскрытых глаз” в тех местах, где она имеется.

В каких местах ещё находится применение технология кроме смартфонов?

Несмотря на то, что предмет нашей работы посвящена конкретно мобильным устройствам, стоит упомянуть о прочих направлениях внедрения технологии:

• Контроль входа в офисах и резиденциях;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Цифровые удостоверения личности нового типа;
• Установки видеомониторинга муниципальных сервисов;
• Механизация регистрации явки образовательных учреждений/университетов;
• Аутентификация участников персональных компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — хватит пройти через барьер без пластика или мобильника! Схожие проекты осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом меняется технический процесс в наше время?

Любой год возникают современные мысли для улучшения качества функционирования систем идентификации лиц:

1. Увеличивается детализация сенсорных устройств — чем больше информации фиксируется фотоаппаратом/датчиками глубины, тем меньше риск неточности;
2. Совершенствуются искусственные интеллекты — новейшие структуры вида MobileNetV3 позволяют скоростно обучаться дополнительным характеристикам внешности владельца непосредственно на девайсе без отправки данных в облако.
3. Совершенствуются методы антиспуфинга — теперь телефоны умеют различать подлинные анимированные облики от неподвижных снимков/масок по незаметным микродвижениям.
4. Взаимодействие со интеллектуальными приборами — умные часы могут авто заблокировать смартфон, если владелец ушёл далеко.
5. Проявляются смешанные устройства — к примеру объединяющие аудио опознание + облик + дактилоскопический след.

Итак, те тенденции очень востребованы в данный момент:

1) Уменьшение деталей

Изготовители стараются сократить размер отверстия (“чёлки”) для сенсоры на дисплее за счёт внедрения компактных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для улучшения личной безопасности всё более вычислений осуществляется внутри устройства без отправки данных во сторонний облачный сервис.

3) Стандартизация стандартов

Гугл интенсивно продвигает эталон BiometricPrompt API, с целью чтобы подобные системы, например как Вулкан Платинум, и любые Android-приложения могли работать с всеми формами биометрии стандартизированно.

Что решить сегодня?

В случае если вам всем важна максимальная защита информации, подбирайте флагманские аппараты с вмонтированным ИК-излучателем либо ToF-датчиком глубины.

• iPhone всех последних версий
• Huawei Companion/P линейки
• Mix Professional
• Vivo X серии
• Oppo Обнаружить X линейки.

Если средства ограничен – лучше выбирать обычным средствам безопасности (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как дополнительную возможность удобства.

Каким образом повысить комфорт функционирования функции?

Есть несколько лайфхаков для людей, кто уже использует функцию распознавания лица:

1. Регулярно обновляйте свою фотографию-шаблон, если значительно трансформируется внешность.
2. Не пренебрегайте очищать объектив передней камеры – пятна могут понизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам запускает камеру если вы поднимаете его.
4. В процессе регистрации старайтесь сохранять голову ровно впереди видеоустройства не допуская резкого наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от дисплея.

Возможности развития инноваций

В скоро наступающие времена можно предвкушать развития полностью бесконтактных способов идентификации персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + речь + манера ходьбы + движения рук!

Также возможно возникновение свежих способов охраны личной информации – к примеру, динамическое корректировка цифрового шаблона после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из самых захватывающих техник нашего периода! Она делает взаимодействие со телефоном комфортнее чем когда-либо прежде, и такие приложения, как Вулкан Казино Платинум, могут существенно оптимизировать ваш юзерский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы осведомлены, как работает эта методика изнутри, – сумеете более осмысленно определять свой будущий устройство!