Каким образом функционирует идентификация лиц в смартфонах

Для чего мы останавливаемся на разблокировку по фейсу

В последние времена определение лиц превратилось в одной из самых распространённых функций для деблокировки мобильных телефонов. Всего несколько лет ранее основная масса использующих удовлетворялись PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением подобных технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект превращает данную особенность очень нужной? Для начала, это практично: не нужно запоминать замысловатые пароли или отыскивать верный палец в тьме. Во-вторых, это быстро: современные алгоритмы идентифицируют лицо фактически за доли секунды. В-третьем пункте, это впечатление футуризма — будто в кинолентах про казино вулкан агентов.

Однако за этой видимой простотой скрывается весь универсум трудных технологий и инженерных концепций. Попробуем разобраться, как конкретно действует распознавание лиц в современных смартфонах, какие существуют технологии, насколько они безопасны и что нас предстоит.

Сжатая повествование эволюции техники

Распознавание лиц как технология имеется уже более пятидесяти годов. Первые попытки автоматического исследования лица были сделаны еще в 1960-х годы в научных учреждениях США. Тогда компьютеры способны были лишь обозначать силуэты черепа и вычислять промежутки между глазами и ртом на черно-белых изображениях.

Начальные торговые системы стали доступны в девяностых годах, но они были несовершенны: работали медленно и часто давали сбои. Только с прогрессом искусственных сетей и таких площадок, как вулкан россии, сильных мобильных чипов идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным идентификацией лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять свои решения.

Ключевые этапы работы механизма определения

Процесс распознавания лица можно условно разделить на несколько важных этапов:

1. Идентификация лица — камера выявляет существование гуманного образа в изображении.
2. Извлечение характеристик — система изучает черты облика: форму зрительных органов, обонятельного органа, уст, позицию бровей.
3. Построение модели — создаётся особенный цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с эталоном — созданный шаблон сравнивается с сохранённой при внесении биометрической информацией владельца.
5. Принятие определения — если сходство достаточно существенное, смартфон открывается.

Любой из указанных этапов запрашивает индивидуальных методов и усовершенствований для быстрой работы прямо на устройстве.

Железные составляющие: что скрыто внутри них

Обычная фронтальная камера.

Наиболее несложный метод определения облика применяет лишь переднюю видеокамеру мобильного устройства. Данный подход реализован во различных недорогих вариантах Android-девайсов.

Плюсы:

• Не нуждается в требует дополнительных датчиков.
• Оперативно работает при качественном освещении.

Недостатки:

• Легко ввести в заблуждение фотографией или роликом.
• Плохо действует при низком освещённости или непривычных точках зрения.

Инфракрасная фотокамера и точечный проекционный аппарат

Более совершенные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология составляет базу Face ID от Apple.

Каким способом это действует:

• Точечный устройство проекции проецирует на лицо пользователя невидимую сетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 меток).
• Инфракрасная камера фиксирует искривление данной сетки по плоскости физиономии.
• Создаётся трехмерная карта глубины, что почти неосуществима для имитации обычной фотографией или маскировкой.

Достоинства

• Надёжная функционирование даже в полной тьме.
• Большая сопротивляемость к фальсификациям.
• Точность идентификации более 99%.

Дополнительные датчики

В определённых устройствах применяются также вспомогательные датчики: ToF (Time-of-Flight), которые фиксируют период движения света до предмета и обратно; Цветные-датчики глубины; специальные оптические лидары для формирования более аккуратной 3D-модели физиономии.

Эти технологии используются чаще всего во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: синтетический интеллект в действии

Текущие системы идентификации лиц невозможны при отсутствии использования искусственного интеллекта и машинного обучения. Именно благодаря таким технологиям, как вулкан россии, гаджет способно распознавать юзера даже при изменениях облика: новая стрижка, щетина, очки или макияж не становятся барьером для разблокировки.

Распознавание физиономии

На первом этапе система должна мгновенно распознать образ лица внутри полного кадра с камеры. Для данной цели применяются последовательные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые натренированы распознавать лица людей среди множества других объектов.

Пример: алгоритм MTCNN способен находить облик даже с частичном закрытии (например, шарфом или рукой).

Идентификация ключевых точек

После обнаружения лица механизм, такая как вулкан россии, определяет расположение главных точек: края глаз, кончик носа, контуры губ и так далее. Часто применяется от 68 до 128 главных точек на лице.

Это необходимо для нормализации изображения: если юзер находится с мобильник под наклоном, или наклонил голову, программа корректирует картинку до нормального состояния для последующего изучения.

Построение биометрического модели

Далее искусственная сеть строит сжатое математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Такой формат весьма затруднительно сфальсифицировать: он не удерживает само изображение пользователя, а лишь особенные черты его облика, что делает его совершенным для таких систем, как vulkan russia.

Сопоставление и осуществление заключения

Если юзер намеревается разлочить мобильник взглядом, программа осуществляет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно больше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ запрещается.

Адаптация к метаморфозам внешнего вида

Увлекательная особенность нынешних системы — способность самостоятельного обучения. Если ты часто открываете телефон с свежей укладкой или очками, алгоритм постепенно модернизирует эталонный модель вашего внешности для увеличения точности действия без ухудшения безопасности.

Охрана биометрических информации.

Большинство клиенты боятся хранить свои биометрические идентификационные данные на смартфоне из-за вероятности потери данных или взлома устройства. Определенные компании, например vulkan russia, предоставляют методы для увеличения сохранности данных клиентов.

• Локальное сбережение: Большинство девайсов хранит био-идентификационные образцы исключительно внутри защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают гаджет и закрыты даже создателю.

• Шифрование: Все данные сберегаются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Программы внешних девелоперов не обладают непосредственного доступа к биометрическим; они могут лишь требовать факт верификации личности через системный API.

Стоит упомянуть существенную подробность: в случае, если какой-то человек получит физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители внедряют защиту от автоматического разблокирования — например, просят раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают типы идентификации лиц на изображениях?

Сегодня можно определить 3 главных метода к осуществлению этой функции:

Программное 2D идентификация

Используется только передняя видеокамера без дополнительных датчиков дистанции. Подобный метод используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность осуществления; низкая цена; быстрая деятельность при качественном свете.
Минусы: просто обмануть фотографией; ненадежная работа ночью; слабая защищенность.

Аппаратное 3D сканирование

Задействует ИК видеокамеру + проекционный модуль пикселей + датчики дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Плюсы: большая надёжность; не получится обмануть изображение/видеозапись; стабильная функционирование при любом освещении.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с интеграцией ИИ

Используют комбинацию программируемых методов + техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, например вулкан россии и Google Pixel Face Unlock новейших версий, комбинируют фронтальную камеру c инфракрасным сенсором движения Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями посторонних устройств.

Образцы эксплуатации разных методов

• iPhone линейки X/11/12/13/14 используют только аппаратное трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые предложил аналог Face ID в числе Android.
• Samsung Galaxy S10 модель/S20 поддерживают как софтверное 2D определение по изображению селфи-камерой, так и сканер глазного ириса.
• Huawei Mate20 Pro применяет систему из ИК-освещения + Dot Projector + ToF-сенсор

Трудности безопасности и ложные срабатывания

Несмотря на поразительный успехи технологий за прошедшие годы, безупречных систем пока не имеется:

1. Вероятность обмана: Недорогие мобильники просто доступны четкой изображением хозяина или же видео с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые идеальные системы могут спутать между однояйцевыми близнецами либо родичами с очень похожей внешностью.
3. Трансформации внешности: Стремительное похудение/увеличение массы тела, косметические процедуры или повреждения иногда необходимы для перерегистрации биометрических данных.
4. Условия записи: Яркая подсветка солнцем либо интенсивная затенение могут снизить аккуратность идентификации признаков.

Здесь некоторые рекомендаций по защищённому использованию:

• Для критически важных операций всегда применяйте двухэтапную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Регулярно обновляйте прошивку прошивку телефона для защиты от актуальных атак;
• Включайте функцию “Требовать распахнутых глаз” везде, где она доступна.

Где ещё используется технологии за исключением смартфонов?

Пускай тема нашей работы сосредоточена на конкретно смартфонам и планшетам, стоит упомянуть о прочих направлениях внедрения технологии:

• Управление прохода в офисах и многоквартирных зданиях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Электронные удостоверения личности нового образца;
• Установки видеомониторинга муниципальных подразделений;
• Механизация учёта явки школ/институтов;
• Авторизация участников компьютеров/ноутбуков.

Например: В городском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или телефона! Похожие программы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом трансформируется технический процесс в нынешнее время?

Любой годочек проявляются свежие концепции для улучшения качества работы систем распознавания лиц:

1. Увеличивается разрешение сенсоров — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше риск ошибки;
2. Улучшаются искусственные интеллекты — современные конструкции типа MobileNetV3 дают возможность оперативно обучаться дополнительным характеристикам облика пользователя прямо на устройстве без пересылки информации в облачное хранилище.
3. Совершенствуются технологии антиспуфинга — теперь смартфоны умеют различать настоящие анимированные облики от неподвижных снимков/маскировок по незаметным движениям кожи.
4. Синхронизация со смарт-гаджетами — умные часы могут автоматически закрыть доступ к мобильный телефон, если обладатель отошёл далеко.
5. Появляются комбинированные механизмы — в частности совмещающие речевую аутентификацию + лицо + пальцевой отпечаток.

Здесь, которые тенденции очень востребованы в данный момент:

1) Миниатюризация элементов

Производители стараются минимизировать размер выреза (“чёлки”) под сенсоры на экране за счёт встраивания компактных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на аппарате

Для улучшения приватности всё больше расчётов осуществляется локально без передачи информации во сторонний облачный сервис.

3) Упорядочивание регламентов

Гугл активно пропагандирует эталон BiometricPrompt API, с целью чтобы аналогичные площадки, например как вулкан россия, и любые Android-аппы могли работать с различными типами биометрии стандартизированно.

Что выбрать на сегодня?

Когда вам всем нужна максимальная сохранность информации, выбирайте передовые модели со встроенным ИК-проектором или же ToF-сенсором глубины.

• iPhone всех новейших версий
• Huawei Partner/P Series серии
• Mix Professional
• Vivo X линейки
• Oppo Find Икс серий.

Если бюджет невелик – лучше отдавать предпочтение классическим методам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в вулкан россия, применять только как опциональную опцию комфорта.

Каким способом улучшить практичность использования возможности?

Есть несколько хитростей для пользователей, кто уже применяет функцию распознавания лица:

1. Периодически обновляйте свою фото-шаблон, если кардинально трансформируется внешний вид.
2. Не пренебрегайте протирать линзу фронтальной камеры – разводы могут снизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам включает фотоаппарат когда вы поднимаете его.
4. При регистрационного процесса пытайтесь держать лицо прямо перед камеры исключая значительного наклона головы.
5. Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отворачиваетесь от дисплея.

Возможности развития техники

В предстоящие годы можно предполагать развития полностью безконтактных способов распознавания персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + манера ходьбы + жесты рук!

Также предполагается возникновение свежих способов охраны конфиденциальности – например, динамическое корректировка диджитал образца после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых увлекательных технологий нашего периода! Она обеспечивает взаимодействие со телефоном комфортнее чем когда-либо прежде, и такие приложения, как vulkan russia, могут значительно улучшить ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы понимаете, как работает эта методика внутри, – будете в состоянии осознаннее выбирать свой следующий устройство!