Каким образом действует определение лиц в мобильных устройствах

Зачем мы предпочитаем разблокирование по лицевому распознаванию

В прошлые времена определение лиц является одной из самых популярных функций для открытия умных телефонов. Всего несколько лет назад большинство пользователей удовлетворялись пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением подобных технологий, например вулкан россия, нам достаточно просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект делает данную возможность такой востребованной? Прежде всего, это удобно: не нужно удерживать в памяти трудные пароли или находить правильный палец в мраке. Кроме того, это быстро: современные алгоритмы распознают лицо буквально за мгновения ока. В-третьем пункте, это впечатление футуристичности — как будто в кинолентах про vulkan russia агентов.

Впрочем за такой кажущейся несложностью прячется целый вселенная сложных методов и инженерных решений. Попробуем разобраться, как точно действует фейсканирование в современных мобильных телефонах, какие существуют способы, насколько они безопасны и что нас предстоит.

Краткая повествование эволюции технологии

Распознавание лиц как техника имеется уже более 50 лет. Изначальные попытки автоматизированного анализа облика были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда вычислительные машины могли лишь определять контуры лица и определять дистанции между очами и губами на монохромных изображениях.

Изначальные коммерческие платформы возникли в 1990-х годах, но они были несовершенны: работали медленно и часто давали сбои. Только с эволюцией искусственных сетей и таких площадок, как вулкан россии, высокопроизводительных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным сканированием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать собственные разработки.

Основные стадии работы механизма определения

Процесс идентификации лица можно ориентировочно сегментировать на несколько важных этапов:

1. Распознавание лиц — камера распознает наличие человеческого образа в снимке.
2. Извлечение признаков — система исследует черты лица: форму зрительных органов, обонятельного органа, губ, положение надбровных дуг.
3. Построение шаблона — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с образцом — полученный образец сопоставляется с записанной при внесении биометрической информацией владельца.
5. Принятие решения — если соответствие достаточно существенное, смартфон открывается.

Всякий из данных шагов нуждается в специальных методов и усовершенствований для быстрой работы прямо на устройстве.

Аппаратные элементы: что находится в их недрах

Стандартная селфи камера.

Самый простой простой метод идентификации лица применяет только переднюю камеру смартфона смартфона. Такой метод внедрён во многочисленных доступных версиях Android-девайсов.

Плюсы:

• Не нуждается в требует внешних датчиков.
• Шустро функционирует при качественном свете.

Недостатки:

• Легко обмануть снимком или роликом.
• Неправильно действует при плохом свете или необычных углах обзора.

ИК камера и пунктирный проекционный аппарат

Более совершенные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика является основой Face ID от Apple.

Каким способом это действует:

• Точечный проектор показывает на лицо юзера невидимую сетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 меток).
• ИК камера регистрирует искривление этой сетки по плоскости лица.
• Формируется трехмерная карта глубины, что почти что неосуществима для фальсификации обычной фотографией или маской.

Достоинства

• Надёжная функционирование даже в полной неосвещённости.
• Сильная устойчивость к подделкам.
• Точность идентификации свыше 99%.

Добавочные сенсоры

В определённых девайсах применяются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые определяют период движения луча до объекта и обратно; Цветные-датчики дальности; специальные световые дальномеры для формирования более точной 3D-модели физиономии.

Эти разработки применяются наиболее часто во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искусственный разум на работе

Текущие устройства распознавания лиц неосуществимы при отсутствии использования ИИ и machine learning. Именно из-за таким разработкам, как вулкан россии, гаджет может распознавать владельца даже при метаморфозах внешности: новая укладка, борода, линзы или косметика не становятся препятствием для деблокировки.

Детектирование лиц

При стартовом шаге система обязана быстро обнаружить лицо в пределах полного изображения с камеры. Для данной цели применяются каскадные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые натренированы распознавать лиц человека среди множества других объектов.

Пример: процесс MTCNN в состоянии распознавать физиономию даже с неполном перекрытии (например, шарфом или рукой).

Выделение важных точек

После идентификации лица устройство, такая как вулкан россии, устанавливает местоположение главных точек: уголки глаз, кончик носа, края губ и так далее. Обычно применяется от 68 до 128 основных меток на лицевой поверхности.

Данное необходимо для выравнивания картинки: если человек держит телефон под наклоном, или наклонил голову, программа “выпрямляет” картинку до стандартного положения для последующего изучения.

Формирование биометрии шаблона

Далее нейронная сеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 чисел с плавающей запятой.

Этот шаблон весьма сложно сфальсифицировать: он не удерживает непосредственно картинку юзера, а лишь исключительные характеристики его облика, что делает его оптимальным для таких платформ, как vulkan russia.

Сопоставление и вынесение решения

В случае, когда человек намеревается открыть телефон взглядом, механизм повторяет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный уровень (обычно выше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ запрещается.

Приспособление к метаморфозам облика

Увлекательная черта нынешних систем — возможность самостоятельного обучения. Если вы часто доступаете к мобильное устройство с новой стрижкой или оптикой, алгоритм постепенно освежает базовый модель вашего облика для улучшения точности функционирования без ухудшения безопасности.

Охрана биометрии данных.

Большинство клиенты опасаются держать свои био-идентификационные данные на мобильном устройстве из-за риска потери данных или взлома устройства. Некоторые компании, такие как vulkan russia, предоставляют решения для улучшения сохранности данных клиентов.

• Локальное сбережение: Большинство аппаратов хранит биометричные образцы исключительно внутрь безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают гаджет и закрыты включая создателю.

• Шифрование: Все данные сберегаются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Приложения сторонних девелоперов не имеют непосредственного возможности доступа к биометрическим; они могут лишь требовать факт подтверждения личности через системный API.

Следует отметить значимую подробность: в случае, если кто-либо сможет получить физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество изготовители осуществляют меры безопасности от неосознанного разблокирования — к примеру, заставляют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют категории распознавания лиц?

Сегодня можно выделить выделить три ключевых метода к реализации этой операции:

Программируемое 2D определение

Применяется только фронтальная видеокамера без вспомогательных датчиков дистанции. Такой способ используется чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; умеренная цена; скоростная деятельность при качественном свете.
Минусы: легко одурачить фотографией; нестабильная функционирование ночью; слабая охрана.

Техническое трёхмерное оцифровка

Задействует ИК камеру + проекционный модуль точек + сенсоры дистанции (Face ID у Apple; аналогичные решения у Huawei Mate).
Преимущества: высокая надежность; не получится подделать изображение/видеозапись; устойчивая деятельность при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с дополнением ИИ

Применяют комбинацию программных методов + аппаратно-техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например вулкан россии и Google Pixel Face Unlock современных поколений, объединяют фронталку c ИК сенсором движения Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями посторонних устройств.

Иллюстрации применения разнообразных техник

• iPhone модели X/11/12/13/14 применяют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз внедрил подобие Face ID среди Android.
• Samsung Galaxy S10 версия/S20 поддерживают как софтверное 2D распознавание по фото селфи-камерой, так и сканер ириса глаза.
• Huawei Mate20 Pro применяет набор из ИК-инфракрасного света + Dot Projector + ToF-датчик

Проблемы защиты и неверные сигналы

Несмотря на впечатляющий успехи инноваций за недавние годы, идеальных систем пока не существует:

1. Шанс обмана: Бюджетные мобильники без труда “разблокируются” четкой изображением пользователя или видео с экрана другого устройства.
2. Идентичные двойняшки: Даже самые идеальные устройства могут ошибиться между однояйцевыми близнецами либо родственниками с очень аналогичной внешностью.
3. Метаморфозы внешнего вида: Стремительное утрата веса/увеличение массы тела, косметические процедуры или повреждения иногда необходимы для перерегистрации биометрических данных.
4. Условия съёмки: Сильная освещённость солнцем либо глубокая темнота могут понизить точность идентификации признаков.

Ниже несколько подсказок по надёжному использованию:

• Для критически важных операций всегда внедряйте двухфакторную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Регулярно обновляйте прошивку прошивку мобильного устройства для обеспечения безопасности от актуальных атак;
• Включайте опцию “Требовать раскрытых глаз” в тех местах, где она есть.

В каких местах ещё используется технология за исключением смартфонов?

Несмотря на то, что предмет этой публикации посвящена именно портативным гаджетам, стоит упомянуть о прочих направлениях внедрения технологии:

• Управление прохода в рабочих помещениях и резиденциях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Электронные удостоверения личности последнего поколения;
• Системы видеонаблюдения муниципальных служб;
• Механизация учёта присутствия образовательных учреждений/вузов;
• Вход участников ПК/ноутбуков.

Например: В столичном метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без карты или мобильника! Аналогичные инициативы развиваются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом изменяется техпроцесс в наше время?

Любой год возникают свежие мысли для улучшения уровня работы систем идентификации лиц:

1. Увеличивается детализация сенсорных устройств — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность неточности;
2. Совершенствуются искусственные интеллекты — передовые конструкции типа MobileNetV3 позволяют оперативно адаптироваться к новым чертам вида владельца непосредственно на девайсе без отправки данных в облако.
3. Совершенствуются способы антиспуфинга — теперь телефоны могут различать подлинные движущиеся облики от статичных фотографий/маскировок по микроскопическим движениям кожи.
4. Синхронизация со умными устройствами — интеллектуальные часы могут самостоятельно закрыть доступ к мобильный телефон, если пользователь отошёл далеко.
5. Проявляются комбинированные устройства — например объединяющие аудио опознание + облик + дактилоскопический след.

Итак, те тренды очень актуальны в данный момент:

1) Миниатюризация компонентов

Производители пытаются сократить величину прорези (“чёлки”) под сенсоры на дисплее за счёт интеграции компактных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для улучшения личной безопасности всё больше вычислений выполняется на месте без отправки данных во сторонний облачный услугу.

3) Упорядочивание норм

Гугл активно пропагандирует норму BiometricPrompt API, чтобы подобные системы, как вулкан россия, и каждые Android-приложения могли работать с различными типами биометрии унифицированно.

Какое выбрать на сегодня?

Если вам нужна предельная защита данных, выбирайте топовые модели со встроенным ИК-излучателем либо ToF-сенсором глубины.

• iPhone всех существующих новейших поколений
• Huawei Partner/P ряда
• Mi Professional
• Vivo X серии
• Oppo Обнаружить Х линейки.

Если средства ограничен – лучше предпочесть классическим средствам защиты (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в вулкан россия, применять только как опциональную опцию удобства.

Каким образом увеличить комфорт работы функции?

Есть некоторые советов для тех, кто уже использует функцию распознавания лица:

1. Часто обновляйте свою фотографию-шаблон, если сильно изменяется внешность.
2. Не забывайте чистить объектив фронтальной камеры – пятна могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам включает камеру если вы берёте его в руки.
4. Во время регистрационного процесса пытайтесь удерживать лицевую часть прямо перед видеоустройства без сильного наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отвернулись от дисплея.

Будущее эволюции инноваций

В скоро наступающие годы можно предвкушать развития полностью дистанционных способов распознавания человека сразу по нескольким биометрическим данным параметрам одновременно: физиономия + звучание + походка + жесты рук!

Также возможно возникновение свежих способов защиты приватности – например, переменное модификация электронного шаблона после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень увлекательных технологий нашего периода! Она обеспечивает общение со телефоном комфортнее чем когда-либо прежде, и такие приложения, как vulkan russia, могут существенно повысить ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы осведомлены, как устроена эта технология внутри, – сможете осознаннее подбирать свой следующий устройство!