Каким способом действует распознавание лиц в мобильных устройствах

Зачем мы останавливаемся на разблокирование по лицевому распознаванию

В прошлые годы идентификация физиономий стало одной из самых популярных функций для разблокировки умных телефонов. Всего несколько лет тому назад основная масса использующих довольствовались PIN-кодами, паролями или сканерами отпечатков пальцев. Но с появлением подобных технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь делает эту конкретную возможность такой востребованной? Прежде всего, это комфортно: не нужно запоминать трудные пароли или искать правильный палец в темноте. Кроме того, это быстро: современные программы идентифицируют лицо буквально за доли секунды. В-третью очередь, это впечатление футуристичности — словно в кинолентах про вулкан россия шпионов.

Впрочем за этой видимой простотой прячется целый вселенная комплексных методов и инженерных решений. Попробуем разобраться, как конкретно действует идентификация по лицу в современных смартфонах, какие применяются технологии, насколько они надёжны и что нас ждёт впереди.

Короткая история эволюции технологии

Идентификация лиц как технология имеется уже более 50 годов. Начальные пробы автоматизированного исследования лиц были предприняты еще в 1960-х годах в исследовательских центрах США. Тогда ЭВМ способны были лишь обозначать контуры лица и определять расстояния между глазами и устами на черно-белых снимках.

Изначальные бизнес установки возникли в 1990-х годах, но они были неидеальны: действовали неспешно и часто ошибались. Только с прогрессом синтетических сетей и таких платформ, как вулкан россии, мощных мобильных процессоров определение лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным идентификацией лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать свои решения.

Ключевые шаги работы системы распознавания

Процесс идентификации лица можно условно разделить на несколько ключевых этапов:

1. Идентификация лиц — аппарат выявляет присутствие людского лица в изображении.
2. Извлечение особенностей — механизм исследует контуры лица: конфигурацию зрительных органов, обонятельного органа, уст, положение надбровных дуг.
3. Построение шаблона — создаётся особенный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со образцом — полученный шаблон сравнивается с записанной при регистрации биометрической данными владельца.
5. Принятие решения — если совпадение достаточно значительное, смартфон деблокируется.

Всякий из данных этапов требует особых алгоритмов и усовершенствований для быстрой работы непосредственно на девайсе.

Технические компоненты: что скрыто внутри

Типичная селфи камера.

Простейший простой вариант распознавания облика задействует только фронтальную видеокамеру мобильного устройства. Подобный подход осуществлён во различных доступных версиях Android-девайсов.

Сильные стороны:

• Не нуждается в потребляет дополнительных датчиков.
• Шустро работает при качественном освещении.

Слабые стороны:

• Легко одурачить снимком или роликом.
• Плохо действует при слабом освещённости или необычных точках зрения.

ИК камера и точечный проектор

Более совершенные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс является основой Face ID от Apple.

Как это функционирует:

• Точечный устройство проекции показывает на лицо пользователя невидимую структуру из тысяч инфракрасных меток (например, Face ID применяет около 30 000 меток).
• Инфракрасная камера фиксирует изменение формы этой решетки по поверхности физиономии.
• Создаётся трёхмерная карта глубины глубины, что почти невозможна для имитации типичной снимком или маской.

Преимущества

• Надёжная функционирование даже в полной темноте.
• Большая устойчивость к подделкам.
• Точность распознавания более 99%.

Добавочные сенсорные устройства

В определённых устройствах задействуются также экстра датчики: ToF (Time-of-Flight), которые определяют период движения света до объекта и обратно; Цветные-датчики дальности; специальные лазерные измерители расстояния для формирования более точной 3D-модели лица.

Эти инновации используются наиболее часто во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: синтетический ум в исполнении

Современные механизмы распознавания физиономий невозможны при отсутствии эксплуатации искусственного интеллекта и машинного обучения. Именно благодаря таким технологиям, как вулкан россии, аппарат может идентифицировать юзера даже при трансформациях внешнего вида: новая укладка, щетина, очки или макияж не становятся помехой для открытия.

Детектирование физиономии

На стартовом стадии программа обязана оперативно обнаружить лицо в пределах всего изображения с камеры. Для этой задачи используются многоуровневые классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые натренированы находить лица людей среди множества других объектов.

Пример: алгоритм MTCNN способен распознавать лицо даже при частичном закрытии (например, шалью или ладонью).

Определение важных аспектов

После обнаружения лица система, такая как вулкан россии, вычисляет положение основных точек: уголки глаз, кончик носа, контуры губ и так далее. Как правило применяется от 68 до 128 основных точек на лицевой поверхности.

Это требуется для стабилизации изображения: если пользователь удерживает мобильник под наклоном, или наклонил головку, программа “выпрямляет” картинку до стандартного положения для последующего изучения.

Построение биометрического модели

Далее нейросеть строит компактное математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 флоатов.

Данный формат очень трудно сфальсифицировать: он не хранит само изображение юзера, а лишь особенные особенности его внешности, что делает его совершенным для таких систем, как vulkan russia.

Сопоставление и вынесение решения

Если юзер хочет разлочить мобильник взглядом, программа воспроизводит все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ блокируется.

Приспособление к трансформациям облика

Занимательная характеристика нынешних системы — возможность самостоятельного обучения. Если вы часто разблокируете мобильное устройство с новой прической или очками, программа постепенно обновляет базовый образец вашего облика для улучшения точности функционирования без снижения уровня безопасности.

Охрана биометрии данных.

Множество юзеры боятся держать свои биометрические идентификационные данные на мобильном устройстве из-за риска утечки данных или взлома гаджета. Иные фирмы, такие как vulkan russia, предлагают методы для улучшения безопасности сведений юзеров.

• Локальное хранение: Преимущественно девайсов хранит био-идентификационные модели лишь в пределах защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из аппарат и не доступны в том числе создателю.

• Шифрование: Все информация хранятся только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих девелоперов не имеют непосредственного возможности доступа к биометрическим; они могут лишь запрашивать факт подтверждения личности через системный API.

Необходимо упомянуть важную деталь: если кто-либо сможет получить доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие изготовители внедряют защиту от автоматического разблокирования — в частности, заставляют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают типы определения лиц?

На сегодняшний день можно определить различить 3 главных способа к выполнению этой задачи:

Программируемое двухмерное определение

Используется только фронтальная камера без дополнительных датчиков дистанции. Такой метод встречается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость реализации; минимальная цена; быстрая работа при достаточном освещении.
Минусы: несложно обмануть фотографией; ненадежная работа ночью; слабая защищенность.

Оборудование для 3D оцифровка

Использует инфракрасную видеокамеру + проектор пикселей + сенсоры дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Достоинства: высокая достоверность; нельзя обмануть фото/видео; постоянная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные способы с интеграцией ИИ

Используют комбинацию программируемых методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как вулкан россии и Google Pixel Face Unlock новейших поколений, объединяют фронталку c инфракрасным сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Иллюстрации применения различных способов

• iPhone модели X/11/12/13/14 используют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз представил аналог Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное двухмерное распознавание по фото селфи-камерой, так и сенсор радужки глаза.
• Huawei Mate20 Pro применяет комплекс из ИК-инфракрасного света + Dot Projector + ToF-датчик

Проблемы защиты и ложные тревоги

Несмотря на замечательный прогресс техники за прошедшие лет, безупречных систем пока не имеется:

1. Вероятность подвоха: Доступные телефоны легко доступны высококачественной изображением хозяина либо роликом с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные системы могут спутать между однояйцевыми близнецами либо родственниками с очень аналогичной внешностью.
3. Изменения облика: Внезапное утрата веса/набор веса, хирургические вмешательства или травмы в некоторых случаях требуют обновления данных биометрии.
4. Условия записи: Яркая подсветка солнечным светом или глубокая затенение могут уменьшить аккуратность распознавания признаков.

Ниже некоторые рекомендаций по защищённому применению:

• Для критически важных операций всегда используйте дополнительную аутентификацию;
• Не активируйте возможность “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
• Регулярно апгрейдите программное обеспечение смартфона для защиты от новых видов атак;
• Включайте настройку “Требовать открытых глаз” там, где она имеется.

В каких местах также применяется технология за исключением смартфонов?

Несмотря на то, что основная мысль данной статьи сосредоточена на в частности портативным гаджетам, стоит упомянуть о прочих направлениях внедрения технологии:

• Управление доступа в офисах и жилых домах;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Цифровые удостоверения личности современного типа;
• Комплексы видеомониторинга муниципальных сервисов;
• Механизация отслеживания присутствия школ/университетов;
• Авторизация пользователей ПК/ноутбуков.

Например: В городском метро уже тестируется система платежа проезда по лицу (“Face Pay”) — хватит пройти через барьер без карты или мобильника! Аналогичные инициативы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом меняется технический процесс в наше время?

Каждый годочек проявляются свежие концепции для усовершенствования качества работы систем идентификации лиц:

1. Увеличивается детализация датчиков — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше вероятность ошибки;
2. Совершенствуются нейросети — передовые структуры вида MobileNetV3 позволяют оперативно обучаться новым чертам вида пользователя напрямую на гаджете без отправки данных в облако.
3. Улучшаются технологии антиспуфинга — теперь мобильные устройства умеют распознавать подлинные анимированные облики от статичных фото/масок по незаметным микродвижениям.
4. Синхронизация со умными устройствами — смарт-часы могут авто закрыть доступ к смартфон, если владелец отошёл далеко.
5. Возникают смешанные устройства — в частности комбинирующие аудио опознание + физиономию + дактилоскопический след.

Здесь, какие направления особенно популярны сейчас:

1) Уменьшение деталей

Изготовители намереваются уменьшить величину отверстия (“чёлки”) для сенсоры на экране за счёт внедрения компактных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения личной безопасности всё больше расчётов происходит локально без пересылки данных во сторонний облачный услугу.

3) Унификация норм

Гугл активно пропагандирует норму BiometricPrompt API, чтобы аналогичные платформы, как вулкан россия, и каждые Android-приложения были совместимы с всеми формами биометрии единообразно.

Что подобрать на сегодня?

В случае если вам всем нужна максимальная безопасность информации, выбирайте передовые аппараты с вмонтированным ИК-излучателем либо ToF-сенсором глубины.

• iPhone всех актуальных поколений
• Huawei Companion/Series P серии
• Xiaomi Expert
• Vivo X серии
• Oppo Найти X линейки.

Если средства ограничен – лучше предпочесть классическим методам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в вулкан россия, применять только как опциональную возможность комфорта.

Каким способом увеличить практичность функционирования функции?

Есть некоторые лайфхаков для людей, кто уже пользуется разблокировку через лицо:

1. Часто меняйте свою изображение-шаблон, если значительно изменяется внешний вид.
2. Не забывайте протирать объектив фронтальной камеры – пятна могут снизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам запускает фотоаппарат когда вы поднимаете его.
4. Во время регистрационного процесса постарайтесь держать голову неподвижно впереди объектива не допуская значительного наклона головы.
5. Используйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отворачиваетесь от дисплея.

Будущее эволюции инноваций

В предстоящие периоды можно предполагать возникновения полностью безконтактных способов идентификации индивидуума сразу по нескольким биометрическим параметрам одновременно: лицо + голос + манера ходьбы + движения рук!

Также предполагается развитие современных методов охраны приватности – скажем, переменное корректировка электронного паттерна после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – единственная из самых увлекательных инноваций нашего времени! Она делает общение со мобильным устройством проще чем до этого, и такие программы, как vulkan russia, могут в разы оптимизировать ваш юзерский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы знаете, как устроена эта технология в деталях, – будете в состоянии более осмысленно выбирать свой очередной гаджет!