Каким способом работает идентификация лиц в мобильных устройствах

Для чего мы останавливаемся на разблокирование по лицу

В недавние времена распознавание лиц является одной из наиболее востребованных функций для открытия умных телефонов. Еще пару годков ранее основная масса юзеров довольствовались PIN-кодами, паролями или датчиками отпечатков пальцев. Но с появлением таких технологий, как вулкан россия, нам вполне лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Какая вещь делает эту особенность такой востребованной? Во-первых, это комфортно: не нужно запоминать замысловатые пароли или искать нужный палец в тьме. Также, это мгновенно: современные алгоритмы узнают лицо практически за мгновение. В-третьих, это впечатление футуристичности — словно в фильмах про vulkan russia разведчиков.

Тем не менее за такой видимой простотой таится целый мир сложных техник и инженерных решений. Позвольте нам исследовать, как точно функционирует идентификация по лицу в современных мобильных телефонах, какие бывают технологии, насколько они надёжны и что нас ждёт впереди.

Сжатая история прогресса инноваций

Распознавание лиц как техника существует уже более 50 годов. Первые пробы автоматизированного анализа лиц были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда вычислительные машины умели лишь обозначать очертания лица и определять дистанции между очами и ртом на черно-белых фотографиях.

Изначальные бизнес установки появились в 90-х, но они были далеки от совершенства: работали медленно и часто ошибались. Только с прогрессом синтетических сетей и таких площадок, как вулкан россии, сильных мобильных микросхем распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным идентификацией лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять собственные разработки.

Главные этапы действия устройства определения

Процесс идентификации лица можно примерно разделить на несколько основных этапов:

1. Распознавание лица — аппарат выявляет присутствие гуманного образа в изображении.
2. Извлечение характеристик — алгоритм исследует черты облика: конфигурацию глаз, обонятельного органа, губ, позицию бровей.
3. Построение шаблона — создаётся особенный виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с образцом — созданный шаблон сравнивается со зафиксированной при внесении биометрической информацией владельца.
5. Принятие выбора — если соответствие достаточно существенное, смартфон деблокируется.

Всякий из указанных шагов запрашивает особых методов и усовершенствований для оперативной работы прямо на устройстве.

Аппаратные компоненты: что прячется внутри

Стандартная селфи камера.

Простейший несложный метод распознавания облика применяет исключительно переднюю видеокамеру мобильного устройства. Подобный способ внедрён во многих недорогих моделях Android-девайсов.

Достоинства:

• Необходимо нуждается в внешних сенсоров.
• Оперативно действует при качественном освещении.

Недостатки:

• Несложно одурачить снимком или роликом.
• Плохо функционирует при слабом освещённости или непривычных углах обзора.

ИК камера и точечный проектор

Более продвинутые системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс составляет базу Face ID от Apple.

Как это работает:

• Точечный проектор проецирует на облик юзера невидимую структуру из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 точек).
• Инфракрасная камера фиксирует изменение формы этой сетки по плоскости лица.
• Формируется трёхмерная карта глубины, что почти неподвластна для фальсификации типичной фотографией или маскировкой.

Выигрыши

• Надёжная работа даже в полной неосвещённости.
• Большая устойчивость к имитациям.
• Точность идентификации свыше 99%.

Дополнительные сенсорные устройства

В определённых аппаратах задействуются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые измеряют время прохождения луча до предмета и обратно; Цветные-датчики дальности; специальные световые дальномеры для формирования более точной 3D-модели лица.

Эти инновации используются в основном во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искуственный ум в работе

Нынешние механизмы идентификации физиономий немыслимы в отсутствие эксплуатации ИИ и machine learning. Именно благодаря таким технологиям, как вулкан россии, аппарат может узнавать владельца даже при изменениях облика: новая стрижка, растительность на лице, оптика или грим не становятся препятствием для разблокировки.

Детектирование физиономии

При первом шаге система необходимо быстро найти ликовое изображение среди целого изображения камеры. Для этого применяются каскадные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые “обучены” находить лиц человека среди множества других объектов.

Пример: алгоритм MTCNN способен находить облик даже с частичном перекрытии (например, шарфом или ладонью).

Определение важных моментов

После обнаружения лица система, такая как вулкан россии, вычисляет расположение главных точек: края глаз, конец носа, контуры губ и так далее. Как правило применяется от 68 до 128 главных маркеров на лицевой поверхности.

Это действие нужно для стабилизации визуала: если человек удерживает смартфон под углом, или наклонил головку, программа “выпрямляет” картинку до обычного угла для последующего изучения.

Формирование биометрического образца

Далее искусственная сеть строит компактное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след лица длиной от 128 до 512 флоатов.

Данный формат весьма затруднительно подделать: он не хранит само фото юзера, а лишь исключительные особенности его внешности, что делает его совершенным для таких систем, как vulkan russia.

Сопоставление и принятие решения

Если юзер хочет разблокировать телефон взглядом, механизм воспроизводит все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный границу (обычно превышает 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ не предоставляется.

Привыкание к изменениям внешнего вида

Увлекательная особенность нынешних системы — способность самостоятельного обучения. Если вы регулярно открываете смартфон с обновленной стрижкой или очками, система постепенно модернизирует эталонный модель вашего лица для повышения точности работы без снижения уровня безопасности.

Безопасность биометрических информации.

Множество юзеры беспокоятся хранить свои биометрические данные на телефоне из-за вероятности утечки данных или взлома гаджета. Определенные фирмы, такие как vulkan russia, предоставляют варианты для улучшения защиты информации юзеров.

• Локальное сбережение: Основная часть аппаратов хранит био-идентификационные модели исключительно внутрь защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не оставляют устройство и недоступны включая производителю.

• Шифрование: Все сведения хранятся только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних разработчиков не обладают непосредственного доступа к биометрическим данным; они могут лишь требовать подтверждение верификации идентичности через системный API.

Следует подчеркнуть значимую подробность: если кто-то достанет доступ к вашему телефону физически (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие компании осуществляют защиту от автоматического разблокирования — к примеру, заставляют раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие имеются категории распознавания лиц?

В настоящее время можно различить 3 ключевых метода к выполнению этой операции:

Программное двухмерное распознавание

Применяется только передняя видеокамера без дополнительных датчиков глубины. Такой способ встречается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота осуществления; минимальная стоимость; быстрая функционирование при хорошем свете.
Минусы: легко одурачить снимком; ненадежная работа ночью; недостаточная защищенность.

Оборудование для трёхмерное сканирование

Задействует инфракрасную камеру + проекционный модуль точек + датчики глубины (Face ID у Apple; подобные решения у Huawei Mate).
Плюсы: значительная надежность; невозможно подделать фото/видео; устойчивая работа при любом освещении.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с дополнением ИИ

Используют комбинацию софтверных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например вулкан россии и Google Pixel Face Unlock последних версий, сочетают фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для предотвращения от фальсификаций руками/масками/видеоэкранами чужих устройств.

Иллюстрации эксплуатации разнообразных методов

• iPhone линейки X/11/12/13/14 применяют только аппаратное трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз представил аналог Face ID в ряду Android.
• Samsung Galaxy S10/S20 имеют как программное 2D определение по снимку фронтальной камерой, так и сенсор глазного ириса.
• Huawei Mate20 Pro применяет набор из ИК-освещения + Dot Projector + ToF-сенсор

Трудности безопасности и неверные тревоги

Несмотря на поразительный прогресс технологий за последние лет, безупречных систем пока не наблюдается:

1. Вероятность мошенничества: Доступные мобильники просто доступны четкой изображением пользователя или видеозаписью с экрана другого устройства.
2. Идентичные близнецы: Даже самые идеальные устройства могут перепутать между однояйцевыми близнецами либо семьями с очень схожей внешностью.
3. Изменения внешности: Резкое похудение/набор веса, пластические операции или травмы в некоторых случаях требуют обновления данных биометрических данных.
4. Условия съёмки: Яркая подсветка солнцем либо глубокая тень могут уменьшить верность определения признаков.

Вот несколько советов для надёжному использованию:

• Для важных операций всегда используйте дополнительную аутентификацию;
• Не запускайте функцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Постоянно обновляйте прошивку телефона для предотвращения угроз от новых видов атак;
• Включайте опцию “Требовать открытых глаз” там, где она имеется.

В каких местах дополнительно используется технологии помимо смартфонов?

Несмотря на то, что предмет этой публикации посвящена в частности мобильным устройствам, необходимо сказать о других сферах применения технологии:

• Управление доступа в деловых центрах и жилых домах;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Виртуальные удостоверения личности современного образца;
• Комплексы видеонаблюдения городских сервисов;
• Автоматизирование отслеживания присутствия образовательных учреждений/вузов;
• Авторизация участников персональных компьютеров/ноутбуков.

Например: В городском метро уже тестируется система платежа проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или мобильника! Похожие программы реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом трансформируется технология сегодня?

Всякий год возникают свежие концепции для улучшения стандарта функционирования систем лицевого распознавания:

1. Увеличивается разрешение сенсоров — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность ошибки;
2. Улучшаются нейронные сети — современные конструкции вида MobileNetV3 позволяют скоростно адаптироваться к свежим чертам облика обладателя напрямую на гаджете без пересылки информации в облачное хранилище.
3. Развиваются технологии антиспуфинга — теперь телефоны могут отличать реальные живые лица от неподвижных фотографий/маскировок по незаметным микродвижениям.
4. Синхронизация со интеллектуальными приборами — умные часы могут самостоятельно заблокировать смартфон, если обладатель удалился на значительное расстояние.
5. Появляются комбинированные устройства — в частности объединяющие речевую опознание + облик + пальцевой отпечаток.

Вот, которые тренды особенно популярны на сегодняшний день:

1) Уменьшение элементов

Компании намереваются сократить величину выреза (“чёлки”) для датчики на экране за счёт встраивания маленьких ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на девайсе

Для улучшения приватности всё больше обработки данных выполняется на месте без пересылки информации во сторонний облачный сервис.

3) Упорядочивание регламентов

Гугл энергично продвигает эталон BiometricPrompt API, чтобы такие платформы, как вулкан россия, и все Android-приложения были совместимы с различными типами биометрии единообразно.

Что выбрать сегодня?

Когда тебе важна наивысшая сохранность информации, остановите выбор на флагманские аппараты с интегрированным ИК-излучателем или же ToF-датчиком глубины.

• iPhone каждого актуальных моделей
• Huawei Companion/Series P ряда
• Mix Professional
• Vivo X модели
• Oppo Find Икс линейки.

Если бюджет ограничен – лучше предпочесть классическим средствам защиты (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в вулкан россия, применять только как второстепенную опцию комфорта.

Как увеличить удобство работы опции?

Есть некоторые советов для тех, кто уже использует разблокировку по лицу:

1. Периодически меняйте свою изображение-шаблон, если значительно меняется внешность.
2. Не пренебрегайте протирать линзу фронтальной камеры – загрязнения могут снизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам включает фотоаппарат когда вы берёте его в руки.
4. Во время регистрации пытайтесь сохранять лицо прямо напротив видеоустройства не допуская резкого наклона головы.
5. Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвернулись от экрана.

Перспективы прогресса техники

В ближайшие годы можно предвкушать развития полностью бесконтактных способов идентификации человека сразу по нескольким биометрическим данным параметрам одновременно: физиономия + звучание + манера ходьбы + движения рук!

Также предполагается появление современных подходов защиты приватности – к примеру, изменяющееся корректировка цифрового паттерна после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее захватывающих инноваций нашего эпохи! Она предоставляет интеракцию со мобильным устройством удобнее чем раньше, и такие программы, как vulkan russia, могут существенно повысить ваш опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы понимаете, как работает эта технология внутри, – сумеете вдумчиво определять свой следующий устройство!