Каким образом функционирует идентификация лицевых образов в мобильных устройствах

Зачем мы предпочитаем разблокировку по лицу

В прошлые годы распознавание физиономий стало одной из самых популярных опций для разблокировки смартфонов. Еще пару годов назад большинство юзеров удовлетворялись PIN-кодами, паролями или датчиками отпечатков пальцев. Но с появлением подобных технологий, как вулкан россия, нам достаточно просто взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь превращает эту особенность очень нужной? Прежде всего, это удобно: не нужно удерживать в памяти трудные пароли или отыскивать верный палец в темноте. Кроме того, это оперативно: современные системы идентифицируют лицо практически за мгновение. В-третьих, это впечатление футуристичности — будто в кинолентах про vulkan casino разведчиков.

Тем не менее за данной на первый взгляд легкостью прячется целый универсум комплексных технологий и инженерных разработок. Попробуем исследовать, как точно функционирует распознавание лиц в современных мобильных телефонах, какие применяются технологии, насколько они защищены и что нас ждёт впереди.

Сжатая хроника прогресса техники

Распознавание лиц как методика существует уже более 50 лет. Первые эксперименты машинного исследования лиц были предприняты еще в 1960-х годах в научных учреждениях США. Тогда вычислительные машины способны были лишь выделять очертания головы и измерять промежутки между глазами и ртом на монохромных изображениях.

Первые торговые системы появились в девяностых годах, но они были далеки от совершенства: функционировали медленно и нередко ошибались. Только с развитием нейронных сетей и таких площадок, как вулкан россии, высокопроизводительных мобильных чипов определение лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать свои разработки.

Ключевые стадии действия системы идентификации

Процесс распознавания лица можно примерно разделить на несколько важных этапов:

1. Распознавание лица — аппарат выявляет наличие гуманного образа в снимке.
2. Определение особенностей — алгоритм исследует особенности физиономии: конфигурацию зрительных органов, носа, уст, расположение надбровных дуг.
3. Построение шаблона — создаётся неповторимый виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с стандартом — полученный образец сверяется со записанной при учёте биометрической данными владельца.
5. Принятие выбора — если совпадение достаточно высокое, смартфон открывается.

Любой из данных шагов нуждается в специальных методов и улучшений для оперативной работы прямо на устройстве.

Железные элементы: что прячется внутри

Обычная селфи камера.

Простейший несложный вариант идентификации физиономии применяет лишь лицевую камеру смартфона смартфона. Такой подход реализован во многих бюджетных вариантах Android-устройств.

Достоинства:

• Необходимо нуждается в дополнительных сенсоров.
• Оперативно работает при достаточном освещённости.

Слабые стороны:

• Несложно ввести в заблуждение снимком или видео.
• Плохо работает при слабом освещённости или необычных ракурсах.

Инфракрасная камера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика лежит в основе Face ID от Apple.

Как это действует:

• Точечный проекционный прибор проецирует на физиономию юзера невидимую решетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 точек).
• Инфракрасная камера записывает искривление данной решетки по поверхности физиономии.
• Формируется 3D глубинная карта глубины, что почти невозможна для имитации обычной снимком или маской.

Плюсы

• Надёжная работа даже в полной неосвещённости.
• Сильная сопротивляемость к подделкам.
• Точность идентификации свыше 99%.

Дополнительные сенсорные устройства

В отдельных устройствах применяются также экстра датчики: ToF (Time-of-Flight), которые измеряют период движения света до цели и обратно; RGB-датчики дальности; специальные лазерные дальномеры для формирования более детализированной 3D-модели физиономии.

Эти инновации встречаются наиболее часто во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: синтетический интеллект в исполнении

Современные системы идентификации лиц неосуществимы без использования artificial intelligence и machine learning. Именно из-за таким инновациям, как вулкан россии, устройство в состоянии распознавать пользователя даже при изменениях внешнего вида: новая стрижка, борода, оптика или грим не становятся помехой для деблокировки.

Распознавание лиц

На начальном шаге система необходимо оперативно обнаружить образ лица среди полного изображения камеры. Для этого задействуются каскадные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые подготовлены распознавать лица людей среди множества других объектов.

Пример: метод MTCNN в состоянии обнаруживать облик даже при частичном закрытии (например, шарфом или рукой).

Выделение ключевых точек

После распознавания лица система, такая как вулкан россии, вычисляет положение главных точек: края глаз, верхушка носа, контуры губ и так далее. Обычно задействуется от 68 до 128 главных меток на лице.

Это действие необходимо для выравнивания изображения: если пользователь находится с мобильник под углом, или наклонил головку, программа корректирует изображение до обычного угла для дальнейшего анализа.

Формирование биометрического идентификатора модели

Далее нейронная сеть строит компактное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Данный образец крайне трудно подделать: он не хранит само фото пользователя, а лишь исключительные особенности его вида, что делает его идеальным для таких площадок, как vulkan russia.

Сопоставление и осуществление заключения

Если человек намеревается открыть смартфон взором, механизм воспроизводит все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый границу (обычно превышает 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ запрещается.

Привыкание к изменениям внешнего вида

Интересная характеристика актуальных систем — способность самообучения. Если вы постоянно доступаете к мобильное устройство с обновленной прической или оптикой, алгоритм постепенно модернизирует базовый образец вашего облика для увеличения точности действия без ухудшения безопасности.

Защита биометрических данных информации.

Множество юзеры опасаются хранить свои биометрические идентификационные данные на смартфоне из-за риска утечки информации или хакерской атаки. Некоторые организации, такие как vulkan russia, предлагают решения для увеличения безопасности сведений юзеров.

• Локальное хранение: Преимущественно девайсов хранит биометрические шаблоны лишь в пределах безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают гаджет и недоступны в том числе создателю.

• Шифрование: Все информация сохраняются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних разработчиков не обладают непосредственного доступа к биометрическим; они могут лишь требовать подтверждение верификации идентичности через системный API.

Необходимо отметить важную деталь: если какой-то человек сможет получить физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество изготовители реализуют систему защиты от неосознанного разблокирования — в частности, заставляют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают категории определения лиц на изображениях?

В настоящее время можно выделить три основных подхода к реализации этой задачи:

Софтверное 2D идентификация

Применяется только лицевая камера без дополнительных сенсоров дистанции. Этот метод наблюдается обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость воплощения; умеренная цена; скоростная функционирование при хорошем свете.
Минусы: несложно обмануть фотографией; неустойчивая работа ночью; низкая защищенность.

Аппаратное объёмное оцифровка

Задействует инфракрасную видеокамеру + проектор точек + сенсоры глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Достоинства: высокая надежность; нельзя обмануть изображение/видеозапись; постоянная работа в любых условиях освещения.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с интеграцией ИИ

Задействуют комбинацию программных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например вулкан россии и Google Pixel Face Unlock современных поколений, комбинируют фронталку c инфракрасным датчиком движения Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями чужих устройств.

Примеры эксплуатации различных техник

• iPhone линейки X/11/12/13/14 применяют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID среди Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как софтверное двухмерное идентификацию по фото фронталкой, так и сенсор ириса глаза.
• Huawei Mate20 Pro применяет набор из ИК-освещения + Dot Projector + ToF-датчик

Проблемы охраны и ошибочные сигналы

Несмотря на поразительный успехи технологий за прошедшие лет, совершенных механизмов пока не имеется:

1. Возможность мошенничества: Доступные мобильники без труда открываются качественной изображением владельца или видеозаписью с экрана другого устройства.
2. Идентичные двойняшки: Даже самые совершенные устройства могут перепутать между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
3. Трансформации облика: Стремительное утрата веса/набор веса, косметические процедуры или повреждения порой необходимы для обновления данных биометрических данных.
4. Условия съёмки: Интенсивная подсветка солнцем или глубокая темнота могут понизить аккуратность распознавания признаков.

Ниже несколько советов для защищённому применению:

• Для критически важных операций всегда используйте двухфакторную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Систематически апгрейдите прошивку телефона для обеспечения безопасности от новых видов атак;
• Включайте настройку “Требовать открытых глаз” в тех местах, где она есть.

В каких местах дополнительно применяется технология за исключением смартфонов?

Несмотря на то, что основная мысль этой статьи сосредоточена на конкретно смартфонам и планшетам, необходимо сказать о альтернативных областях использования технологии:

• Мониторинг доступа в деловых центрах и многоквартирных зданиях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Электронные идентификационные документы нового образца;
• Комплексы видеонаблюдения городских служб;
• Автоматизация отслеживания посещаемости школ/университетов;
• Вход участников компьютеров/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без пластика или телефона! Аналогичные программы реализуются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом изменяется техпроцесс в нынешнее время?

Каждый годик возникают новые мысли для повышения качества деятельности систем лицевого распознавания:

1. Увеличивается детализация сенсоров — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше риск неточности;
2. Совершенствуются искусственные интеллекты — современные архитектуры вида MobileNetV3 позволяют быстро осваивать свежим особенностям вида пользователя непосредственно на девайсе без отправки данных в облако.
3. Совершенствуются методы антиспуфинга — теперь телефоны умеют распознавать реальные живые лица от фиксированных снимков/масок по незаметным микродвижениям.
4. Взаимодействие со интеллектуальными приборами — умные часы могут автоматически заблокировать смартфон, если пользователь удалился на значительное расстояние.
5. Появляются гибридные устройства — к примеру совмещающие голосовую идентификацию + физиономию + дактилоскопический след.

Вот, которые тенденции в особенности актуальны в данный момент:

1) Сокращение деталей

Компании пытаются сократить габариты выреза (“чёлки”) для сенсоры на экране за счёт интеграции компактных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на аппарате

Для увеличения приватности всё больше обработки данных происходит локально без передачи данных во внешний облачный услугу.

3) Унификация стандартов

Гугл активно продвигает эталон BiometricPrompt API, чтобы подобные площадки, как вулкан россия, и каждые Android-программы могли работать с различными типами биометрии стандартизированно.

Что подобрать на сегодня?

Когда тебе необходима максимальная сохранность данных, подбирайте топовые модели со встроенным ИК-проектором или же ToF-сенсором глубины.

• iPhone всех существующих последних версий
• Huawei Partner/P линейки
• Mix Expert
• Vivo X модели
• Oppo Обнаружить X серии.

Если бюджет ограничен – лучше отдавать предпочтение классическим средствам защиты (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную возможность комфорта.

Как повысить практичность работы опции?

Есть некоторые советов для пользователей, кто уже пользуется разблокировку через лицо:

1. Периодически обновляйте свою фотографию-шаблон, если кардинально трансформируется облик.
2. Не забывайте очищать объектив фронтальной камеры – загрязнения могут снизить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам запускает фотоаппарат как только вы поднимаете его.
4. При записи пытайтесь удерживать голову ровно перед камеры без резкого наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отворачиваетесь от дисплея.

Перспективы эволюции технологии

В скоро наступающие времена можно предполагать развития полностью бесконтактных способов опознания персоны сразу по нескольким биометрическим параметрам одновременно: облик + голос + шаги + манипуляции руками!

Также вероятно возникновение современных способов защиты личной информации – скажем, динамическое модификация цифрового паттерна после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых интересных техник нашего периода! Она делает интеракцию со телефоном проще чем до этого, и такие аппы, как vulkan russia, могут в разы улучшить ваш опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как функционирует эта методика изнутри, – будете в состоянии вдумчиво подбирать свой будущий гаджет!