Каким образом действует определение лиц в мобильных устройствах

Для чего мы предпочитаем разблокировку по лицевому распознаванию

В недавние годы определение физиономий является одной из самых популярных возможностей для открытия мобильных телефонов. Еще некоторые годов ранее основная масса пользователей обходились пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением таких технологий, как Вулкан Платинум, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь делает эту возможность очень нужной? Во-первых, это удобно: не нужно удерживать в памяти замысловатые пароли или искать нужный палец в темноте. Также, это быстро: современные алгоритмы узнают лицо буквально за мгновение. В-третьих, это ощущение футуризма — словно в фильмах про казино Вулкан шпионов.

Тем не менее за такой кажущейся легкостью таится целый вселенная комплексных техник и инженерных разработок. Давайте разобраться, как именно работает фейсканирование в актуальных смартфонах, какие применяются методы, насколько они надёжны и что нас предстоит.

Короткая история эволюции технологии

Распознавание лиц как техника имеется уже более пятидесяти годов. Изначальные пробы машинного анализа лиц были сделаны еще в 1960-х годы в лабораториях США. Тогда вычислительные машины умели лишь определять очертания головы и измерять промежутки между очами и губами на черно-белых снимках.

Начальные бизнес платформы стали доступны в девяностых годах, но они были несовершенны: работали медленно и нередко ошибались. Только с развитием синтетических сетей и таких систем, как Vulkan Platinum, высокопроизводительных мобильных микросхем идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным распознаванием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать собственные разработки.

Главные стадии действия системы определения

Процесс определения лица можно условно поделить на несколько ключевых этапов:

1. Идентификация лица — аппарат определяет наличие людского образа в изображении.
2. Выделение особенностей — механизм исследует черты облика: конфигурацию зрительных органов, носа, уст, расположение бровей.
3. Построение структуры — создаётся уникальный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со образцом — полученный образец сравнивается с записанной при регистрации биометрической сведениями владельца.
5. Принятие выбора — если совпадение достаточно значительное, смартфон открывается.

Каждый из этих этапов требует специальных процедур и оптимизаций для быстрой работы прямо на устройстве.

Технические компоненты: что находится внутри них

Стандартная селфи камера.

Самый простой простой вариант распознавания физиономии применяет лишь лицевую видеокамеру смартфона. Подобный подход внедрён во многочисленных доступных вариантах Android-устройств.

Достоинства:

• Не нуждается в потребляет дополнительных сенсоров.
• Оперативно функционирует при хорошем освещённости.

Слабые стороны:

• Несложно обмануть фотографией или роликом.
• Неправильно работает при плохом освещённости или необычных ракурсах.

Инфракрасная камера и точечный проекционный аппарат

Более продвинутые системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика является основой Face ID от Apple.

Каким образом это действует:

• Точечный устройство проекции отображает на физиономию юзера невидимую сетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 пятен).
• Инфракрасная устройство записывает деформацию данной сетки по плоскости физиономии.
• Получается 3D глубинная карта глубинности, что почти что неосуществима для фальсификации стандартной снимком или маской.

Достоинства

• Надёжная деятельность даже в полной тьме.
• Высокая сопротивляемость к подделкам.
• Точность определения свыше 99%.

Дополнительные сенсорные устройства

В отдельных аппаратах применяются также экстра сенсоры: ToF (Time-of-Flight), которые определяют период распространения света до предмета и обратно; Трехцветные-датчики дальности; специальные лазерные измерители расстояния для создания более детализированной 3D-модели физиономии.

Эти разработки применяются в основном во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: синтетический интеллект в действии

Нынешние устройства идентификации лиц невозможны в отсутствие применения ИИ и machine learning. Именно вследствие таким инновациям, как Vulkan Platinum, устройство в состоянии распознавать юзера даже при метаморфозах внешности: новая укладка, растительность на лице, линзы или грим не становятся препятствием для деблокировки.

Распознавание физиономии

При стартовом стадии система должна оперативно обнаружить ликовое изображение среди всего изображения камеры. Для этой задачи применяются многоуровневые классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые натренированы распознавать лиц человека среди множества других объектов.

Пример: метод MTCNN в состоянии находить лицо даже в случае частичном закрытии (например, шарфом или ладонью).

Идентификация важных точек

После распознавания лица механизм, такая как Vulkan Platinum, вычисляет расположение главных точек: кончики глаз, конец носа, края губ и так далее. Как правило используется от 68 до 128 главных маркеров на лицевой поверхности.

Это действие необходимо для выравнивания изображения: если юзер удерживает телефон под наклоном, или повернул головку, программа “выпрямляет” картинку до стандартного положения для дальнейшего анализа.

Построение биометрии образца

Далее нейронная сеть строит сжатое математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 флоатов.

Этот формат крайне сложно подделать: он не удерживает само фото юзера, а лишь особенные черты его вида, что делает его совершенным для таких площадок, как Вулкан Казино Платинум.

Сравнение и принятие заключения

Когда пользователь желает открыть мобильник взором, механизм осуществляет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный уровень (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, открывается; если нет — доступ запрещается.

Адаптация к трансформациям внешности

Интересная черта нынешних системы — возможность самостоятельного обучения. Если ты часто разблокируете телефон с обновленной стрижкой или очками, система постепенно обновляет эталонный образец вашего лица для улучшения точности функционирования без ухудшения безопасности.

Безопасность биометрических данных данных.

Многие клиенты беспокоятся сохранять свои биометрические данные на мобильном устройстве из-за угрозы потери данных или взлома устройства. Иные организации, такие как Вулкан Казино Платинум, предлагают решения для увеличения сохранности сведений клиентов.

• Локальное сохранение: Основная часть устройств записывает биометричные модели лишь внутри безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из устройство и не доступны в том числе создателю.

• Шифрование: Все данные сберегаются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Программы сторонних девелоперов не обладают прямого доступа к биометрическим; они могут лишь требовать подтверждение верификации личности через системный API.

Следует подчеркнуть существенную особенность: если кто-то сможет получить доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители внедряют меры безопасности от неосознанного разблокирования — к примеру, требуют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают типы идентификации лиц на изображениях?

В настоящее время можно определить определить три главных подхода к осуществлению этой операции:

Программное 2D определение

Используется только лицевая видеокамера без дополнительных детекторов глубины. Этот метод наблюдается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота воплощения; низкая цена; оперативная работа при качественном свете.
Минусы: несложно одурачить снимком; ненадежная функционирование ночью; недостаточная безопасность.

Техническое 3D сканирование

Использует ИК видеокамеру + проектор пикселей + датчики дистанции (Face ID от Apple; подобные решения у Huawei Mate).
Достоинства: значительная надежность; не получится обмануть изображение/видеозапись; устойчивая работа при любом освещении.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с ИИ-дополнением

Используют комбинацию программных методов + техническую обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие товары, как Vulkan Platinum и Google Pixel Face Unlock новейших поколений, комбинируют фронталку c ИК датчиком мобильности Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.

Образцы эксплуатации разных техник

• iPhone модели X/11/12/13/14 используют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил эквивалент Face ID в числе Android.
• Samsung Galaxy S10/S20 обеспечивают как программное обеспечение двухмерное определение по снимку фронтальной камерой, так и сенсор радужки глаза.
• Huawei Mate20 Pro задействует систему из ИК-инфракрасного света + Dot Projector + ToF-датчик

Трудности безопасности и ошибочные сигналы

Несмотря на поразительный успехи инноваций за недавние годы, совершенных механизмов пока не существует:

1. Возможность мошенничества: Бюджетные мобильники легко доступны качественной изображением пользователя либо видео с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые безупречные системы могут перепутать между монозиготными близнецами либо родственниками с очень похожей внешностью.
3. Изменения облика: Внезапное снижение веса/набор веса, хирургические вмешательства либо травмы иногда требуют повторной регистрации биометрии.
4. Условия записи: Яркая подсветка солнцем или глубокая тень могут снизить точность идентификации признаков.

Вот несколько подсказок по надёжному применению:

• Для критически важных операций всегда используйте дополнительную аутентификацию;
• Не запускайте возможность “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Систематически обновляйте прошивку телефона для защиты от новых видов атак;
• Включайте функцию “Требовать распахнутых глаз” везде, где она есть.

Где дополнительно находится применение технология помимо мобильных телефонов?

Хотя предмет данной статьи посвящена конкретно портативным гаджетам, следует отметить прочих направлениях внедрения технологии:

• Управление прохода в рабочих помещениях и резиденциях;
• Платёжные устройства банков (“Face Pay”);
• Виртуальные удостоверения личности нового образца;
• Установки видеонаблюдения муниципальных служб;
• Автоматизирование регистрации присутствия школ/институтов;
• Аутентификация пользователей компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без пластика или телефона! Похожие инициативы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом меняется техпроцесс в наше время?

Всякий год возникают современные мысли для повышения качества деятельности систем лицевого распознавания:

1. Увеличивается детализация сенсорных устройств — чем больше информации фиксируется камерой/датчиками глубины, тем меньше риск погрешности;
2. Улучшаются искусственные интеллекты — новейшие конструкции типа MobileNetV3 позволяют скоростно адаптироваться к свежим чертам вида обладателя прямо на устройстве без пересылки информации в облачное хранилище.
3. Совершенствуются технологии антиспуфинга — теперь телефоны способны распознавать реальные живые облики от статичных снимков/масок по микроскопическим микродвижениям.
4. Синхронизация со смарт-гаджетами — интеллектуальные часы могут автоматически закрыть доступ к телефон, если пользователь ушёл далеко.
5. Появляются гибридные системы — к примеру объединяющие голосовую опознание + лицо + дактилоскопический след.

Вот, те тренды особенно популярны сейчас:

1) Уменьшение деталей

Изготовители намереваются уменьшить величину отверстия (“чёлки”) под датчики на дисплее за счёт встраивания компактных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на устройстве

Для улучшения конфиденциальности всё больше расчётов осуществляется на месте без пересылки данных во сторонний облачный сервис.

3) Стандартизация стандартов

Google энергично продвигает норму BiometricPrompt API, с целью чтобы аналогичные платформы, вроде Вулкан Платинум, и все Android-аппы были совместимы с различными типами биометрии унифицированно.

Что подобрать на сегодня?

Если тебе важна предельная сохранность информации, подбирайте флагманские модели со встроенным ИК-проектором или же ToF-сенсором глубины.

• iPhone каждого последних моделей
• Huawei Companion/P ряда
• Xiaomi Pro
• Vivo X серии
• Оппо Обнаружить X серии.

Если бюджет скромен – лучше предпочесть обычным методам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как дополнительную возможность удобства.

Каким способом увеличить удобство использования опции?

Есть несколько лайфхаков для людей, кто уже пользуется функцию распознавания лица:

1. Часто меняйте свою фотографию-шаблон, если кардинально трансформируется внешность.
2. Не забывайте протирать линзу передней камеры – загрязнения могут уменьшить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам включает камеру как только вы берёте его в руки.
4. При регистрационного процесса пытайтесь удерживать голову прямо напротив видеоустройства исключая сильного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отворачиваетесь от экрана.

Перспективы прогресса техники

В предстоящие периоды можно предполагать развития полностью бесконтактных способов опознания человека сразу по нескольким биометрическим параметрам одновременно: облик + звучание + манера ходьбы + движения рук!

Также вероятно возникновение новых подходов охраны конфиденциальности – скажем, динамическое корректировка цифрового шаблона после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее захватывающих инноваций нашего времени! Она предоставляет общение со телефоном удобнее чем до этого, и такие приложения, как Вулкан Казино Платинум, могут значительно повысить ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы понимаете, как устроена эта система в деталях, – будете в состоянии осознаннее выбирать свой следующий устройство!