Каким образом функционирует идентификация лицевых образов в телефонах

Для чего мы останавливаемся на разлочивание по лицу

В последние времена распознавание физиономий превратилось в одной из наиболее востребованных возможностей для разблокировки мобильных телефонов. Всего пару годов ранее основная масса пользователей обходились PIN-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением подобных технологий, например вулкан россия, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Что превращает эту возможность такой востребованной? Для начала, это комфортно: не нужно помнить трудные пароли или искать верный палец в тьме. Во-вторых, это оперативно: современные системы узнают лицо практически за мгновение. В-третьем пункте, это ощущение футуристичности — как будто в кинофильмах про vulkan casino шпионов.

Впрочем за такой на первый взгляд несложностью скрывается целый вселенная трудных методов и инженерных решений. Попробуем разобраться, как именно действует фейсканирование в современных гаджетах, какие применяются методы, насколько они защищены и что нас ждёт впереди.

Короткая повествование развития технологии

Идентификация лиц как технология имеется уже более пятидесяти годов. Первые пробы машинного исследования лиц были осуществлены еще в 1960-х годах в научных учреждениях США. Тогда вычислительные машины могли лишь выделять силуэты лица и измерять промежутки между зрачками и губами на черно-белых фотографиях.

Изначальные бизнес платформы возникли в 1990-х годах, но они были несовершенны: работали медленно и часто ошибались. Только с эволюцией синтетических сетей и таких площадок, как вулкан россии, мощных мобильных процессоров распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным идентификацией лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять личные разработки.

Главные этапы функционирования механизма идентификации

Процесс распознавания лица можно примерно поделить на несколько основных этапов:

1. Обнаружение лиц — аппарат распознает наличие человеческого лица в изображении.
2. Определение признаков — система изучает особенности облика: форму глаз, обонятельного органа, губ, расположение бровей.
3. Построение модели — создаётся уникальный электронный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с образцом — полученный образец сверяется с сохранённой при регистрации биометрической информацией владельца.
5. Принятие определения — если совпадение достаточно существенное, смартфон открывается.

Всякий из этих стадий требует особых алгоритмов и усовершенствований для оперативной работы прямо на устройстве.

Технические компоненты: что прячется внутри

Обычная селфи камера.

Самый несложный метод идентификации облика использует только переднюю видеокамеру мобильного устройства. Подобный подход осуществлён во многих бюджетных версиях Android-девайсов.

Сильные стороны:

• Не требует дополнительные сенсоров.
• Быстро действует при достаточном освещении.

Слабые стороны:

• Несложно обмануть снимком или видео.
• Плохо действует при слабом освещении или необычных углах обзора.

Инфракрасная камера и пунктирный проекционный аппарат

Более продвинутые системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика является основой Face ID от Apple.

Каким образом это действует:

• Точечный устройство проекции отображает на лицо пользователя невидимую решетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 точек).
• ИК камера регистрирует деформацию данной сетки по поверхности лица.
• Формируется трехмерная глубинная карта глубины, что почти что неподвластна для фальсификации типичной снимком или маской.

Преимущества

• Надёжная деятельность даже в полной неосвещённости.
• Высокая устойчивость к фальсификациям.
• Точность распознавания выше 99%.

Добавочные датчики

В отдельных девайсах задействуются также вспомогательные датчики: ToF (Time-of-Flight), которые определяют время прохождения света до предмета и обратно; Цветные-датчики глубины; специальные оптические лидары для создания более детализированной 3D-модели физиономии.

Эти технологии используются чаще всего во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искуственный разум на исполнении

Современные системы распознавания лиц немыслимы в отсутствие эксплуатации искусственного интеллекта и machine learning. Именно благодаря таким разработкам, как вулкан россии, устройство в состоянии идентифицировать юзера даже при метаморфозах внешности: новая стрижка, борода, очки или грим не становятся препятствием для разблокировки.

Распознавание лиц

При стартовом стадии алгоритм необходимо оперативно распознать ликовое изображение в пределах целого изображения с камеры. Для этого задействуются каскадные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены находить лиц человека среди множества других объектов.

Пример: процесс MTCNN может обнаруживать лицо даже с частичном закрытии (например, платком или рукой).

Выделение важных аспектов

После обнаружения лица устройство, такая как вулкан россии, определяет расположение основных точек: уголки глаз, кончик носа, контуры губ и так далее. Часто задействуется от 68 до 128 главных меток на лицевой поверхности.

Это действие требуется для стабилизации изображения: если пользователь удерживает мобильник под наклоном, или повернул голову, программа корректирует изображение до нормального состояния для последующего изучения.

Создание биометрии модели

Далее нейронная сеть строит компактное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 вещественных чисел.

Этот образец очень затруднительно сфальсифицировать: он не сохраняет непосредственно картинку пользователя, а лишь уникальные характеристики его вида, что делает его оптимальным для таких площадок, как vulkan russia.

Сопоставление и вынесение решения

В случае, когда человек желает открыть телефон глазами, программа воспроизводит все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый границу (обычно выше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ не предоставляется.

Привыкание к трансформациям внешности

Интересная черта современных систем — способность самообучения. Если вы часто разблокируете смартфон с обновленной укладкой или очками, алгоритм постепенно модернизирует эталонный образец вашего лица для повышения точности работы без ухудшения безопасности.

Охрана биометрических данных.

Большинство юзеры беспокоятся сохранять свои биометрические данные на смартфоне из-за риска утечки данных или взлома устройства. Некоторые организации, такие как vulkan russia, предлагают решения для повышения безопасности информации юзеров.

• Локальное хранение: Преимущественно девайсов хранит био-идентификационные шаблоны исключительно внутри защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не выходят из аппарат и закрыты даже производителю.

• Шифрование: Все сведения сохраняются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних девелоперов не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Стоит упомянуть важную деталь: в случае, если кто-то сможет получить физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании внедряют систему защиты от автоматического разблокирования — к примеру, требуют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают категории определения лиц?

В настоящее время можно различить три ключевых подхода к выполнению этой задачи:

Программное двухмерное идентификация

Применяется только лицевая видеокамера без дополнительных сенсоров глубины. Такой подход встречается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость реализации; низкая цена; оперативная деятельность при хорошем свете.
Минусы: легко ввести в заблуждение фотографией; ненадежная функционирование ночью; низкая охрана.

Оборудование для 3D оцифровка

Использует инфракрасную камеру + проекционный модуль пикселей + сенсоры глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Преимущества: высокая надёжность; не получится обмануть изображение/видеозапись; постоянная работа в любых условиях освещения.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с дополнением ИИ

Применяют комбинацию программируемых методов + аппаратную обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как вулкан россии и Google Pixel Face Unlock последних версий, комбинируют фронтальную камеру c инфракрасным сенсором мобильности Soli Radar для предотвращения от подделок руками/масками/видеоэкранами чужих устройств.

Образцы использования различных техник

• iPhone модели X/11/12/13/14 применяют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз внедрил аналог Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное обеспечение двухмерное определение по изображению фронтальной камерой, так и датчик глазного ириса.
• Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-датчик

Вопросы охраны и неверные сигналы

Несмотря на поразительный успехи техники за прошедшие лет, безупречных систем пока не существует:

1. Возможность мошенничества: Бюджетные мобильники легко открываются четкой фотографией владельца либо видео с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые безупречные механизмы могут ошибиться между монозиготными близнецами либо семьями с очень схожей внешностью.
3. Метаморфозы внешнего вида: Резкое снижение веса/набор веса, пластические операции либо травмы в некоторых случаях требуют повторной регистрации биометрии.
4. Условия съёмки: Яркая освещённость солнцем или же глубокая темнота могут снизить верность идентификации признаков.

Здесь несколько советов по защищённому использованию:

• Для важных операций всегда применяйте двухэтапную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
• Регулярно обновляйте прошивку смартфона для обеспечения безопасности от новых видов атак;
• Включайте настройку “Требовать распахнутых глаз” там, где она доступна.

В каких местах ещё находится применение технологии помимо смартфонов?

Хотя предмет нашей статьи посвящена именно мобильным устройствам, следует отметить других сферах применения технологии:

• Контроль прохода в офисах и резиденциях;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Цифровые идентификационные документы последнего поколения;
• Комплексы видеонаблюдения городских подразделений;
• Автоматизация регистрации посещаемости образовательных учреждений/университетов;
• Аутентификация юзеров персональных компьютеров/ноутбуков.

Например: В городском метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через турникет без пластика или мобильника! Аналогичные инициативы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом меняется технология в наше время?

Каждый год проявляются современные концепции для усовершенствования стандарта работы систем идентификации лиц:

1. Увеличивается разрешение сенсоров — чем больше элементов фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность погрешности;
2. Улучшаются нейронные сети — новейшие архитектуры вида MobileNetV3 позволяют оперативно адаптироваться к свежим особенностям внешности пользователя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Улучшаются технологии антиспуфинга — теперь мобильные устройства умеют различать настоящие анимированные лица от неподвижных снимков/масок по микроскопическим движениям кожи.
4. Интеграция со умными устройствами — умные часы могут авто закрыть доступ к смартфон, если обладатель ушёл далеко.
5. Появляются комбинированные устройства — к примеру объединяющие аудио опознание + лицо + пальцевой отпечаток.

Здесь, те тренды в особенности актуальны сейчас:

1) Уменьшение элементов

Компании стараются сократить размер отверстия (“чёлки”) для датчики на дисплее за счёт интеграции компактных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на аппарате

Для повышения приватности всё более вычислений выполняется на месте без отправки данных во дополнительный облачный услугу.

3) Стандартизация регламентов

Google активно пропагандирует эталон BiometricPrompt API, с целью чтобы такие системы, вроде вулкан россия, и каждые Android-программы могли работать с различными типами биометрии единообразно.

Какое выбрать сегодня?

Когда вам необходима предельная сохранность информации, остановите выбор на флагманские аппараты с вмонтированным ИК-проектором или же ToF-датчиком глубины.

• iPhone всех новейших моделей
• Huawei Companion/P Series серии
• Mix Expert
• Vivo X модели
• Oppo Обнаружить Х серий.

Если бюджет скромен – лучше предпочесть классическим способам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в вулкан россия, применять только как дополнительную возможность комфорта.

Как улучшить практичность работы возможности?

Есть несколько хитростей для пользователей, кто уже использует разблокировку по лицу:

1. Периодически обновляйте свою изображение-шаблон, если кардинально изменяется внешний вид.
2. Не пренебрегайте чистить объектив фронтальной камеры – разводы могут уменьшить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам активирует фотоаппарат как только вы берёте его в руки.
4. В процессе регистрационного процесса старайтесь сохранять лицо неподвижно впереди видеоустройства не допуская сильного наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отворачиваетесь от дисплея.

Перспективы прогресса техники

В скоро наступающие времена можно предполагать появления полностью безконтактных способов идентификации человека сразу по нескольким биометрическим данным параметрам одновременно: облик + речь + шаги + жесты рук!

Также вероятно появление свежих способов защиты личной информации – скажем, динамическое изменение диджитал паттерна после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из очень захватывающих техник нашего периода! Она делает общение со телефоном комфортнее чем когда-либо прежде, и такие программы, как vulkan russia, могут в разы повысить ваш опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как работает эта система внутри, – сможете вдумчиво выбирать свой будущий гаджет!