Каким способом работает определение лицевых образов в мобильных устройствах

Зачем мы предпочитаем разлочивание по лицевому распознаванию

В недавние времена идентификация лиц превратилось в одной из самых популярных возможностей для разблокировки мобильных телефонов. Всего некоторые годков назад большинство юзеров удовлетворялись PIN-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением подобных технологий, как вулкан россия, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь превращает эту конкретную функцию такой востребованной? Прежде всего, это комфортно: не нужно запоминать сложные пароли или отыскивать верный палец в мраке. Кроме того, это оперативно: современные системы узнают лицо практически за доли секунды. В-третью очередь, это впечатление футуристичности — словно в фильмах про вулкан автомат разведчиков.

Тем не менее за данной на первый взгляд простотой таится весь универсум комплексных технологий и инженерных разработок. Давайте понять, как конкретно функционирует распознавание лиц в актуальных гаджетах, какие применяются методы, насколько они надёжны и что нас предстоит.

Краткая повествование эволюции технологии

Идентификация лиц как методика существует уже более 50 лет. Первые попытки машинного изучения лиц были сделаны еще в 1960-х годах в научных учреждениях США. Тогда компьютеры могли лишь обозначать очертания головы и вычислять дистанции между зрачками и губами на черно-белых фотографиях.

Начальные бизнес установки возникли в девяностых годах, но они были несовершенны: функционировали медленно и часто давали сбои. Только с развитием искусственных сетей и таких систем, как вулкан россии, высокопроизводительных мобильных процессоров идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие стали внедрять личные решения.

Главные этапы работы механизма идентификации

Процесс определения лица можно примерно разделить на несколько ключевых этапов:

1. Распознавание лиц — камера выявляет наличие гуманного лица в кадре.
2. Извлечение характеристик — механизм анализирует черты лица: очертания зрительных органов, обонятельного органа, губ, позицию бровей.
3. Построение структуры — создаётся особенный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со образцом — полученный образец сравнивается со сохранённой при учёте биометрической информацией владельца.
5. Принятие определения — если сходство достаточно существенное, смартфон открывается.

Каждый из данных стадий требует особых алгоритмов и улучшений для оперативной работы непосредственно на девайсе.

Технические элементы: что скрыто в их недрах

Обычная селфи камера.

Самый легкий способ идентификации физиономии задействует лишь переднюю камеру мобильного устройства. Такой подход осуществлён во многочисленных недорогих моделях Android-устройств.

Сильные стороны:

• Необходимо потребляет дополнительных датчиков.
• Оперативно функционирует при хорошем освещении.

Минусы:

• Легко обмануть изображением или роликом.
• Плохо функционирует при слабом освещении или нестандартных ракурсах.

Инфракрасная камера и точечный проекционный аппарат

Более продвинутые системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс лежит в основе Face ID от Apple.

Каким образом это функционирует:

• Точечный проектор отображает на физиономию юзера невидимую структуру из тысяч инфракрасных точек (например, Face ID применяет около 30 000 точек).
• Инфракрасная устройство фиксирует изменение формы этой сетки по поверхности лица.
• Получается 3D глубинная карта глубинности, которая почти неосуществима для подделки типичной снимком или маской.

Выигрыши

• Надёжная деятельность даже в полной неосвещённости.
• Большая защита к фальсификациям.
• Точность идентификации выше 99%.

Добавочные сенсорные устройства

В отдельных девайсах задействуются также вспомогательные сенсоры: ToF (Time-of-Flight), которые фиксируют время прохождения луча до цели и обратно; RGB-датчики глубины; специальные световые лидары для создания более аккуратной 3D-модели лица.

Эти инновации применяются наиболее часто во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искусственный интеллект на работе

Современные механизмы опознания физиономий невозможны в отсутствие использования ИИ и машинного обучения. Именно из-за таким разработкам, как вулкан россии, аппарат в состоянии идентифицировать юзера даже при трансформациях внешнего вида: новая причёска, растительность на лице, линзы или грим не становятся препятствием для разблокировки.

Детектирование лица

В стартовом шаге система обязана мгновенно обнаружить ликовое изображение среди всего кадра камеры. Для этого задействуются каскадные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые «обучены» распознавать человеческие лица среди множества других объектов.

Пример: метод MTCNN может обнаруживать лицо даже при частичном закрытии (например, платком или ладонью).

Выделение ключевых моментов

После идентификации лица устройство, такая как вулкан россии, устанавливает расположение главных точек: края глаз, верхушка носа, контуры губ и так далее. Часто задействуется от 68 до 128 ключевых маркеров на лице.

Это действие необходимо для нормализации визуала: если человек находится с телефон под наклоном, или наклонил голову, программа «выпрямляет» изображение до обычного угла для дальнейшего анализа.

Формирование биометрического модели

Далее нейросеть строит сжатое цифровое представление («эмбеддинг») внешности пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 вещественных чисел.

Данный образец весьма затруднительно подделать: он не удерживает само фото юзера, а лишь особенные особенности его вида, что делает его идеальным для таких площадок, как vulkan russia.

Сравнение и вынесение заключения

Когда пользователь намеревается разлочить телефон взглядом, программа осуществляет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ запрещается.

Приспособление к изменениям облика

Интересная характеристика актуальных систем — возможность самообучения. Если ты часто доступаете к телефон с новой стрижкой или оптикой, система постепенно модернизирует базовый модель вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Охрана биометрических информации.

Многие юзеры боятся держать свои био-идентификационные данные на смартфоне из-за вероятности потери данных или взлома устройства. Определенные компании, такие как vulkan russia, предоставляют решения для улучшения защиты данных юзеров.

• Локальное хранение: Преимущественно девайсов хранит био-идентификационные шаблоны лишь внутрь защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не оставляют аппарат и недоступны включая изготовителю.

• Шифрование: Все сведения сберегаются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения третьих девелоперов не имеют непосредственного доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Стоит отметить значимую подробность: если какой-то человек сможет получить доступ к вашему телефону физически (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие изготовители осуществляют защиту от неосознанного разблокирования — к примеру, просят раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют категории распознавания лиц на изображениях?

На сегодняшний день можно выделить различить три главных подхода к осуществлению этой функции:

Программное двухмерное распознавание

Применяется только фронтальная видеокамера без экстра датчиков глубины. Такой метод наблюдается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота осуществления; минимальная стоимость; оперативная деятельность при достаточном освещении.
Минусы: просто обмануть фотографией; неустойчивая работа ночью; слабая защищенность.

Аппаратное 3D сканирование

Задействует ИК камеру + проектор пикселей + сенсоры глубины (Face ID от Apple; подобные решения у Huawei Mate).
Достоинства: значительная надежность; не получится исказить фото/видео; стабильная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана («чёлка»)

Смешанные подходы с дополнением ИИ

Задействуют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам («anti-spoofing»). Например, подобные изделия, например вулкан россии и Google Pixel Face Unlock новейших версий, объединяют фронталку c инфракрасным датчиком мобильности Soli Radar для защиты от подделок руками/масками/видеоэкранами посторонних устройств.

Примеры использования разных способов

• iPhone серии X/11/12/13/14 используют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition первый раз предложил эквивалент Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 поддерживают как программное плоское определение по снимку фронталкой, так и сенсор ириса глаза.
• Huawei Mate20 Pro задействует систему из ИК-инфракрасного света + Dot Projector + ToF-датчик

Трудности защиты и ошибочные срабатывания

Несмотря на замечательный успехи технологий за последние годы, идеальных механизмов пока не наблюдается:

1. Шанс подвоха: Недорогие мобильники просто доступны высококачественной снимком пользователя либо видеозаписью с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые безупречные механизмы могут перепутать между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
3. Трансформации облика: Резкое утрата веса/набор веса, косметические процедуры либо повреждения в некоторых случаях требуют повторной регистрации биометрических данных.
4. Условия фотографирования: Сильная подсветка солнечным светом либо глубокая затенение могут понизить верность идентификации признаков.

Ниже некоторые рекомендаций по надёжному эксплуатации:

• Для важных операций всегда используйте двухэтапную аутентификацию;
• Не включайте функцию «Разблокировка по лицу» на дешёвых устройствах без ИК-сенсоров;
• Регулярно апгрейдите программное обеспечение телефона для обеспечения безопасности от современных угроз;
• Включайте настройку «Требовать распахнутых глаз» везде, где она имеется.

В каких областях ещё используется технологии помимо смартфонов?

Хотя основная мысль нашей работы касается в частности портативным гаджетам, следует отметить других сферах применения технологии:

• Мониторинг входа в деловых центрах и резиденциях;
• Платёжные аппараты банков («Face Pay»);
• Цифровые идентификационные документы современного типа;
• Системы видеоконтроля муниципальных подразделений;
• Автоматизация отслеживания посещаемости образовательных учреждений/университетов;
• Аутентификация участников ПК/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу («Face Pay») — нужно лишь пройти через барьер без карты или телефона! Аналогичные программы реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как трансформируется технический процесс в нынешнее время?

Каждый годик появляются современные идеи для усовершенствования уровня функционирования систем лицевого распознавания:

1. Увеличивается чёткость сенсоров — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше вероятность ошибки;
2. Улучшаются искусственные интеллекты — передовые структуры модели MobileNetV3 позволяют быстро осваивать новым особенностям облика обладателя напрямую на гаджете без пересылки информации в облачное хранилище.
3. Совершенствуются технологии антиспуфинга — теперь мобильные устройства могут различать реальные движущиеся облики от неподвижных фото/масок по микроскопическим движениям кожи.
4. Интеграция со умными устройствами — умные часы могут авто блокировать мобильный телефон, если обладатель отошёл далеко.
5. Возникают комбинированные механизмы — например совмещающие аудио идентификацию + лицо + дактилоскопический след.

Итак, те тренды особенно востребованы в данный момент:

1) Миниатюризация элементов

Компании стараются уменьшить размер прорези («чёлки») под сенсоры на дисплее за счёт встраивания миниатюрных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на аппарате

Для увеличения личной безопасности всё более вычислений выполняется на месте без пересылки информации во внешний облачный сервис.

3) Унификация стандартов

Google активно продвигает эталон BiometricPrompt API, с целью чтобы подобные системы, как вулкан россия, и каждые Android-программы могли работать с любыми видами биометрии стандартизированно.

Что выбрать на сегодня?

Когда вам всем важна предельная защита информации, выбирайте передовые модели со встроенным ИК-излучателем либо ToF-сенсором глубины.

• iPhone всех существующих новейших моделей
• Huawei Mate/Series P линейки
• Mix Professional
• Vivo X серии
• Oppo Обнаружить X серий.

Если финансы ограничен – лучше отдавать предпочтение классическим средствам безопасности (PIN-код/сканер отпечатка), а функцию «разблокировка по лицу», такую как в вулкан россия, использовать только как опциональную возможность удобства.

Как улучшить комфорт использования опции?

Есть несколько лайфхаков для людей, кто уже применяет разблокировку через лицо:

1. Периодически обновляйте свою фото-шаблон, если значительно меняется внешний вид.
2. Не пренебрегайте чистить объектив передней камеры – загрязнения могут уменьшить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам включает камеру если вы берёте его в руки.
4. Во время регистрационного процесса старайтесь сохранять голову неподвижно напротив видеоустройства без сильного наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отворачиваетесь от дисплея.

Будущее развития инноваций

В предстоящие времена можно предвкушать возникновения полностью дистанционных способов опознания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: физиономия + голос + манера ходьбы + манипуляции руками!

Также предполагается возникновение современных способов обеспечения приватности – скажем, переменное модификация цифрового образца после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – единственная из самых захватывающих инноваций нашего эпохи! Она делает интеракцию со смартфоном комфортнее чем раньше, и такие аппы, как vulkan russia, могут в разы повысить ваш опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как работает эта методика внутри, – сумеете более осмысленно подбирать свой будущий девайс!