Каким образом работает идентификация лиц в мобильных устройствах

Для чего мы выбираем разблокировку по лицевому распознаванию

В прошлые годы распознавание физиономий превратилось в одной из самых популярных опций для деблокировки мобильных телефонов. Всего пару лет ранее основная масса пользователей довольствовались PIN-кодами, паролями или сканерами отпечатков пальцев. Но с появлением подобных технологий, как вулкан россия, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какая вещь превращает данную функцию настолько популярной? Для начала, это удобно: не нужно помнить замысловатые пароли или искать верный палец в темноте. Кроме того, это мгновенно: современные алгоритмы идентифицируют лицо буквально за доли секунды. В-третьем пункте, это чувство футуризма — как будто в кинолентах про вулкан автомат разведчиков.

Впрочем за такой кажущейся несложностью прячется полный мир сложных методов и инженерных разработок. Позвольте нам понять, как именно работает распознавание лиц в новейших гаджетах, какие существуют методы, насколько они безопасны и что нас предстоит.

Короткая повествование развития техники

Идентификация лиц как методика существует уже более пятидесяти годов. Изначальные попытки машинного изучения облика были предприняты еще в 1960-х годах в исследовательских центрах США. Тогда вычислительные машины способны были лишь определять силуэты черепа и измерять промежутки между очами и устами на ахроматических изображениях.

Первые бизнес установки стали доступны в 1990-х годах, но они были несовершенны: работали медленно и нередко ошибались. Только с прогрессом искусственных сетей и таких систем, как вулкан россии, сильных мобильных процессоров определение лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные разработки.

Главные стадии функционирования устройства определения

Процесс определения лица можно примерно сегментировать на несколько важных этапов:

1. Обнаружение лица — аппарат определяет присутствие гуманного лица в кадре.
2. Извлечение особенностей — система изучает особенности облика: конфигурацию зрительных органов, носа, уст, положение надбровных дуг.
3. Построение модели — создаётся особенный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с стандартом — полученный образец сверяется с записанной при учёте биометрической сведениями владельца.
5. Принятие определения — если сходство достаточно существенное, смартфон открывается.

Каждый из данных шагов запрашивает специальных методов и улучшений для оперативной работы непосредственно на девайсе.

Технические компоненты: что скрыто внутри них

Обычная фронтальная камера.

Простейший простой вариант идентификации физиономии применяет исключительно переднюю камеру мобильного устройства. Такой способ реализован во многих бюджетных версиях Android-девайсов.

Положительные стороны:

• Необходимо потребляет дополнительных датчиков.
• Оперативно работает при достаточном свете.

Слабые стороны:

• Несложно ввести в заблуждение изображением или видеозаписью.
• Неправильно функционирует при плохом свете или нестандартных точках зрения.

Инфракрасная камера и пунктирный проектор

Более продвинутые системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология составляет базу Face ID от Apple.

Каким способом это действует:

• Точечный устройство проекции отображает на физиономию юзера невидимую решетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 пятен).
• Инфракрасная камера регистрирует деформацию данной решетки по плоскости лица.
• Создаётся трёхмерная карта глубины глубинности, что почти невозможна для фальсификации стандартной фото или маской.

Преимущества

• Надёжная работа даже в полной темноте.
• Сильная устойчивость к имитациям.
• Точность распознавания свыше 99%.

Дополнительные сенсорные устройства

В некоторых устройствах задействуются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют период движения луча до предмета и обратно; Трехцветные-датчики дальности; специальные лазерные лидары для построения более аккуратной 3D-модели физиономии.

Эти разработки используются в основном во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: синтетический ум на исполнении

Текущие механизмы опознания лиц невозможны без использования искусственного интеллекта и машинного обучения. Именно из-за таким технологиям, как вулкан россии, гаджет в состоянии узнавать владельца даже при изменениях облика: новая укладка, борода, очки или макияж не становятся барьером для деблокировки.

Детектирование физиономии

На начальном стадии система должна оперативно найти ликовое изображение в пределах всего снимка с камеры. Для этого используются многоуровневые классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые подготовлены распознавать лица людей среди множества других объектов.

Пример: процесс MTCNN может обнаруживать лицо даже с частичном перекрытии (например, шалью или ладонью).

Определение ключевых моментов

После обнаружения лица устройство, такая как вулкан россии, вычисляет расположение главных точек: края глаз, верхушка носа, контуры губ и так далее. Как правило применяется от 68 до 128 главных маркеров на лице.

Это нужно для нормализации картинки: если юзер удерживает телефон под наклоном, или повернул головку, программа исправляет изображение до нормального состояния для дальнейшего анализа.

Формирование биометрического шаблона

Далее нейронная сеть строит уплотненное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 чисел с плавающей запятой.

Этот образец весьма сложно подделать: он не удерживает само изображение юзера, а лишь уникальные характеристики его вида, что делает его идеальным для таких площадок, как vulkan russia.

Сопоставление и принятие решения

В случае, когда пользователь хочет разлочить мобильник взором, механизм воспроизводит все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ не предоставляется.

Адаптация к изменениям внешности

Увлекательная характеристика актуальных систем — возможность самостоятельного обучения. Если вы регулярно доступаете к мобильное устройство с свежей стрижкой или оптикой, программа постепенно освежает базовый модель вашего лица для увеличения точности действия без снижения уровня безопасности.

Защита биометрии данных.

Большинство юзеры беспокоятся хранить свои биометрические идентификационные данные на мобильном устройстве из-за риска утечки данных или хакерской атаки. Некоторые фирмы, вроде vulkan russia, предлагают варианты для улучшения защиты сведений пользователей.

• Локальное сбережение: Большинство девайсов сохраняет биометричные модели лишь внутрь безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не покидают аппарат и не доступны включая создателю.

• Шифрование: Все данные хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения сторонних разработчиков не имеют прямого доступа к биометрическим; они могут лишь запрашивать факт верификации личности через системный API.

Следует отметить важную деталь: в случае, если какой-то человек сможет получить доступ к вашему телефону физически (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители осуществляют защиту от автоматического разблокирования — к примеру, заставляют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют типы распознавания лиц на изображениях?

Сегодня можно определить три ключевых подхода к осуществлению этой функции:

Софтверное плоское распознавание

Применяется только лицевая видеокамера без экстра сенсоров дистанции. Этот подход используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость реализации; умеренная цена; быстрая деятельность при достаточном освещении.
Минусы: просто обмануть снимком; ненадежная деятельность ночью; недостаточная защищенность.

Оборудование для объёмное оцифровка

Использует ИК видеокамеру + проекционный модуль пикселей + сенсоры глубины (Face ID от Apple; подобные решения у Huawei Mate).
Плюсы: большая надёжность; не получится подделать изображение/видеозапись; постоянная работа при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с интеграцией ИИ

Используют комбинацию программируемых методов + аппаратную обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие товары, как вулкан россии и Google Pixel Face Unlock современных версий, комбинируют фронталку c инфракрасным датчиком движения Soli Radar для предотвращения от фальсификаций руками/масками/видеоэкранами посторонних устройств.

Образцы эксплуатации разнообразных техник

• iPhone линейки X/11/12/13/14 применяют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID среди Android.
• Samsung Galaxy S10/S20 обеспечивают как софтверное 2D определение по изображению фронтальной камерой, так и сенсор радужки глаза.
• Huawei Mate20 Pro использует систему из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Трудности защиты и ошибочные тревоги

Несмотря на замечательный успехи техники за последние лет, идеальных системы пока не наблюдается:

1. Шанс подвоха: Недорогие мобильники без труда доступны высококачественной снимком хозяина или видеозаписью с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые безупречные механизмы могут спутать между монозиготными близнецами либо семьями с очень схожей внешностью.
3. Изменения внешнего вида: Внезапное снижение веса/набор веса, пластические операции или травмы порой необходимы для обновления данных биометрии.
4. Условия съёмки: Сильная освещённость солнцем или же плотная затенение могут уменьшить аккуратность идентификации признаков.

Здесь несколько подсказок по защищённому применению:

• Для значимых операций всегда используйте двухэтапную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
• Постоянно обновляйте прошивку ПО мобильного устройства для предотвращения угроз от современных угроз;
• Включайте функцию “Требовать раскрытых глаз” везде, где она есть.

Где ещё используется технологии кроме смартфонов?

Несмотря на то, что тема этой работы сосредоточена на именно смартфонам и планшетам, необходимо сказать о других сферах применения технологии:

• Контроль доступа в офисах и жилых домах;
• Платёжные терминалы банков (“Face Pay”);
• Виртуальные идентификационные документы последнего поколения;
• Установки видеоконтроля городских подразделений;
• Автоматизирование учёта посещаемости школ/институтов;
• Аутентификация участников персональных компьютеров/ноутбуков.

Например: В городском метро уже тестируется система оплаты проезда по лицу (“Face Pay”) — достаточно пройти через турникет без пластика или мобильника! Похожие инициативы реализуются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом меняется техпроцесс в наше время?

Всякий годик возникают свежие идеи для усовершенствования стандарта функционирования систем распознавания лиц:

1. Увеличивается детализация датчиков — чем больше информации фиксируется камерой/глубинными сенсорами, тем меньше риск погрешности;
2. Улучшаются нейросети — современные структуры типа MobileNetV3 позволяют быстро осваивать свежим особенностям облика владельца непосредственно на девайсе без отправки данных в облако.
3. Совершенствуются способы антиспуфинга — теперь телефоны способны различать настоящие движущиеся лица от фиксированных фотографий/маскировок по незаметным движениям кожи.
4. Взаимодействие со умными устройствами — интеллектуальные часы могут автоматически заблокировать мобильный телефон, если владелец отошёл далеко.
5. Проявляются гибридные системы — к примеру совмещающие голосовую идентификацию + физиономию + дактилоскопический след.

Здесь, те тенденции в особенности востребованы на сегодняшний день:

1) Уменьшение деталей

Изготовители намереваются уменьшить величину прорези (“чёлки”) для сенсоры на дисплее за счёт внедрения маленьких ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для повышения конфиденциальности всё больше вычислений осуществляется внутри устройства без передачи информации во дополнительный облачный услугу.

3) Унификация регламентов

Гугл активно продвигает норму BiometricPrompt API, для того чтобы такие системы, как вулкан россия, и каждые Android-программы были совместимы с всеми формами биометрии унифицированно.

Какое подобрать сегодня?

Когда вам важна наивысшая защита информации, выбирайте флагманские модели со встроенным ИК-проектором либо ToF-сенсором глубины.

• iPhone всех актуальных моделей
• Huawei Companion/Series P линейки
• Xiaomi Professional
• Vivo X линейки
• Oppo Найти Икс серии.

Если финансы ограничен – лучше выбирать традиционным методам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, применять только как второстепенную возможность удобства.

Каким способом повысить комфорт функционирования возможности?

Есть пара хитростей для пользователей, кто уже пользуется функцию распознавания лица:

1. Периодически обновляйте свою фотографию-шаблон, если значительно трансформируется внешность.
2. Не упускайте из виду очищать объектив передней камеры – разводы могут снизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам активирует фотоаппарат как только вы поднимаете его.
4. Во время регистрации пытайтесь удерживать лицевую часть ровно напротив видеоустройства не допуская резкого наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отворачиваетесь от экрана.

Возможности эволюции техники

В скоро наступающие периоды можно предвкушать появления полностью бесконтактных способов идентификации персоны сразу по нескольким биометрическим параметрам одновременно: лицо + звучание + походка + манипуляции руками!

Также возможно развитие современных подходов обеспечения личной информации – скажем, динамическое модификация цифрового шаблона после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых захватывающих инноваций нашего эпохи! Она обеспечивает взаимодействие со мобильным устройством проще чем раньше, и такие программы, как vulkan russia, могут значительно оптимизировать ваш пользовательский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы осведомлены, как устроена эта методика изнутри, – сумеете вдумчиво выбирать свой следующий устройство!