Как действует распознавание лицевых образов в мобильных устройствах

Почему мы предпочитаем разблокировку по фейсу

В недавние годы идентификация лиц является одной из самых распространённых возможностей для деблокировки смартфонов. Лишь пару лет тому назад основная масса юзеров довольствовались PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением подобных технологий, например вулкан россия, нам достаточно просто взглянуть на экран — и устройство тут же опознает своего владельца.

Что превращает эту конкретную возможность настолько популярной? Для начала, это удобно: не нужно помнить сложные пароли или отыскивать верный палец в темноте. Также, это мгновенно: современные алгоритмы распознают лицо буквально за доли секунды. В-третьем пункте, это впечатление будущего — будто в кинолентах про вулкан россия разведчиков.

Впрочем за такой на первый взгляд простотой таится полный вселенная трудных технологий и инженерных разработок. Давайте понять, как точно работает фейсканирование в актуальных гаджетах, какие бывают технологии, насколько они защищены и что нас предстоит.

Короткая повествование развития технологии

Идентификация лиц как методика присутствует уже более пятидесяти лет. Изначальные попытки автоматического анализа облика были предприняты еще в 1960-х годах в лабораториях США. Тогда ЭВМ умели лишь обозначать очертания головы и измерять расстояния между глазами и ртом на ахроматических изображениях.

Изначальные бизнес системы появились в девяностых годах, но они были далеки от совершенства: работали медленно и нередко ошибались. Только с развитием искусственных сетей и таких систем, как вулкан россии, сильных мобильных чипов определение лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным сканированием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные решения.

Ключевые шаги функционирования системы распознавания

Процесс распознавания лица можно ориентировочно сегментировать на несколько основных этапов:

Обнаружение лиц — камера распознает присутствие людского образа в снимке.
Извлечение характеристик — система изучает особенности облика: конфигурацию зрительных органов, обонятельного органа, уст, положение надбровных дуг.
Построение структуры — создаётся уникальный виртуальный отпечаток (faceprint) на основе определённых признаков.
Сравнение со эталоном — сформированный модель сравнивается со сохранённой при учёте биометрической сведениями владельца.
Принятие решения — если совпадение достаточно высокое, смартфон открывается.

Каждый из данных этапов запрашивает особых методов и усовершенствований для скорой работы прямо на устройстве.

Аппаратные элементы: что скрыто внутри них

Стандартная фронтальная камера.

Самый легкий метод идентификации физиономии задействует исключительно лицевую видеокамеру смартфона. Подобный способ реализован во многочисленных бюджетных вариантах Android-девайсов.

Положительные стороны:

Не потребляет внешних сенсоров.
Оперативно действует при достаточном свете.

Слабые стороны:

Просто одурачить снимком или видеозаписью.
Неправильно действует при плохом свете или нестандартных углах обзора.

Инфракрасная камера и пунктирный проектор

Более усовершенствованные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология является основой Face ID от Apple.

Каким способом это действует:

Точечный проекционный прибор показывает на лицо использующего невидимую решетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 пятен).
ИК камера регистрирует искривление этой сетки по поверхности лица.
Создаётся 3D карта глубины, которая почти невозможна для подделки обычной фотографией или маскировкой.

Преимущества

Надёжная функционирование даже в полной темноте.
Большая защита к фальсификациям.
Точность распознавания более 99%.

Дополнительные датчики

В некоторых девайсах применяются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые определяют период прохождения луча до объекта и обратно; Цветные-датчики глубины; специальные оптические дальномеры для построения более детализированной 3D-модели физиономии.

Эти технологии используются чаще всего во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: синтетический ум в исполнении

Текущие устройства идентификации лиц неосуществимы без эксплуатации artificial intelligence и machine learning. Именно вследствие таким инновациям, как вулкан россии, аппарат в состоянии распознавать владельца даже при трансформациях внешнего вида: новая укладка, растительность на лице, очки или макияж не становятся препятствием для открытия.

Детектирование физиономии

В начальном шаге алгоритм необходимо мгновенно найти образ лица внутри всего кадра камеры. Для этой задачи применяются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые натренированы распознавать лиц человека среди множества других объектов.

Пример: процесс MTCNN может обнаруживать физиономию даже в случае частичном закрытии (например, шарфом или ладонью).

Определение важных точек

После распознавания лица механизм, такая как вулкан россии, вычисляет расположение главных точек: края глаз, верхушка носа, контуры губ и так далее. Как правило задействуется от 68 до 128 главных точек на лицевой области.

Это нужно для стабилизации изображения: если человек находится с телефон под наклоненным, или наклонил головку, программа корректирует картинку до стандартного положения для последующего изучения.

Построение биометрического образца

Далее нейронная сеть строит сжатое математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 флоатов.

Такой образец очень затруднительно подделать: он не хранит непосредственно изображение юзера, а лишь особенные черты его внешности, что делает его совершенным для таких платформ, как vulkan russia.

Сопоставление и принятие выбора

Если человек желает разлочить мобильник глазами, система повторяет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый уровень (обычно выше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ запрещается.

Адаптация к изменениям облика

Занимательная характеристика нынешних системы — возможность самообучения. Если ты часто открываете смартфон с свежей прической или оптикой, программа постепенно обновляет основной шаблон вашего внешности для улучшения точности функционирования без ухудшения безопасности.

Защита биометрических данных.

Многие клиенты боятся сохранять свои биометрические данные на телефоне из-за риска утечки данных или взлома устройства. Некоторые организации, такие как vulkan russia, предлагают методы для повышения защиты информации юзеров.

Локальное сбережение: Преимущественно аппаратов хранит био-идентификационные шаблоны исключительно внутрь защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они всегда не оставляют гаджет и не доступны включая создателю.
Шифрование: Все данные сохраняются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Программы внешних девелоперов не имеют прямого доступа к биометрическим; они могут лишь запрашивать факт верификации личности через системный API.

Стоит подчеркнуть значимую деталь: если кто-либо сможет получить физический доступ к вашему телефону (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители внедряют меры безопасности от автоматического разблокирования — в частности, требуют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают категории идентификации лиц?

Сегодня можно определить различить 3 основных подхода к выполнению этой операции:

Софтверное двухмерное распознавание

Эксплуатируется только фронтальная камера без дополнительных сенсоров глубины. Этот способ наблюдается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность осуществления; умеренная стоимость; быстрая функционирование при достаточном освещении.
Минусы: несложно ввести в заблуждение фотографией; неустойчивая работа ночью; недостаточная безопасность.

Оборудование для объёмное сканирование

Использует инфракрасную камеру + проектор точек + сенсоры глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Достоинства: большая надёжность; нельзя обмануть изображение/видеозапись; стабильная функционирование в любых условиях освещения.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные способы с ИИ-дополнением

Задействуют комбинацию программируемых методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как вулкан россии и Google Pixel Face Unlock последних версий, объединяют фронтальную камеру c ИК сенсором мобильности Soli Radar для предотвращения от подделок руками/масками/видеоэкранами чужих устройств.

Примеры использования различных техник

iPhone серии X/11/12/13/14 используют только физическое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID среди Android.
Samsung Galaxy S10 модель/S20 поддерживают как программное 2D определение по снимку фронтальной камерой, так и сканер ириса глаза.
Huawei Mate20 Pro использует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Трудности защиты и ложные тревоги

Несмотря на поразительный прогресс техники за последние годы, безупречных механизмов пока не имеется:

Возможность подвоха: Бюджетные смартфоны просто “разблокируются” четкой изображением владельца либо видеозаписью с экрана другого устройства.
Идентичные близняшки: Даже самые совершенные механизмы могут перепутать между монозиготными близнецами либо родственниками с очень схожей внешностью.
Трансформации внешнего вида: Стремительное утрата веса/набор веса, пластические операции или повреждения в некоторых случаях требуют обновления данных биометрических данных.
Условия фотографирования: Интенсивная подсветка солнцем или же глубокая темнота могут снизить точность определения признаков.

Здесь несколько советов по надёжному эксплуатации:

Для значимых операций всегда используйте двухэтапную аутентификацию;
Не запускайте опцию “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
Регулярно обновляйте прошивку мобильного устройства для предотвращения угроз от актуальных атак;
Включайте функцию “Требовать раскрытых глаз” везде, где она имеется.

Где дополнительно применяется технология за исключением мобильных телефонов?

Пускай тема данной работы посвящена именно смартфонам и планшетам, необходимо сказать о прочих направлениях внедрения технологии:

Контроль входа в деловых центрах и жилых домах;
Платёжные устройства финансовых учреждений (“Face Pay”);
Цифровые удостоверения личности последнего образца;
Комплексы видеомониторинга городских служб;
Механизация регистрации посещаемости школ/университетов;
Вход пользователей ПК/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без пластика или мобильника! Схожие программы реализуются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом меняется техпроцесс в нынешнее время?

Каждый годик проявляются современные концепции для усовершенствования качества функционирования систем распознавания лиц:

Увеличивается детализация сенсорных устройств — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше шанс ошибки;
Улучшаются искусственные интеллекты — современные структуры вида MobileNetV3 дают возможность оперативно обучаться свежим чертам облика владельца непосредственно на девайсе без отправки данных в облако.
Улучшаются методы антиспуфинга — теперь телефоны умеют различать реальные движущиеся облики от фиксированных фото/масок по микроскопическим движениям кожи.
Интеграция со смарт-гаджетами — умные часы могут самостоятельно заблокировать телефон, если обладатель удалился на значительное расстояние.
Возникают комбинированные устройства — к примеру совмещающие голосовую аутентификацию + лицо + дактилоскопический след.

Здесь, которые тенденции особенно актуальны сейчас:

1) Уменьшение элементов

Изготовители стараются сократить величину отверстия (“чёлки”) под датчики на дисплее за счёт интеграции маленьких ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Переработка прямо на аппарате

Для повышения конфиденциальности всё больше вычислений происходит на месте без передачи данных во сторонний облачный сервис.

3) Упорядочивание регламентов

Гугл энергично продвигает стандарт BiometricPrompt API, для того чтобы такие системы, например как вулкан россия, и все Android-программы могли работать с всеми формами биометрии стандартизированно.

Что подобрать сегодня?

Когда вам нужна максимальная безопасность информации, остановите выбор на топовые аппараты со встроенным ИК-излучателем или же ToF-сенсором глубины.

iPhone всех существующих актуальных версий
Huawei Partner/P Series линейки
Mi Pro
Vivo X модели
Oppo Find X серий.

Если средства скромен – лучше предпочесть традиционным средствам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную возможность удобства.

Каким способом улучшить удобство использования опции?

Есть несколько лайфхаков для пользователей, кто уже использует разблокировку через лицо:

Часто меняйте свою фотографию-шаблон, если сильно трансформируется облик.
Не упускайте из виду протирать линзу фронтальной камеры – пятна могут снизить четкость!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам запускает камеру когда вы поднимаете его.
При записи пытайтесь удерживать голову ровно перед камеры исключая резкого наклона головы.
Используйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отвернулись от дисплея.

Перспективы развития инноваций

В скоро наступающие периоды можно ожидать развития полностью дистанционных способов опознания индивидуума сразу по нескольким биометрическим параметрам одновременно: лицо + голос + походка + манипуляции руками!

Также вероятно появление новых способов защиты приватности – например, переменное изменение электронного образца после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из очень увлекательных инноваций нашего эпохи! Она предоставляет интеракцию со смартфоном удобнее чем когда-либо прежде, и такие программы, как vulkan russia, могут существенно повысить ваш опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы осведомлены, как устроена эта система внутри, – сможете более осмысленно подбирать свой будущий девайс!