Каким способом работает идентификация лицевых образов в мобильных устройствах

Почему мы останавливаемся на разблокировку по лицевому распознаванию

В последние времена идентификация лиц является одной из самых популярных опций для открытия смартфонов. Еще некоторые годов назад основная часть пользователей удовлетворялись пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением таких технологий, как вулкан россия, нам вполне лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какой аспект делает данную функцию очень нужной? Во-первых, это удобно: не нужно удерживать в памяти сложные пароли или находить верный палец в тьме. Кроме того, это оперативно: современные системы распознают лицо буквально за доли секунды. В-третьем пункте, это чувство футуризма — как будто в кинолентах про вулкан россия агентов.

Однако за данной кажущейся легкостью таится весь мир сложных технологий и инженерных решений. Позвольте нам исследовать, как именно действует распознавание лиц в современных гаджетах, какие существуют методы, насколько они надёжны и что нас предстоит.

Сжатая повествование эволюции технологии

Распознавание лиц как методика существует уже более 50 годов. Начальные попытки машинного изучения лиц были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда ЭВМ могли лишь обозначать контуры головы и вычислять дистанции между очами и устами на ахроматических снимках.

Изначальные коммерческие установки возникли в 1990-х годах, но они были несовершенны: работали медленно и нередко ошибались. Только с развитием нейронных сетей и таких систем, как вулкан россии, сильных мобильных процессоров определение лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным идентификацией лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять личные разработки.

Главные шаги действия системы распознавания

Процесс распознавания лица можно условно разделить на несколько ключевых этапов:

Распознавание лица — камера определяет присутствие гуманного лица в кадре.
Выделение признаков — система изучает черты лица: форму глаз, обонятельного органа, губ, положение надбровных дуг.
Построение модели — создаётся уникальный цифровой отпечаток (faceprint) на основе определённых признаков.
Сравнение с стандартом — созданный модель сравнивается с записанной при внесении биометрической информацией владельца.
Принятие определения — если совпадение достаточно существенное, смартфон деблокируется.

Любой из данных шагов запрашивает специальных методов и улучшений для оперативной работы непосредственно на девайсе.

Технические составляющие: что находится внутри

Обычная селфи камера.

Самый несложный вариант идентификации лица применяет лишь переднюю видеокамеру мобильного устройства. Подобный подход реализован во различных доступных версиях Android-девайсов.

Положительные стороны:

Не нуждается в внешних сенсоров.
Оперативно действует при достаточном свете.

Минусы:

Несложно одурачить фотографией или видеозаписью.
Неправильно действует при низком свете или нестандартных ракурсах.

Инфракрасная камера и точечный проектор

Более продвинутые системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика является основой Face ID от Apple.

Каким образом это работает:

Точечный проекционный прибор отображает на физиономию пользователя невидимую решетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 пятен).
Инфракрасная устройство регистрирует искривление этой решетки по плоскости физиономии.
Получается трёхмерная глубинная карта глубины, которая почти невозможна для фальсификации стандартной фотографией или маскировкой.

Плюсы

Надёжная функционирование даже в полной неосвещённости.
Сильная сопротивляемость к фальсификациям.
Точность определения более 99%.

Дополнительные сенсоры

В некоторых аппаратах применяются также экстра датчики: ToF (Time-of-Flight), которые измеряют период движения луча до объекта и обратно; RGB-датчики дальности; специальные лазерные лидары для построения более точной 3D-модели лица.

Эти инновации применяются в основном во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искуственный интеллект в исполнении

Текущие устройства распознавания лиц неосуществимы в отсутствие эксплуатации ИИ и machine learning. Именно вследствие таким инновациям, как вулкан россии, аппарат может узнавать владельца даже при трансформациях внешности: новая причёска, растительность на лице, очки или косметика не становятся барьером для деблокировки.

Распознавание лиц

При начальном этапе система должна оперативно найти лицо внутри полного кадра с камеры. Для этого используются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые натренированы распознавать человеческие лица среди множества других объектов.

Пример: метод MTCNN может находить облик даже в случае частичном перекрытии (например, платком или ладонью).

Определение важных аспектов

После идентификации лица система, такая как вулкан россии, устанавливает положение главных точек: уголки глаз, кончик носа, границы губ и так далее. Часто применяется от 68 до 128 основных меток на лицевой поверхности.

Это требуется для нормализации картинки: если юзер находится с мобильник под наклоном, или повернул голову, программа исправляет изображение до нормального состояния для последующего изучения.

Формирование биометрии образца

Далее нейронная сеть строит сжатое цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Этот образец крайне трудно подделать: он не сохраняет само изображение пользователя, а лишь уникальные черты его вида, что делает его идеальным для таких систем, как vulkan russia.

Сопоставление и принятие выбора

Когда юзер хочет разблокировать смартфон взором, механизм воспроизводит все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный границу (обычно превышает 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ запрещается.

Привыкание к изменениям внешности

Увлекательная характеристика актуальных системы — возможность самообучения. Если ты часто разблокируете телефон с новой укладкой или очками, программа постепенно освежает базовый модель вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Защита биометрии данных.

Многие клиенты опасаются хранить свои биометрические данные на телефоне из-за угрозы утечки информации или взлома устройства. Некоторые организации, например vulkan russia, предоставляют методы для увеличения защиты сведений пользователей.

Локальное хранение: Основная часть устройств хранит биометричные шаблоны исключительно внутрь защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из гаджет и закрыты включая создателю.
Шифрование: Все сведения сберегаются только в шифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Приложения третьих девелоперов не обладают прямого доступа к биометрическим данным; они могут лишь требовать подтверждение верификации личности через системный API.

Необходимо упомянуть существенную деталь: если кто-либо сможет получить физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители осуществляют систему защиты от неосознанного разблокирования — в частности, просят открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются виды определения лиц на изображениях?

Сегодня можно выделить определить 3 ключевых метода к выполнению этой операции:

Программируемое двухмерное идентификация

Эксплуатируется только фронтальная камера без экстра датчиков дистанции. Этот подход наблюдается обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота осуществления; умеренная затраты; быстрая функционирование при достаточном освещении.
Минусы: просто обмануть снимком; нестабильная работа ночью; недостаточная безопасность.

Оборудование для 3D сканирование

Применяет ИК камеру + проекционный модуль пикселей + датчики глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Преимущества: высокая надежность; не получится исказить изображение/видеозапись; устойчивая работа в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с дополнением ИИ

Применяют комбинацию программируемых методов + техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, например вулкан россии и Google Pixel Face Unlock последних поколений, комбинируют фронталку c ИК датчиком мобильности Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями посторонних устройств.

Образцы эксплуатации различных способов

iPhone серии X/11/12/13/14 используют только физическое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition впервые предложил эквивалент Face ID в числе Android.
Samsung Galaxy S10 версия/S20 поддерживают как программное обеспечение двухмерное распознавание по изображению фронтальной камерой, так и датчик ириса глаза.
Huawei Mate20 Pro задействует набор из ИК-освещения + Dot Projector + ToF-датчик

Проблемы охраны и неверные срабатывания

Несмотря на поразительный успехи техники за прошедшие годы, безупречных системы пока не имеется:

Вероятность обмана: Бюджетные мобильники просто открываются качественной снимком хозяина или же видео с экрана другого устройства.
Идентичные близнецы: Даже самые безупречные устройства могут перепутать между однояйцевыми близнецами либо родственниками с очень похожей внешностью.
Трансформации облика: Стремительное утрата веса/набор веса, пластические операции либо повреждения иногда требуют перерегистрации биометрии.
Условия записи: Сильная освещённость солнечным светом или же интенсивная тень могут понизить аккуратность определения признаков.

Здесь некоторые советов для защищённому эксплуатации:

Для важных операций всегда используйте двухэтапную аутентификацию;
Не включайте опцию “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
Постоянно обновляйте ПО смартфона для обеспечения безопасности от новых видов атак;
Включайте настройку “Требовать открытых глаз” там, где она есть.

В каких областях дополнительно находится применение технологии помимо смартфонов?

Хотя тема данной работы касается именно мобильным устройствам, следует отметить альтернативных областях использования технологии:

Управление входа в рабочих помещениях и резиденциях;
Платёжные аппараты банков (“Face Pay”);
Виртуальные удостоверения личности нового типа;
Установки видеомониторинга городских подразделений;
Автоматизирование учёта присутствия образовательных учреждений/университетов;
Вход участников персональных компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без карты или мобильника! Схожие проекты развиваются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как изменяется техпроцесс в нынешнее время?

Всякий годочек проявляются современные мысли для улучшения стандарта работы систем идентификации лиц:

Увеличивается детализация сенсорных устройств — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность ошибки;
Улучшаются нейросети — передовые архитектуры вида MobileNetV3 позволяют скоростно обучаться новым характеристикам внешности пользователя непосредственно на девайсе без пересылки информации в облачное хранилище.
Улучшаются технологии антиспуфинга — теперь смартфоны способны различать подлинные живые облики от статичных фотографий/масок по незаметным движениям кожи.
Интеграция со умными устройствами — умные часы могут авто заблокировать смартфон, если обладатель отошёл далеко.
Появляются комбинированные системы — например объединяющие голосовую аутентификацию + лицо + пальцевой отпечаток.

Вот, какие тенденции очень популярны сейчас:

1) Миниатюризация компонентов

Производители пытаются уменьшить габариты прорези (“чёлки”) для сенсоры на экране за счёт внедрения маленьких ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для улучшения личной безопасности всё более вычислений происходит на месте без передачи информации во дополнительный облачный сервис.

3) Стандартизация регламентов

Google энергично пропагандирует стандарт BiometricPrompt API, чтобы подобные системы, как вулкан россия, и каждые Android-аппы были совместимы с всеми формами биометрии стандартизированно.

Что выбрать на сегодня?

Когда тебе необходима предельная сохранность данных, выбирайте передовые аппараты с интегрированным ИК-излучателем либо ToF-сенсором глубины.

iPhone всех существующих последних поколений
Huawei Companion/P Series линейки
Mix Expert
Vivo X линейки
Оппо Найти Х линейки.

Если финансы скромен – лучше отдавать предпочтение классическим средствам безопасности (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную возможность удобства.

Каким способом повысить практичность работы возможности?

Есть несколько советов для пользователей, кто уже пользуется разблокировку по лицу:

Регулярно меняйте свою фото-шаблон, если значительно меняется внешний вид.
Не упускайте из виду чистить линзу фронтальной камеры – пятна могут понизить четкость!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам активирует фотоаппарат как только вы поднимаете его.
При регистрационного процесса пытайтесь удерживать голову прямо напротив видеоустройства не допуская значительного наклона головы.
Используйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отворачиваетесь от экрана.

Будущее развития техники

В ближайшие времена можно предполагать развития полностью бесконтактных способов распознавания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + манера ходьбы + манипуляции руками!

Также предполагается появление свежих способов защиты приватности – к примеру, динамическое корректировка электронного образца после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее интересных техник нашего периода! Она обеспечивает интеракцию со телефоном удобнее чем раньше, и такие аппы, как vulkan russia, могут значительно улучшить ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы знаете, как устроена эта технология изнутри, – сумеете вдумчиво определять свой очередной устройство!