Как работает идентификация лиц в телефонах

Почему мы предпочитаем разблокирование по фейсу

В прошлые времена определение лиц является одной из самых распространённых опций для деблокировки мобильных телефонов. Всего несколько годков тому назад большинство юзеров обходились PIN-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением таких технологий, как вулкан россия, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что делает эту конкретную возможность настолько популярной? Во-первых, это комфортно: не нужно помнить сложные пароли или искать правильный палец в темноте. Кроме того, это мгновенно: современные системы узнают лицо практически за мгновения ока. В-третьем пункте, это ощущение футуристичности — как будто в кинолентах про вулкан автомат шпионов.

Однако за этой кажущейся несложностью прячется целый мир трудных техник и инженерных решений. Давайте исследовать, как именно действует фейсканирование в актуальных мобильных телефонах, какие применяются способы, насколько они безопасны и что нас ожидает в будущем.

Краткая повествование прогресса технологии

Идентификация лиц как техника существует уже более 50 лет. Изначальные эксперименты автоматизированного анализа лица были сделаны еще в 1960-х годах в лабораториях США. Тогда компьютеры могли лишь обозначать контуры черепа и измерять дистанции между зрачками и губами на монохромных снимках.

Первые торговые платформы возникли в 90-х, но они были далеки от совершенства: действовали неспешно и нередко ошибались. Только с развитием синтетических сетей и таких систем, как вулкан россии, высокопроизводительных мобильных микросхем определение лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным распознаванием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать собственные разработки.

Основные стадии функционирования устройства распознавания

Процесс идентификации лица можно ориентировочно поделить на несколько основных этапов:

Идентификация лица — аппарат выявляет существование гуманного лица в снимке.
Определение характеристик — механизм исследует черты физиономии: форму зрительных органов, обонятельного органа, уст, позицию надбровных дуг.
Построение модели — создаётся неповторимый цифровой отпечаток (faceprint) на основе определённых признаков.
Сравнение со стандартом — сформированный модель сравнивается со записанной при внесении биометрической данными владельца.
Принятие выбора — если совпадение достаточно существенное, смартфон разблокируется.

Каждый из этих этапов требует индивидуальных методов и усовершенствований для оперативной работы прямо на устройстве.

Аппаратные компоненты: что прячется внутри них

Обычная селфи камера.

Самый легкий метод распознавания облика применяет лишь лицевую камеру смартфона мобильного устройства. Данный способ осуществлён во различных недорогих моделях Android-девайсов.

Плюсы:

Не нуждается в требует дополнительные датчиков.
Шустро работает при качественном освещении.

Отрицательные стороны:

Несложно обмануть фотографией или роликом.
Плохо работает при слабом свете или непривычных ракурсах.

Инфракрасная камера и пунктирный проектор

Более усовершенствованные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс лежит в основе Face ID от Apple.

Каким способом это действует:

Точечный проектор проецирует на облик пользователя невидимую структуру из тысяч инфракрасных меток (например, Face ID использует около 30 000 точек).
ИК устройство регистрирует деформацию этой сетки по плоскости физиономии.
Получается 3D глубинная карта глубинности, что практически невозможна для фальсификации стандартной фотографией или маскировкой.

Достоинства

Надёжная функционирование даже в полной тьме.
Большая сопротивляемость к имитациям.
Точность определения свыше 99%.

Дополнительные сенсорные устройства

В отдельных устройствах задействуются также дополнительные сенсоры: ToF (Time-of-Flight), которые измеряют период прохождения света до цели и обратно; RGB-датчики глубины; специальные оптические дальномеры для формирования более точной 3D-модели лица.

Эти технологии применяются в основном во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искусственный интеллект на работе

Текущие устройства опознания физиономий невозможны при отсутствии применения artificial intelligence и машинного обучения. Именно из-за таким разработкам, как вулкан россии, гаджет в состоянии распознавать владельца даже при изменениях внешности: новая стрижка, борода, очки или грим не становятся препятствием для деблокировки.

Детектирование физиономии

В начальном шаге алгоритм необходимо мгновенно обнаружить образ лица внутри полного кадра камеры. Для данной цели задействуются последовательные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые натренированы идентифицировать человеческие лица среди множества других объектов.

Пример: метод MTCNN способен находить физиономию даже с неполном перекрытии (например, шалью или рукой).

Идентификация основных аспектов

После идентификации лица система, такая как вулкан россии, устанавливает местоположение главных точек: кончики глаз, верхушка носа, края губ и так далее. Часто используется от 68 до 128 ключевых маркеров на лицевой области.

Это необходимо для нормализации картинки: если юзер находится с телефон под наклоненным, или наклонил головку, программа „выпрямляет“ картинку до стандартного положения для дальнейшего анализа.

Создание биометрического образца

Далее нейронная сеть строит сжатое числовое представление („эмбеддинг“) лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Этот образец крайне затруднительно сфальсифицировать: он не удерживает само изображение пользователя, а лишь уникальные черты его вида, что делает его оптимальным для таких систем, как vulkan russia.

Сравнение и вынесение выбора

В случае, когда юзер желает разлочить смартфон взглядом, программа повторяет все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый порог (обычно выше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ не предоставляется.

Адаптация к трансформациям облика

Увлекательная особенность современных системы — способность самостоятельного обучения. Если вы регулярно открываете телефон с свежей укладкой или очками, система постепенно освежает эталонный модель вашего лица для повышения точности работы без ухудшения безопасности.

Защита биометрических данных данных.

Множество пользователи боятся сохранять свои биометрические идентификационные данные на мобильном устройстве из-за вероятности утечки информации или взлома устройства. Определенные фирмы, например vulkan russia, предлагают варианты для повышения защиты сведений юзеров.

Локальное сохранение: Основная часть девайсов записывает биометрические шаблоны исключительно в пределах защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют устройство и не доступны в том числе производителю.
Шифрование: Все сведения сохраняются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция программ: Программы сторонних девелоперов не имеют прямого возможности доступа к биометрическим данным; они могут лишь запрашивать подтверждение подтверждения идентичности через системный API.

Стоит подчеркнуть существенную особенность: если какой-то человек сможет получить физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании внедряют защиту от „слепого“ разблокирования — к примеру, требуют раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают виды определения лиц на изображениях?

На сегодняшний день можно выделить выделить 3 ключевых метода к осуществлению этой функции:

Программное двухмерное идентификация

Применяется только передняя камера без дополнительных детекторов глубины. Этот метод наблюдается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость осуществления; низкая цена; оперативная функционирование при достаточном освещении.
Минусы: несложно одурачить фотографией; ненадежная работа ночью; недостаточная охрана.

Аппаратное объёмное сканирование

Применяет ИК камеру + проектор точек + датчики дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Достоинства: высокая надёжность; нельзя исказить фото/видео; стабильная функционирование при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана („чёлка“)

Комбинированные методы с ИИ-дополнением

Используют комбинацию программируемых методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам („anti-spoofing“). Например, такие продукты, например вулкан россии и Google Pixel Face Unlock последних версий, сочетают фронтальную камеру c инфракрасным сенсором мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Образцы эксплуатации различных способов

iPhone серии X/11/12/13/14 применяют только физическое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition в первый раз предложил подобие Face ID в числе Android.
Samsung Galaxy S10 версия/S20 обеспечивают как программное 2D определение по снимку фронталкой, так и сканер ириса глаза.
Huawei Mate20 Pro задействует систему из ИК-инфракрасного света + Dot Projector + ToF-датчик

Трудности охраны и ошибочные сигналы

Несмотря на впечатляющий прогресс техники за последние годы, идеальных механизмов пока не существует:

Шанс мошенничества: Бюджетные телефоны без труда доступны качественной снимком хозяина или же видео с дисплея иного гаджета.
Идентичные близнецы: Даже самые идеальные механизмы могут спутать между монозиготными близнецами либо родственниками с очень похожей внешностью.
Трансформации внешности: Стремительное снижение веса/увеличение массы тела, хирургические вмешательства или повреждения порой необходимы для обновления данных биометрических данных.
Условия съёмки: Сильная засветка солнечным светом или плотная затенение могут уменьшить аккуратность определения признаков.

Вот некоторые подсказок по защищённому применению:

Для критически важных операций всегда используйте двухфакторную аутентификацию;
Не запускайте функцию „Разблокировка по лицу“ на недорогих устройствах без ИК-сенсоров;
Регулярно обновляйте прошивку телефона для защиты от новых видов атак;
Включайте опцию „Требовать раскрытых глаз“ в тех местах, где она имеется.

В каких местах дополнительно применяется технологии помимо мобильных телефонов?

Несмотря на то, что предмет нашей статьи касается в частности портативным гаджетам, стоит упомянуть о альтернативных областях использования технологии:

Контроль входа в рабочих помещениях и многоквартирных зданиях;
Платёжные аппараты банков („Face Pay“);
Виртуальные идентификационные документы нового поколения;
Системы видеонаблюдения муниципальных сервисов;
Механизация учёта посещаемости образовательных учреждений/вузов;
Авторизация пользователей компьютеров/ноутбуков.

Например: В московском метро уже тестируется система платежа проезда по фейсу („Face Pay“) — достаточно пройти через турникет без пластика или мобильника! Похожие программы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом изменяется технология в наше время?

Всякий год появляются современные мысли для повышения качества работы систем распознавания лиц:

Увеличивается чёткость датчиков — чем больше деталей фиксируется камерой/глубинными сенсорами, тем меньше вероятность ошибки;
Развиваются нейронные сети — передовые конструкции модели MobileNetV3 дают возможность быстро осваивать дополнительным чертам внешности пользователя напрямую на гаджете без отправки данных в облако.
Улучшаются технологии антиспуфинга — теперь мобильные устройства могут распознавать настоящие анимированные облики от статичных фото/масок по мельчайшим движениям кожи.
Интеграция со смарт-гаджетами — умные часы могут автоматически заблокировать смартфон, если обладатель ушёл далеко.
Появляются комбинированные устройства — к примеру совмещающие аудио идентификацию + физиономию + отпечаток пальца.

Здесь, которые направления очень востребованы сейчас:

1) Миниатюризация элементов

Производители намереваются уменьшить величину отверстия („чёлки“) под датчики на дисплее за счёт интеграции маленьких ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на устройстве

Для увеличения личной безопасности всё больше расчётов происходит локально без пересылки информации во дополнительный облачный услугу.

3) Упорядочивание норм

Google активно пропагандирует эталон BiometricPrompt API, чтобы подобные системы, например как вулкан россия, и все Android-приложения были совместимы с всеми формами биометрии стандартизированно.

Что решить сегодня?

В случае если вам необходима максимальная сохранность данных, подбирайте флагманские устройства с интегрированным ИК-проектором либо ToF-сенсором глубины.

iPhone каждого последних версий
Huawei Companion/Series P серии
Mi Professional
Vivo X линейки
Oppo Find X серий.

Если средства скромен – лучше отдавать предпочтение обычным средствам безопасности (PIN-код/сканер отпечатка), а функцию „разблокировка по лицу“, такую как в вулкан россия, использовать только как опциональную опцию комфорта.

Каким способом повысить удобство функционирования опции?

Есть пара лайфхаков для пользователей, кто уже пользуется разблокировку по лицу:

Часто обновляйте свою изображение-шаблон, если значительно изменяется облик.
Не пренебрегайте протирать объектив передней камеры – пятна могут снизить четкость!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам запускает фотоаппарат когда вы поднимаете его.
При регистрации постарайтесь удерживать лицевую часть неподвижно перед видеоустройства не допуская резкого наклона головы.
Используйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвели взгляд от дисплея.

Будущее прогресса инноваций

В предстоящие годы можно предполагать появления полностью безконтактных способов опознания человека сразу по нескольким биометрическим параметрам одновременно: физиономия + голос + шаги + жесты рук!

Также вероятно появление современных методов защиты конфиденциальности – к примеру, переменное изменение цифрового образца после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из самых захватывающих технологий нашего периода! Она обеспечивает взаимодействие со телефоном удобнее чем раньше, и такие аппы, как vulkan russia, могут значительно оптимизировать ваш пользовательский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как устроена эта система в деталях, – будете в состоянии вдумчиво подбирать свой очередной гаджет!