Как функционирует определение лиц в мобильных устройствах

Зачем мы выбираем разблокировку по лицу

В последние годы определение физиономий превратилось в одной из самых популярных опций для разблокировки умных телефонов. Всего некоторые годов назад основная масса пользователей обходились пин-кодами, паролями или датчиками отпечатков пальцев. Но при появлением таких технологий, как cabura, нам вполне лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект превращает эту особенность очень нужной? Во-первых, это практично: не нужно запоминать сложные пароли или находить правильный палец в темноте. Во-вторых, это мгновенно: современные алгоритмы идентифицируют лицо буквально за мгновение. В-третьем пункте, это ощущение будущего — как будто в кинофильмах про кабура разведчиков.

Тем не менее за этой на первый взгляд простотой скрывается полный мир трудных технологий и инженерных концепций. Давайте исследовать, как именно работает распознавание лиц в новейших смартфонах, какие бывают способы, насколько они безопасны и что нас ждёт впереди.

Сжатая повествование прогресса технологии

Идентификация лиц как методика присутствует уже более 50 лет. Начальные эксперименты автоматического исследования лиц были предприняты еще в 1960-х годах в научных учреждениях США. Тогда вычислительные машины умели лишь определять очертания головы и определять дистанции между глазами и ртом на монохромных изображениях.

Начальные торговые платформы стали доступны в девяностых годах, но они были несовершенны: функционировали медленно и часто давали сбои. Только с эволюцией синтетических сетей и таких систем, как кабура, сильных мобильных чипов распознавание лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным идентификацией лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие стали внедрять личные решения.

Главные этапы действия системы распознавания

Процесс идентификации лица можно ориентировочно сегментировать на несколько основных этапов:

Обнаружение лиц — устройство распознает наличие человеческого лица в снимке.
Извлечение характеристик — механизм исследует особенности лица: форму глаз, носа, губ, позицию надбровных дуг.
Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе выделенных признаков.
Сравнение со образцом — сформированный модель сопоставляется с записанной при внесении биометрической информацией владельца.
Принятие выбора — если совпадение достаточно высокое, смартфон деблокируется.

Любой из этих этапов требует индивидуальных процедур и улучшений для быстрой работы прямо на устройстве.

Технические составляющие: что скрыто в их недрах

Стандартная передняя камера.

Самый простой легкий способ распознавания лица применяет исключительно переднюю видеокамеру смартфона. Подобный метод реализован во различных бюджетных вариантах Android-устройств.

Сильные стороны:

Не нуждается в потребляет дополнительных сенсоров.
Оперативно работает при качественном освещении.

Слабые стороны:

Легко одурачить изображением или видео.
Плохо работает при низком освещении или нестандартных точках зрения.

Инфракрасная камера и пунктирный проекционный аппарат

Более совершенные системы, такие как кабура, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс составляет базу Face ID от Apple.

Каким способом это действует:

Точечный проекционный прибор проецирует на физиономию пользователя невидимую решетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 точек).
Инфракрасная камера записывает искривление этой сетки по поверхности лица.
Формируется 3D карта глубины, что почти что неосуществима для подделки стандартной фото или маскировкой.

Плюсы

Надёжная деятельность даже в полной неосвещённости.
Большая устойчивость к имитациям.
Точность определения выше 99%.

Добавочные датчики

В отдельных устройствах задействуются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые определяют период движения света до предмета и обратно; RGB-датчики дальности; специальные оптические дальномеры для создания более детализированной 3D-модели физиономии.

Эти инновации применяются чаще всего во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: искуственный ум в действии

Текущие системы опознания лиц немыслимы в отсутствие эксплуатации artificial intelligence и машинного обучения. Именно благодаря таким разработкам, как кабура, аппарат может распознавать владельца даже при трансформациях внешности: новая причёска, растительность на лице, линзы или макияж не становятся помехой для открытия.

Детектирование лиц

При стартовом шаге алгоритм обязана оперативно найти лицо внутри целого кадра камеры. Для этой задачи задействуются многоуровневые классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены находить лица людей среди множества других объектов.

Пример: процесс MTCNN в состоянии обнаруживать физиономию даже с частичном закрытии (например, шарфом или ладонью).

Идентификация ключевых аспектов

После идентификации лица устройство, такая как кабура, определяет положение главных точек: кончики глаз, конец носа, границы губ и так далее. Обычно задействуется от 68 до 128 основных маркеров на лице.

Данное нужно для стабилизации картинки: если человек находится с телефон под наклоненным, или повернул голову, программа корректирует изображение до обычного угла для дальнейшего анализа.

Создание биометрии модели

Далее нейросеть строит сжатое числовое представление („эмбеддинг“) лица пользователя — своеобразный цифровой образ лица длиной от 128 до 512 флоатов.

Такой формат очень сложно сфальсифицировать: он не сохраняет непосредственно изображение юзера, а лишь особенные характеристики его внешности, что делает его оптимальным для таких систем, как кабура казино.

Сравнение и принятие заключения

Если юзер намеревается разлочить мобильник взором, механизм воспроизводит все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный уровень (обычно превышает 99%), телефон, как и платформа кабура казино, доступен; если нет — доступ блокируется.

Приспособление к метаморфозам внешности

Интересная черта нынешних систем — способность самостоятельного обучения. Если вы постоянно открываете смартфон с новой стрижкой или очками, программа постепенно модернизирует базовый модель вашего внешности для улучшения точности функционирования без ухудшения безопасности.

Защита биометрических данных.

Множество пользователи опасаются хранить свои биометрические идентификационные данные на мобильном устройстве из-за угрозы утечки данных или взлома гаджета. Определенные организации, такие как кабура казино, предлагают варианты для улучшения безопасности сведений юзеров.

Локальное сбережение: Преимущественно устройств записывает биометричные образцы лишь внутрь защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не выходят из устройство и недоступны в том числе создателю.
Шифрование: Все информация хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Приложения внешних девелоперов не имеют непосредственного возможности доступа к биометрическим; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Следует подчеркнуть существенную деталь: в случае, если какой-то человек получит доступ к вашему телефону физически (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители реализуют систему защиты от неосознанного разблокирования — в частности, просят раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют категории определения лиц на изображениях?

В настоящее время можно выделить различить 3 основных метода к осуществлению этой функции:

Программируемое плоское идентификация

Эксплуатируется только передняя камера без дополнительных сенсоров глубины. Этот подход встречается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость осуществления; умеренная затраты; скоростная работа при хорошем свете.
Минусы: легко одурачить снимком; ненадежная функционирование ночью; недостаточная охрана.

Оборудование для трёхмерное сканирование

Задействует ИК камеру + проекционный модуль точек + датчики глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Преимущества: большая надежность; нельзя подделать изображение/видеозапись; постоянная работа в любых условиях освещения.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана („чёлка“)

Гибридные методы с ИИ-дополнением

Задействуют комбинацию софтверных методов + аппаратную обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам („anti-spoofing“). Например, подобные товары, как кабура и Google Pixel Face Unlock последних поколений, объединяют фронталку c инфракрасным датчиком движения Soli Radar для предотвращения от подделок жестами/масками/видеоэкранами чужих устройств.

Образцы использования разных способов

iPhone серии X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование
Xiaomi Mi8 Explorer Edition в первый раз представил подобие Face ID в числе Android.
Samsung Galaxy S10 версия/S20 имеют как программное плоское распознавание по снимку селфи-камерой, так и датчик ириса глаза.
Huawei Mate20 Pro использует набор из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Вопросы защиты и ошибочные тревоги

Несмотря на поразительный прогресс техники за последние лет, идеальных механизмов пока не существует:

Вероятность мошенничества: Недорогие мобильники легко „разблокируются“ высококачественной изображением владельца либо видео с дисплея иного гаджета.
Идентичные двойняшки: Даже самые идеальные устройства могут спутать между монозиготными близнецами либо родственниками с очень похожей внешностью.
Метаморфозы внешности: Стремительное похудение/увеличение массы тела, хирургические вмешательства либо повреждения порой требуют повторной регистрации биометрических данных.
Условия фотографирования: Яркая подсветка солнцем или глубокая тень могут понизить верность распознавания признаков.

Вот несколько подсказок для защищённому использованию:

Для важных операций всегда используйте дополнительную аутентификацию;
Не включайте опцию „Разблокировка по лицу“ на недорогих аппаратах без ИК-сенсоров;
Систематически апгрейдите прошивку телефона для защиты от актуальных атак;
Включайте опцию „Требовать открытых глаз“ в тех местах, где она имеется.

В каких местах ещё находится применение технология кроме смартфонов?

Несмотря на то, что тема этой публикации посвящена в частности портативным гаджетам, необходимо сказать о альтернативных областях использования технологии:

Управление прохода в офисах и резиденциях;
Платёжные аппараты финансовых учреждений („Face Pay“);
Виртуальные паспорта последнего образца;
Комплексы видеомониторинга муниципальных служб;
Механизация учёта посещаемости школ/университетов;
Вход пользователей ПК/ноутбуков.

Например: В городском метро уже испытывается система платежа проезда по лицу („Face Pay“) — хватит пройти через турникет без пластика или телефона! Схожие инициативы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как трансформируется технология сегодня?

Всякий год появляются современные мысли для усовершенствования стандарта функционирования систем распознавания лиц:

Увеличивается разрешение сенсорных устройств — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше шанс неточности;
Развиваются нейронные сети — новейшие конструкции вида MobileNetV3 обеспечивают возможность быстро обучаться дополнительным особенностям облика обладателя напрямую на гаджете без пересылки информации в облачное хранилище.
Улучшаются методы антиспуфинга — теперь смартфоны умеют отличать реальные анимированные лица от неподвижных снимков/маскировок по незаметным движениям кожи.
Синхронизация со умными устройствами — умные часы могут самостоятельно заблокировать смартфон, если обладатель удалился на значительное расстояние.
Возникают гибридные устройства — например объединяющие голосовую опознание + физиономию + отпечаток пальца.

Здесь, те тенденции в особенности популярны сейчас:

1) Уменьшение элементов

Изготовители намереваются сократить величину выреза („чёлки“) под сенсоры на дисплее за счёт встраивания маленьких ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на аппарате

Для увеличения приватности всё более расчётов выполняется локально без передачи данных во дополнительный облачный услугу.

3) Упорядочивание стандартов

Гугл активно продвигает норму BiometricPrompt API, с целью чтобы подобные системы, например как cabura, и любые Android-программы могли работать с всеми формами биометрии стандартизированно.

Что решить сегодня?

Когда вам всем нужна предельная безопасность данных, подбирайте топовые устройства с вмонтированным ИК-излучателем либо ToF-сенсором глубины.

iPhone всех новейших моделей
Huawei Partner/P ряда
Mi Professional
Vivo X линейки
Oppo Find Икс линейки.

Если бюджет ограничен – лучше отдавать предпочтение обычным средствам безопасности (PIN-код/сканер отпечатка), а опцию „разблокировка по лицу“, такую как в cabura, применять только как опциональную возможность удобства.

Каким образом повысить комфорт использования функции?

Есть несколько лайфхаков для людей, кто уже использует разблокировку через лицо:

Часто обновляйте свою фотографию-шаблон, если сильно меняется внешний вид.
Не пренебрегайте чистить объектив передней камеры – пятна могут уменьшить четкость!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам включает фотоаппарат когда вы поднимаете его.
В процессе регистрационного процесса пытайтесь удерживать лицо прямо напротив видеоустройства не допуская сильного наклона головы.
Используйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отвернулись от дисплея.

Перспективы прогресса техники

В ближайшие годы можно предвкушать возникновения полностью безконтактных способов идентификации индивидуума сразу по нескольким биометрическим параметрам одновременно: физиономия + речь + шаги + движения рук!

Также возможно развитие новых методов защиты приватности – скажем, переменное модификация цифрового паттерна после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – единственная из наиболее интересных технологий нашего эпохи! Она делает интеракцию со телефоном комфортнее чем раньше, и такие аппы, как кабура казино, могут существенно улучшить ваш опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как устроена эта технология изнутри, – сможете осознаннее определять свой очередной устройство!