Как функционирует определение лицевых образов в мобильных устройствах
Для чего мы предпочитаем разблокирование по лицу
В недавние времена идентификация физиономий превратилось в одной из самых распространённых опций для открытия мобильных телефонов. Лишь некоторые лет назад основная часть юзеров удовлетворялись PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением подобных технологий, например Вулкан Платинум, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.
Какая вещь делает эту конкретную возможность очень нужной? Во-первых, это удобно: не нужно помнить замысловатые пароли или искать верный палец в тьме. Кроме того, это мгновенно: современные системы идентифицируют лицо фактически за доли секунды. В-третьих, это чувство будущего — как будто в кинолентах про вулкан платинум агентов.
Тем не менее за данной кажущейся простотой скрывается полный универсум трудных технологий и инженерных решений. Давайте исследовать, как точно функционирует идентификация по лицу в новейших смартфонах, какие бывают методы, насколько они безопасны и что нас ожидает в будущем.
Сжатая история развития техники
Идентификация лиц как техника присутствует уже более пятидесяти лет. Изначальные эксперименты автоматизированного исследования лиц были осуществлены еще в 1960-х годах в лабораториях США. Тогда вычислительные машины могли лишь определять силуэты головы и вычислять расстояния между очами и губами на черно-белых снимках.
Начальные торговые установки стали доступны в 1990-х годах, но они были несовершенны: функционировали медленно и нередко ошибались. Только с развитием искусственных сетей и таких платформ, как Vulkan Platinum, сильных мобильных процессоров идентификация лиц стало по-настоящему массовым явлением.
В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным распознаванием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять собственные разработки.
Главные шаги работы устройства определения
Процесс определения лица можно примерно поделить на несколько ключевых этапов:
- Идентификация лиц — камера выявляет существование человеческого образа в кадре.
- Определение признаков — алгоритм исследует контуры лица: очертания глаз, носа, уст, расположение надбровных дуг.
- Построение шаблона — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
- Сравнение с стандартом — созданный модель сопоставляется с сохранённой при учёте биометрической сведениями владельца.
- Принятие выбора — если сходство достаточно значительное, смартфон деблокируется.
Любой из данных этапов требует особых алгоритмов и оптимизаций для быстрой работы прямо на устройстве.
Железные компоненты: что скрыто внутри них
Типичная селфи камера.
Самый простой простой вариант определения физиономии использует лишь переднюю видеокамеру мобильного устройства. Такой подход осуществлён во многочисленных недорогих моделях Android-девайсов.
Достоинства:
- Не нуждается в внешних датчиков.
- Шустро функционирует при качественном освещении.
Недостатки:
- Несложно ввести в заблуждение фотографией или видео.
- Неправильно работает при слабом свете или нестандартных ракурсах.
ИК фотокамера и пунктирный проектор
Более совершенные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс составляет базу Face ID от Apple.
Как это действует:
- Точечный устройство проекции отображает на физиономию использующего невидимую решетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 меток).
- ИК камера записывает изменение формы данной решетки по плоскости физиономии.
- Создаётся трёхмерная глубинная карта глубины, которая практически неподвластна для подделки типичной снимком или маской.
Преимущества
- Надёжная работа даже в полной темноте.
- Высокая защита к имитациям.
- Точность идентификации свыше 99%.
Дополнительные сенсорные устройства
В некоторых девайсах применяются также экстра сенсорные устройства: ToF (Time-of-Flight), которые определяют период движения луча до объекта и обратно; RGB-датчики дальности; специальные световые лидары для построения более аккуратной 3D-модели физиономии.
Эти технологии встречаются наиболее часто во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).
Софтверные процедуры: синтетический ум на действии
Нынешние механизмы идентификации лиц невозможны без эксплуатации ИИ и машинного обучения. Именно благодаря таким инновациям, как Vulkan Platinum, аппарат в состоянии узнавать владельца даже при изменениях облика: новая стрижка, щетина, оптика или грим не становятся помехой для открытия.
Распознавание лиц
В стартовом этапе алгоритм обязана мгновенно распознать лицо в пределах всего снимка камеры. Для этого задействуются каскадные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые „обучены” находить человеческие лица среди множества других объектов.
Пример: метод MTCNN может обнаруживать облик даже в случае частичном перекрытии (например, шарфом или рукой).
Определение основных аспектов
После обнаружения лица устройство, такая как Vulkan Platinum, вычисляет положение ключевых точек: кончики глаз, верхушка носа, контуры губ и так далее. Часто используется от 68 до 128 основных меток на лице.
Данное нужно для нормализации картинки: если пользователь держит мобильник под наклоном, или склонил голову, программа корректирует изображение до обычного угла для дальнейшего анализа.
Формирование биометрического образца
Далее нейронная сеть строит уплотненное числовое представление („эмбеддинг”) лица пользователя — своеобразный цифровой „отпечаток” внешности длиной от 128 до 512 чисел с плавающей запятой.
Такой формат весьма трудно подделать: он не хранит само картинку пользователя, а лишь исключительные особенности его внешности, что делает его оптимальным для таких систем, как Вулкан Казино Платинум.
Сопоставление и вынесение решения
Когда юзер намеревается открыть мобильник глазами, программа повторяет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.
Если аналогичность превышает определённый границу (обычно превышает 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ запрещается.
Адаптация к трансформациям внешнего вида
Занимательная особенность нынешних систем — возможность самостоятельного обучения. Если вы часто разблокируете телефон с свежей стрижкой или очками, алгоритм постепенно обновляет основной образец вашего внешности для улучшения точности функционирования без ухудшения безопасности.
Охрана биометрических данных информации.
Множество клиенты боятся держать свои биометрические данные на телефоне из-за угрозы утечки данных или взлома устройства. Иные организации, вроде Вулкан Казино Платинум, предлагают решения для увеличения сохранности сведений клиентов.
-
Локальное сбережение: Преимущественно аппаратов хранит био-идентификационные шаблоны только внутри безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают аппарат и закрыты включая изготовителю.
-
Шифрование: Все сведения сохраняются только в кодированном виде с использованием современных криптографических алгоритмов AES256.
-
Изоляция приложений: Приложения третьих разработчиков не имеют непосредственного доступа к биометрическим; они могут лишь запрашивать факт подтверждения идентичности через системный API.
Стоит подчеркнуть существенную особенность: в случае, если кто-то получит физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители реализуют защиту от автоматического разблокирования — в частности, просят разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.
Какие именно имеются типы идентификации лиц?
Сегодня можно определить различить 3 ключевых способа к осуществлению этой задачи:
Программируемое 2D распознавание
Эксплуатируется только передняя камера без дополнительных датчиков дистанции. Этот метод встречается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).
Достоинства: несложность воплощения; низкая затраты; оперативная деятельность при достаточном свете.
Минусы: легко обмануть фотографией; неустойчивая функционирование ночью; низкая защищенность.
Аппаратное трёхмерное сканирование
Задействует инфракрасную видеокамеру + проекционный модуль пикселей + сенсоры дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Плюсы: большая надежность; невозможно подделать фото/видео; устойчивая функционирование в любых условиях освещения.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана („чёлка”)
Смешанные подходы с ИИ-дополнением
Применяют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам („anti-spoofing”). Например, подобные изделия, например Vulkan Platinum и Google Pixel Face Unlock последних версий, комбинируют фронтальную камеру c ИК сенсором мобильности Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами посторонних устройств.
Образцы использования различных методов
- iPhone серии X/11/12/13/14 используют только аппаратное трёхмерное сканирование
- Xiaomi Mi8 Explorer Edition в первый раз представил подобие Face ID среди Android.
- Samsung Galaxy S10 версия/S20 имеют как программное обеспечение двухмерное распознавание по фото селфи-камерой, так и датчик глазного ириса.
- Huawei Mate20 Pro задействует систему из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент
Трудности охраны и ошибочные срабатывания
Несмотря на впечатляющий развитие техники за прошедшие лет, совершенных систем пока не имеется:
- Шанс мошенничества: Доступные телефоны легко „разблокируются” четкой изображением владельца либо видеозаписью с дисплея иного гаджета.
- Идентичные близнецы: Даже самые совершенные механизмы могут ошибиться между монозиготными близнецами либо родичами с очень аналогичной внешностью.
- Метаморфозы внешнего вида: Внезапное утрата веса/набор веса, косметические процедуры либо травмы иногда необходимы для обновления данных биометрии.
- Условия фотографирования: Интенсивная подсветка солнечным светом либо интенсивная затенение могут уменьшить точность распознавания признаков.
Здесь пара советов для безопасному эксплуатации:
- Для значимых операций всегда используйте двухфакторную аутентификацию;
- Не активируйте возможность „Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
- Систематически обновляйте прошивку ПО телефона для защиты от актуальных атак;
- Включайте функцию „Требовать раскрытых глаз” в тех местах, где она имеется.
В каких местах ещё применяется технология помимо смартфонов?
Пускай предмет этой статьи посвящена именно смартфонам и планшетам, следует отметить прочих направлениях внедрения технологии:
- Управление доступа в рабочих помещениях и жилых домах;
- Платёжные терминалы финансовых учреждений („Face Pay”);
- Цифровые паспорта последнего типа;
- Системы видеонаблюдения городских служб;
- Механизация регистрации посещаемости школ/вузов;
- Вход пользователей ПК/ноутбуков.
Например: В городском метро уже испытывается система платежа проезда по фейсу („Face Pay”) — достаточно пройти через турникет без пластика или телефона! Схожие программы развиваются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.
Каким способом изменяется техпроцесс сегодня?
Всякий год появляются новые мысли для усовершенствования уровня деятельности систем распознавания лиц:
- Увеличивается детализация датчиков — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше шанс ошибки;
- Улучшаются искусственные интеллекты — передовые архитектуры типа MobileNetV3 дают возможность быстро адаптироваться к дополнительным особенностям внешности владельца прямо на устройстве без пересылки информации в облачное хранилище.
- Совершенствуются технологии антиспуфинга — теперь мобильные устройства умеют распознавать настоящие движущиеся лица от фиксированных фотографий/маскировок по незаметным микродвижениям.
- Взаимодействие со интеллектуальными приборами — интеллектуальные часы могут автоматически заблокировать смартфон, если пользователь ушёл далеко.
- Возникают гибридные устройства — к примеру объединяющие аудио аутентификацию + облик + отпечаток пальца.
Итак, какие тренды особенно актуальны в данный момент:
1) Миниатюризация деталей
Изготовители намереваются минимизировать размер прорези („чёлки”) для датчики на экране за счёт встраивания миниатюрных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.
2) Обработка прямо на аппарате
Для улучшения приватности всё более расчётов происходит на месте без пересылки информации во сторонний облачный сервис.
3) Стандартизация стандартов
Google энергично пропагандирует эталон BiometricPrompt API, с целью чтобы такие платформы, как Вулкан Платинум, и любые Android-аппы могли работать с всеми формами биометрии унифицированно.
Что выбрать на сегодня?
В случае если вам всем нужна наивысшая защита данных, подбирайте топовые устройства с вмонтированным ИК-проектором или ToF-сенсором глубины.
- iPhone всех существующих актуальных поколений
- Huawei Companion/P Series линейки
- Xiaomi Professional
- Vivo X модели
- Oppo Обнаружить Х серии.
Если средства скромен – лучше выбирать классическим методам защиты (PIN-код/сканер отпечатка), а опцию „разблокировка по лицу”, такую как в Вулкан Платинум, применять только как дополнительную опцию комфорта.
Каким образом повысить практичность использования возможности?
Есть некоторые хитростей для людей, кто уже пользуется разблокировку по лицу:
- Периодически обновляйте свою изображение-шаблон, если сильно изменяется внешность.
- Не пренебрегайте протирать линзу фронтальной камеры – загрязнения могут снизить точность!
- Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам включает камеру если вы берёте его в руки.
- При регистрации пытайтесь держать лицо прямо перед камеры не допуская значительного наклона головы.
- Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвернулись от дисплея.
Перспективы развития технологии
В скоро наступающие времена можно предвкушать появления полностью безконтактных способов идентификации индивидуума сразу по нескольким биометрическим параметрам одновременно: физиономия + голос + шаги + манипуляции руками!
Также вероятно появление свежих методов обеспечения личной информации – например, изменяющееся модификация цифрового образца после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.
Распознавание лиц – одна из очень увлекательных технологий нашего периода! Она предоставляет интеракцию со мобильным устройством проще чем раньше, и такие приложения, как Вулкан Казино Платинум, могут в разы оптимизировать ваш пользовательский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.
Теперь, раз вы осведомлены, как работает эта система изнутри, – будете в состоянии вдумчиво подбирать свой будущий устройство!