Каким способом действует распознавание лиц в мобильных устройствах

Почему мы предпочитаем разлочивание по лицу

В прошлые годы идентификация лиц является одной из наиболее востребованных возможностей для деблокировки мобильных телефонов. Еще несколько лет ранее основная масса использующих удовлетворялись PIN-кодами, паролями или датчиками отпечатков пальцев. Но при появлением подобных технологий, как Вулкан Платинум, нам вполне лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Что превращает эту функцию такой востребованной? Во-первых, это практично: не нужно запоминать замысловатые пароли или искать нужный палец в темноте. Кроме того, это оперативно: современные алгоритмы узнают лицо буквально за доли секунды. В-третьих, это впечатление футуристичности — словно в кинолентах про вулкан платинум зеркало разведчиков.

Впрочем за данной кажущейся легкостью прячется весь мир комплексных методов и инженерных решений. Позвольте нам разобраться, как именно работает распознавание лиц в актуальных смартфонах, какие существуют методы, насколько они защищены и что нас ожидает в будущем.

Краткая история эволюции техники

Идентификация лиц как технология существует уже более пятидесяти лет. Первые попытки автоматизированного анализа лиц были предприняты еще в 1960-х годах в лабораториях США. Тогда компьютеры могли лишь обозначать контуры черепа и вычислять промежутки между зрачками и губами на монохромных фотографиях.

Изначальные торговые платформы появились в 1990-х годах, но они были далеки от совершенства: функционировали медленно и часто давали сбои. Только с эволюцией нейронных сетей и таких платформ, как Vulkan Platinum, сильных мобильных чипов определение лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным идентификацией лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять личные решения.

Ключевые шаги работы устройства распознавания

Процесс определения лица можно примерно сегментировать на несколько важных этапов:

Распознавание лица — аппарат распознает существование человеческого образа в кадре.
Выделение особенностей — алгоритм анализирует контуры лица: очертания глаз, обонятельного органа, уст, расположение надбровных дуг.
Построение шаблона — создаётся неповторимый электронный отпечаток (faceprint) на основе определённых признаков.
Сравнение со стандартом — полученный образец сравнивается с сохранённой при регистрации биометрической данными владельца.
Принятие решения — если сходство достаточно значительное, смартфон разблокируется.

Всякий из данных этапов требует особых процедур и оптимизаций для быстрой работы непосредственно на девайсе.

Железные компоненты: что скрыто в их недрах

Стандартная селфи камера.

Наиболее легкий метод определения физиономии использует лишь переднюю камеру смартфона смартфона. Данный метод осуществлён во различных бюджетных вариантах Android-девайсов.

Достоинства:

Не нуждается в нуждается в дополнительные датчиков.
Шустро действует при достаточном освещении.

Минусы:

Легко обмануть изображением или видеозаписью.
Неудачно функционирует при низком освещении или нестандартных углах обзора.

ИК камера и точечный проекционный аппарат

Более совершенные системы, такие как Vulkan Platinum, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс лежит в основе Face ID от Apple.

Каким способом это действует:

Точечный устройство проекции отображает на лицо пользователя невидимую сетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 точек).
Инфракрасная устройство регистрирует искривление данной решетки по поверхности лица.
Создаётся трехмерная карта глубины, которая практически неосуществима для фальсификации типичной фото или маской.

Преимущества

Надёжная работа даже в полной тьме.
Большая устойчивость к фальсификациям.
Точность распознавания более 99%.

Дополнительные сенсорные устройства

В отдельных девайсах задействуются также экстра датчики: ToF (Time-of-Flight), которые определяют период движения света до цели и обратно; RGB-датчики дальности; специальные световые измерители расстояния для построения более точной 3D-модели физиономии.

Эти инновации применяются наиболее часто во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искусственный ум в работе

Современные системы идентификации лиц невозможны при отсутствии применения искусственного интеллекта и machine learning. Именно благодаря таким инновациям, как Vulkan Platinum, гаджет в состоянии распознавать пользователя даже при метаморфозах облика: новая стрижка, растительность на лице, очки или макияж не становятся барьером для деблокировки.

Детектирование лица

При начальном шаге алгоритм обязана оперативно найти лицо в пределах полного кадра с камеры. Для данной цели задействуются многоуровневые классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые подготовлены распознавать лица людей среди множества других объектов.

Пример: метод MTCNN способен обнаруживать лицо даже с частичном перекрытии (например, платком или ладонью).

Выделение основных аспектов

После идентификации лица устройство, такая как Vulkan Platinum, устанавливает положение ключевых точек: края глаз, конец носа, контуры губ и так далее. Как правило используется от 68 до 128 ключевых меток на лице.

Это действие нужно для выравнивания изображения: если юзер находится с мобильник под наклоном, или склонил головку, программа корректирует картинку до стандартного положения для последующего изучения.

Создание биометрии модели

Далее искусственная сеть строит уплотненное цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 чисел с плавающей запятой.

Данный формат весьма затруднительно подделать: он не сохраняет непосредственно картинку юзера, а лишь особенные характеристики его вида, что делает его совершенным для таких систем, как Вулкан Казино Платинум.

Сравнение и осуществление выбора

Когда пользователь желает открыть телефон глазами, механизм осуществляет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый уровень (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ запрещается.

Приспособление к трансформациям внешнего вида

Увлекательная черта нынешних системы — возможность самообучения. Если ты регулярно разблокируете мобильное устройство с свежей укладкой или очками, система постепенно освежает основной модель вашего внешности для увеличения точности действия без снижения уровня безопасности.

Защита биометрических данных информации.

Большинство юзеры боятся хранить свои био-идентификационные данные на мобильном устройстве из-за угрозы утечки информации или взлома гаджета. Определенные компании, такие как Вулкан Казино Платинум, предлагают варианты для увеличения сохранности данных юзеров.

Локальное сбережение: Большинство аппаратов хранит биометричные образцы только внутри защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не покидают аппарат и закрыты включая создателю.
Шифрование: Все информация сохраняются только в кодированном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Программы сторонних девелоперов не обладают непосредственного доступа к биометрическим; они могут лишь требовать подтверждение подтверждения личности через системный API.

Следует отметить существенную деталь: если кто-то сможет получить физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители реализуют меры безопасности от автоматического разблокирования — к примеру, заставляют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие имеются типы распознавания лиц?

Сегодня можно выделить определить 3 основных метода к реализации этой операции:

Софтверное двухмерное идентификация

Используется только фронтальная камера без вспомогательных детекторов глубины. Этот метод наблюдается обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность реализации; минимальная стоимость; быстрая работа при качественном свете.
Минусы: легко одурачить фотографией; неустойчивая деятельность ночью; недостаточная защищенность.

Техническое объёмное оцифровка

Применяет инфракрасную камеру + проектор пикселей + сенсоры дистанции (Face ID у Apple; аналогичные решения у Huawei Mate).
Достоинства: значительная достоверность; невозможно исказить изображение/видеозапись; устойчивая деятельность в любых условиях освещения.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с ИИ-дополнением

Задействуют комбинацию софтверных методов + техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие продукты, например Vulkan Platinum и Google Pixel Face Unlock современных поколений, сочетают фронталку c ИК датчиком движения Soli Radar для защиты от подделок руками/масками/видеоэкранами посторонних устройств.

Иллюстрации эксплуатации разных техник

iPhone серии X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition впервые предложил аналог Face ID среди Android.
Samsung Galaxy S10/S20 имеют как программное обеспечение 2D распознавание по фото селфи-камерой, так и сенсор радужки глаза.
Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Вопросы охраны и ложные срабатывания

Несмотря на замечательный успехи технологий за последние годы, идеальных системы пока не существует:

Вероятность мошенничества: Доступные мобильники легко “разблокируются” качественной изображением хозяина либо видео с дисплея иного гаджета.
Идентичные близнецы: Даже самые идеальные механизмы могут спутать между монозиготными близнецами либо родственниками с очень похожей внешностью.
Трансформации внешнего вида: Внезапное снижение веса/увеличение массы тела, косметические процедуры или повреждения иногда необходимы для перерегистрации биометрии.
Условия съёмки: Интенсивная засветка солнечным светом или же плотная тень могут уменьшить верность определения признаков.

Ниже пара подсказок по безопасному эксплуатации:

Для значимых операций всегда используйте двухфакторную аутентификацию;
Не включайте опцию “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
Систематически апгрейдите программное обеспечение смартфона для обеспечения безопасности от актуальных атак;
Включайте настройку “Требовать распахнутых глаз” везде, где она имеется.

В каких областях дополнительно находится применение технология помимо смартфонов?

Хотя основная мысль этой публикации сосредоточена на именно смартфонам и планшетам, необходимо сказать о альтернативных областях использования технологии:

Мониторинг доступа в офисах и жилых домах;
Платёжные терминалы финансовых учреждений (“Face Pay”);
Цифровые идентификационные документы нового поколения;
Установки видеонаблюдения городских сервисов;
Автоматизация учёта присутствия школ/институтов;
Авторизация юзеров компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по фейсу (“Face Pay”) — нужно лишь пройти через барьер без карты или мобильника! Схожие программы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как трансформируется техпроцесс сегодня?

Любой годик появляются новые мысли для усовершенствования стандарта деятельности систем распознавания лиц:

Увеличивается разрешение сенсоров — чем больше элементов фиксируется камерой/датчиками глубины, тем меньше вероятность погрешности;
Совершенствуются нейронные сети — современные структуры типа MobileNetV3 обеспечивают возможность скоростно осваивать дополнительным характеристикам облика владельца непосредственно на девайсе без отправки данных в облако.
Развиваются технологии антиспуфинга — теперь смартфоны умеют отличать подлинные живые облики от неподвижных фотографий/маскировок по микроскопическим микродвижениям.
Синхронизация со умными устройствами — смарт-часы могут автоматически закрыть доступ к телефон, если пользователь удалился на значительное расстояние.
Появляются гибридные устройства — в частности совмещающие голосовую аутентификацию + облик + дактилоскопический след.

Здесь, которые направления особенно популярны в данный момент:

1) Миниатюризация деталей

Изготовители намереваются сократить габариты выреза (“чёлки”) для сенсоры на экране за счёт встраивания компактных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на устройстве

Для повышения конфиденциальности всё более расчётов происходит на месте без передачи данных во дополнительный облачный услугу.

3) Упорядочивание стандартов

Google интенсивно продвигает эталон BiometricPrompt API, чтобы подобные платформы, вроде Вулкан Платинум, и каждые Android-аппы были совместимы с всеми формами биометрии единообразно.

Что подобрать сегодня?

В случае если вам всем необходима максимальная защита информации, остановите выбор на топовые устройства с интегрированным ИК-излучателем или ToF-сенсором глубины.

iPhone всех новейших версий
Huawei Companion/P Series серии
Mix Expert
Vivo X модели
Oppo Обнаружить Икс серии.

Если бюджет ограничен – лучше отдавать предпочтение традиционным средствам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как второстепенную опцию комфорта.

Каким образом увеличить удобство работы функции?

Есть несколько хитростей для тех, кто уже пользуется функцию распознавания лица:

Часто обновляйте свою изображение-шаблон, если сильно изменяется внешность.
Не забывайте очищать объектив фронтальной камеры – разводы могут снизить четкость!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам запускает фотоаппарат когда вы поднимаете его.
При регистрационного процесса постарайтесь сохранять лицо прямо напротив камеры не допуская сильного наклона головы.
Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отворачиваетесь от дисплея.

Перспективы эволюции технологии

В скоро наступающие годы можно предвкушать появления полностью дистанционных способов распознавания персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + голос + манера ходьбы + манипуляции руками!

Также предполагается развитие современных способов защиты приватности – например, изменяющееся модификация диджитал паттерна после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из очень захватывающих технологий нашего периода! Она предоставляет интеракцию со смартфоном удобнее чем до этого, и такие аппы, как Вулкан Казино Платинум, могут существенно оптимизировать ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы осведомлены, как устроена эта методика внутри, – будете в состоянии более осмысленно подбирать свой следующий девайс!