Каким образом функционирует идентификация лиц в мобильных устройствах

Почему мы останавливаемся на разблокировку по фейсу

В прошлые времена распознавание лиц превратилось в одной из самых популярных функций для открытия мобильных телефонов. Всего несколько годков назад основная часть пользователей обходились пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением подобных технологий, например Вулкан Платинум, нам вполне лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь обуславливает эту особенность очень нужной? Прежде всего, это удобно: не нужно запоминать трудные пароли или находить правильный палец в мраке. Кроме того, это оперативно: современные системы распознают лицо практически за мгновения ока. В-третьих, это впечатление футуризма — словно в кинофильмах про Вулкан казино агентов.

Тем не менее за этой видимой простотой прячется весь вселенная трудных методов и инженерных концепций. Давайте понять, как именно действует фейсканирование в актуальных смартфонах, какие бывают технологии, насколько они защищены и что нас ожидает в будущем.

Сжатая история развития техники

Распознавание лиц как методика существует уже более 50 лет. Начальные эксперименты автоматического анализа лица были сделаны еще в 1960-х годах в научных учреждениях США. Тогда вычислительные машины умели лишь определять силуэты лица и вычислять расстояния между зрачками и губами на черно-белых фотографиях.

Начальные бизнес установки стали доступны в 1990-х годах, но они были неидеальны: работали медленно и нередко ошибались. Только с прогрессом нейронных сетей и таких площадок, как Vulkan Platinum, сильных мобильных чипов идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным распознаванием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять свои разработки.

Главные этапы действия системы определения

Процесс определения лица можно примерно поделить на несколько основных этапов:

Распознавание лица — устройство распознает существование гуманного лица в кадре.
Извлечение признаков — система исследует контуры лица: форму зрительных органов, обонятельного органа, уст, расположение бровей.
Построение шаблона — создаётся неповторимый электронный отпечаток (faceprint) на основе выделенных признаков.
Сравнение с эталоном — созданный образец сравнивается со зафиксированной при внесении биометрической информацией владельца.
Принятие выбора — если сходство достаточно значительное, смартфон открывается.

Всякий из данных стадий запрашивает особых методов и улучшений для оперативной работы непосредственно на девайсе.

Технические элементы: что прячется в их недрах

Обычная фронтальная камера.

Простейший несложный способ определения физиономии применяет лишь переднюю камеру смартфона мобильного устройства. Подобный метод внедрён во многочисленных доступных версиях Android-девайсов.

Преимущества:

Необходимо требует дополнительных датчиков.
Оперативно работает при достаточном освещённости.

Отрицательные стороны:

Легко обмануть снимком или видео.
Плохо работает при низком освещении или необычных точках зрения.

Инфракрасная фотокамера и точечный проектор

Более совершенные системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология лежит в основе Face ID от Apple.

Каким образом это действует:

Точечный устройство проекции проецирует на облик юзера невидимую сетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 меток).
Инфракрасная устройство регистрирует изменение формы данной сетки по поверхности физиономии.
Получается трехмерная карта глубины глубинности, что почти неосуществима для фальсификации стандартной снимком или маскировкой.

Выигрыши

Надёжная функционирование даже в полной темноте.
Большая защита к имитациям.
Точность идентификации выше 99%.

Дополнительные датчики

В определённых девайсах задействуются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые измеряют время движения света до предмета и обратно; RGB-датчики дальности; специальные лазерные дальномеры для создания более аккуратной 3D-модели лица.

Эти технологии встречаются наиболее часто во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искусственный ум на работе

Текущие устройства идентификации лиц неосуществимы без использования artificial intelligence и машинного обучения. Именно благодаря таким инновациям, как Vulkan Platinum, аппарат способно узнавать пользователя даже при изменениях внешнего вида: новая укладка, борода, линзы или грим не становятся препятствием для разблокировки.

Распознавание физиономии

При стартовом стадии программа должна мгновенно найти ликовое изображение внутри целого изображения камеры. Для этого применяются каскадные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые “обучены” распознавать лица людей среди множества других объектов.

Пример: алгоритм MTCNN способен находить облик даже с неполном перекрытии (например, платком или ладонью).

Выделение основных моментов

После обнаружения лица устройство, такая как Vulkan Platinum, определяет местоположение ключевых точек: уголки глаз, конец носа, контуры губ и так далее. Часто применяется от 68 до 128 ключевых меток на лице.

Это требуется для нормализации изображения: если пользователь держит телефон под наклоном, или склонил голову, программа “выпрямляет” изображение до обычного угла для последующего изучения.

Создание биометрического образца

Далее нейронная сеть строит компактное числовое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Данный образец очень затруднительно сфальсифицировать: он не сохраняет само фото юзера, а лишь исключительные черты его облика, что делает его идеальным для таких платформ, как Вулкан Казино Платинум.

Сравнительный анализ и вынесение выбора

Когда человек намеревается разлочить телефон глазами, программа воспроизводит все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный границу (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, открывается; если нет — доступ блокируется.

Приспособление к изменениям внешнего вида

Занимательная особенность нынешних систем — способность самостоятельного обучения. Если ты регулярно открываете смартфон с свежей прической или оптикой, алгоритм постепенно модернизирует эталонный модель вашего лица для улучшения точности функционирования без ухудшения безопасности.

Защита биометрии данных.

Многие клиенты опасаются сохранять свои био-идентификационные данные на телефоне из-за риска утечки информации или хакерской атаки. Иные компании, такие как Вулкан Казино Платинум, предоставляют методы для повышения защиты сведений пользователей.

Локальное сохранение: Преимущественно аппаратов хранит био-идентификационные образцы только внутри защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают аппарат и закрыты даже создателю.
Шифрование: Все сведения хранятся только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Приложения внешних разработчиков не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь требовать факт подтверждения личности через системный API.

Следует подчеркнуть важную особенность: если кто-либо сможет получить физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители осуществляют меры безопасности от неосознанного разблокирования — к примеру, заставляют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают типы определения лиц на изображениях?

Сегодня можно определить три основных метода к реализации этой задачи:

Программное 2D определение

Используется только передняя видеокамера без дополнительных детекторов глубины. Этот способ используется наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота осуществления; умеренная затраты; быстрая работа при хорошем свете.
Минусы: легко одурачить фотографией; нестабильная функционирование ночью; слабая безопасность.

Оборудование для трёхмерное сканирование

Задействует ИК камеру + проектор пикселей + сенсоры дистанции (Face ID у Apple; аналогичные решения у Huawei Mate).
Достоинства: большая достоверность; нельзя обмануть фото/видео; постоянная функционирование при любом освещении.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные способы с ИИ-дополнением

Задействуют комбинацию программных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как Vulkan Platinum и Google Pixel Face Unlock последних поколений, комбинируют фронталку c инфракрасным сенсором движения Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями посторонних устройств.

Иллюстрации применения разнообразных способов

iPhone линейки X/11/12/13/14 применяют только техническое трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition впервые представил эквивалент Face ID среди Android.
Samsung Galaxy S10 версия/S20 поддерживают как софтверное 2D идентификацию по снимку селфи-камерой, так и сканер радужки глаза.
Huawei Mate20 Pro использует комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Трудности охраны и ложные срабатывания

Несмотря на поразительный успехи технологий за последние годы, идеальных систем пока не существует:

Вероятность мошенничества: Доступные смартфоны легко “разблокируются” качественной фотографией хозяина или же видео с дисплея иного гаджета.
Идентичные близнецы: Даже самые совершенные механизмы могут спутать между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
Метаморфозы облика: Стремительное утрата веса/набор веса, хирургические вмешательства или повреждения порой необходимы для обновления данных биометрических данных.
Условия записи: Интенсивная освещённость солнцем или плотная темнота могут снизить верность идентификации признаков.

Вот пара подсказок по защищённому эксплуатации:

Для важных операций всегда применяйте двухэтапную аутентификацию;
Не включайте возможность “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
Постоянно обновляйте ПО смартфона для предотвращения угроз от современных угроз;
Включайте опцию “Требовать раскрытых глаз” там, где она доступна.

Где ещё применяется технология кроме мобильных телефонов?

Хотя основная мысль этой публикации касается в частности портативным гаджетам, следует отметить прочих направлениях внедрения технологии:

Контроль доступа в деловых центрах и резиденциях;
Платёжные аппараты финансовых учреждений (“Face Pay”);
Электронные удостоверения личности современного поколения;
Комплексы видеоконтроля городских сервисов;
Автоматизирование регистрации посещаемости учебных заведений/вузов;
Авторизация участников ПК/ноутбуков.

Например: В городском метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без пластика или телефона! Аналогичные проекты осуществляются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как изменяется техпроцесс сегодня?

Любой год возникают свежие мысли для повышения качества работы систем лицевого распознавания:

Увеличивается разрешение сенсорных устройств — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше риск неточности;
Развиваются нейросети — новейшие конструкции типа MobileNetV3 дают возможность оперативно обучаться дополнительным чертам внешности пользователя напрямую на гаджете без отправки данных в облако.
Развиваются способы антиспуфинга — теперь телефоны умеют отличать настоящие движущиеся лица от неподвижных фотографий/масок по незаметным движениям кожи.
Взаимодействие со умными устройствами — интеллектуальные часы могут самостоятельно блокировать телефон, если владелец отошёл далеко.
Возникают смешанные системы — в частности объединяющие аудио опознание + облик + пальцевой отпечаток.

Итак, которые тренды в особенности популярны в данный момент:

1) Уменьшение компонентов

Изготовители пытаются сократить величину выреза (“чёлки”) для сенсоры на дисплее за счёт внедрения маленьких ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на устройстве

Для улучшения конфиденциальности всё более вычислений происходит локально без пересылки данных во внешний облачный сервис.

3) Стандартизация регламентов

Google интенсивно продвигает эталон BiometricPrompt API, для того чтобы подобные системы, как Вулкан Платинум, и любые Android-аппы могли работать с любыми видами биометрии единообразно.

Какое подобрать на сегодня?

Если вам всем необходима максимальная безопасность данных, подбирайте передовые аппараты с вмонтированным ИК-проектором или же ToF-сенсором глубины.

iPhone всех актуальных моделей
Huawei Companion/P Series серии
Mi Expert
Vivo X линейки
Oppo Обнаружить X линейки.

Если средства невелик – лучше предпочесть классическим методам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, задействовать только как дополнительную опцию комфорта.

Как повысить удобство использования возможности?

Есть некоторые лайфхаков для людей, кто уже пользуется разблокировку по лицу:

Часто меняйте свою изображение-шаблон, если сильно трансформируется внешность.
Не пренебрегайте протирать объектив передней камеры – пятна могут понизить четкость!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам запускает фотоаппарат как только вы поднимаете его.
При регистрационного процесса постарайтесь держать лицевую часть прямо перед видеоустройства исключая значительного наклона головы.
Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отворачиваетесь от дисплея.

Будущее эволюции инноваций

В предстоящие годы можно ожидать возникновения полностью дистанционных способов опознания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + голос + походка + жесты рук!

Также предполагается развитие свежих подходов защиты личной информации – например, изменяющееся модификация диджитал образца после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – единственная из самых увлекательных технологий нашего времени! Она обеспечивает общение со телефоном удобнее чем раньше, и такие аппы, как Вулкан Казино Платинум, могут существенно оптимизировать ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы знаете, как работает эта система изнутри, – будете в состоянии более осмысленно выбирать свой будущий гаджет!