Каким образом функционирует определение лиц в телефонах

Почему мы предпочитаем разблокирование по лицу

В прошлые времена распознавание физиономий является одной из самых распространённых возможностей для деблокировки мобильных телефонов. Всего пару лет тому назад основная часть использующих удовлетворялись пин-кодами, паролями или сканерами отпечатков пальцев. Но с появлением таких технологий, например cabura, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что превращает эту особенность настолько популярной? Во-первых, это практично: не нужно удерживать в памяти замысловатые пароли или отыскивать правильный палец в тьме. Во-вторых, это быстро: современные программы узнают лицо буквально за мгновение. В-третьем пункте, это чувство футуристичности — как будто в фильмах про кабура шпионов.

Однако за такой кажущейся простотой таится целый универсум трудных методов и инженерных разработок. Давайте разобраться, как конкретно работает фейсканирование в современных смартфонах, какие применяются методы, насколько они защищены и что нас ждёт впереди.

Короткая повествование прогресса инноваций

Распознавание лиц как методика имеется уже более пятидесяти лет. Первые попытки автоматизированного исследования облика были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда вычислительные машины умели лишь выделять очертания лица и определять дистанции между очами и ртом на монохромных изображениях.

Начальные торговые системы стали доступны в девяностых годах, но они были неидеальны: работали медленно и часто ошибались. Только с развитием нейронных сетей и таких площадок, как кабура, высокопроизводительных мобильных чипов идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным распознаванием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять свои решения.

Главные стадии функционирования механизма определения

Процесс определения лица можно ориентировочно поделить на несколько важных этапов:

Идентификация лиц — камера распознает существование гуманного лица в изображении.
Выделение особенностей — алгоритм анализирует контуры лица: форму глаз, обонятельного органа, губ, позицию бровей.
Построение шаблона — создаётся уникальный цифровой отпечаток (faceprint) на основе выделенных признаков.
Сравнение со стандартом — созданный модель сравнивается с записанной при учёте биометрической сведениями владельца.
Принятие определения — если сходство достаточно значительное, смартфон разблокируется.

Любой из этих стадий запрашивает особых процедур и улучшений для скорой работы непосредственно на девайсе.

Технические элементы: что прячется в их недрах

Обычная селфи камера.

Самый легкий метод определения лица задействует исключительно лицевую камеру смартфона. Данный метод реализован во различных недорогих вариантах Android-девайсов.

Достоинства:

Необходимо потребляет дополнительных датчиков.
Оперативно работает при хорошем освещении.

Слабые стороны:

Несложно одурачить снимком или роликом.
Плохо действует при слабом освещении или нестандартных точках зрения.

Инфракрасная камера и точечный проектор

Более усовершенствованные системы, такие как кабура, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика составляет базу Face ID от Apple.

Как это функционирует:

Точечный проектор отображает на облик использующего невидимую сетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 пятен).
ИК устройство регистрирует искривление этой решетки по поверхности лица.
Формируется трёхмерная карта глубины глубинности, что почти что неподвластна для имитации обычной фотографией или маской.

Преимущества

Надёжная функционирование даже в полной неосвещённости.
Большая устойчивость к имитациям.
Точность определения свыше 99%.

Дополнительные сенсоры

В отдельных девайсах используются также дополнительные датчики: ToF (Time-of-Flight), которые определяют время движения света до объекта и обратно; Трехцветные-датчики дальности; специальные оптические измерители расстояния для создания более точной 3D-модели лица.

Эти разработки применяются наиболее часто во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искуственный интеллект на действии

Текущие устройства идентификации лиц немыслимы в отсутствие эксплуатации искусственного интеллекта и machine learning. Именно из-за таким технологиям, как кабура, устройство способно узнавать юзера даже при трансформациях внешности: новая укладка, растительность на лице, оптика или грим не становятся препятствием для разблокировки.

Детектирование лиц

При начальном стадии алгоритм должна оперативно обнаружить ликовое изображение в пределах целого изображения с камеры. Для этой задачи применяются многоуровневые классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые “обучены” находить лиц человека среди множества других объектов.

Пример: алгоритм MTCNN способен находить физиономию даже с частичном перекрытии (например, платком или ладонью).

Идентификация основных аспектов

После идентификации лица устройство, такая как кабура, устанавливает расположение ключевых точек: уголки глаз, кончик носа, границы губ и так далее. Как правило используется от 68 до 128 главных маркеров на лице.

Это действие необходимо для выравнивания визуала: если юзер находится с смартфон под наклоненным, или повернул головку, программа исправляет картинку до стандартного положения для последующего изучения.

Формирование биометрического шаблона

Далее нейронная сеть строит сжатое числовое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 чисел с плавающей запятой.

Этот шаблон очень затруднительно сфальсифицировать: он не хранит непосредственно картинку пользователя, а лишь уникальные характеристики его облика, что делает его оптимальным для таких систем, как кабура казино.

Сравнительный анализ и принятие решения

Если пользователь намеревается разблокировать смартфон взором, механизм осуществляет все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный порог (обычно превышает 99%), телефон, как и платформа кабура казино, доступен; если нет — доступ запрещается.

Адаптация к трансформациям внешнего вида

Интересная черта нынешних систем — способность самостоятельного обучения. Если ты часто открываете смартфон с новой стрижкой или очками, система постепенно освежает основной образец вашего внешности для улучшения точности функционирования без ухудшения безопасности.

Охрана биометрии данных.

Многие пользователи беспокоятся хранить свои био-идентификационные данные на телефоне из-за риска утечки информации или взлома гаджета. Определенные фирмы, например кабура казино, предлагают решения для увеличения защиты информации пользователей.

Локальное сохранение: Основная часть устройств хранит биометричные образцы только в пределах защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют аппарат и не доступны даже производителю.
Шифрование: Все сведения сберегаются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция программ: Приложения третьих разработчиков не обладают непосредственного доступа к биометрическим данным; они могут лишь требовать факт подтверждения идентичности через системный API.

Следует подчеркнуть значимую деталь: в случае, если кто-то сможет получить доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители осуществляют систему защиты от неосознанного разблокирования — к примеру, просят раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают виды распознавания лиц на изображениях?

В настоящее время можно определить определить 3 главных метода к осуществлению этой задачи:

Программное плоское определение

Используется только передняя камера без вспомогательных детекторов дистанции. Такой подход встречается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость воплощения; минимальная затраты; быстрая деятельность при хорошем освещении.
Минусы: несложно одурачить снимком; ненадежная функционирование ночью; низкая безопасность.

Аппаратное объёмное сканирование

Применяет инфракрасную камеру + проекционный модуль точек + сенсоры глубины (Face ID от Apple; подобные решения у Huawei Mate).
Достоинства: высокая достоверность; невозможно подделать фото/видео; устойчивая функционирование при любом освещении.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с интеграцией ИИ

Применяют комбинацию софтверных методов + техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как кабура и Google Pixel Face Unlock современных версий, комбинируют фронталку c ИК сенсором мобильности Soli Radar для предотвращения от фальсификаций руками/масками/видеодисплеями посторонних устройств.

Иллюстрации применения различных техник

iPhone модели X/11/12/13/14 используют только аппаратное трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition впервые внедрил подобие Face ID среди Android.
Samsung Galaxy S10/S20 имеют как программное обеспечение плоское определение по изображению фронтальной камерой, так и сенсор глазного ириса.
Huawei Mate20 Pro задействует комплекс из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Трудности защиты и неверные тревоги

Несмотря на впечатляющий успехи инноваций за прошедшие годы, идеальных механизмов пока не имеется:

Вероятность мошенничества: Доступные телефоны без труда “разблокируются” высококачественной изображением пользователя или видеозаписью с экрана другого устройства.
Идентичные близнецы: Даже самые идеальные устройства могут ошибиться между монозиготными близнецами либо родственниками с очень похожей внешностью.
Трансформации внешности: Стремительное снижение веса/увеличение массы тела, косметические процедуры или повреждения иногда необходимы для повторной регистрации биометрии.
Условия фотографирования: Сильная подсветка солнцем либо глубокая затенение могут уменьшить верность идентификации признаков.

Здесь несколько советов по защищённому эксплуатации:

Для значимых операций всегда применяйте двухфакторную аутентификацию;
Не включайте функцию “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
Постоянно апгрейдите прошивку мобильного устройства для защиты от актуальных атак;
Включайте функцию “Требовать раскрытых глаз” в тех местах, где она имеется.

Где также применяется технологии помимо мобильных телефонов?

Несмотря на то, что тема этой публикации сосредоточена на конкретно смартфонам и планшетам, стоит упомянуть о прочих направлениях внедрения технологии:

Мониторинг прохода в рабочих помещениях и многоквартирных зданиях;
Платёжные терминалы финансовых учреждений (“Face Pay”);
Электронные идентификационные документы последнего поколения;
Комплексы видеонаблюдения городских служб;
Автоматизация регистрации посещаемости учебных заведений/вузов;
Вход участников персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без пластика или телефона! Схожие программы развиваются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом трансформируется техпроцесс сегодня?

Всякий год возникают свежие концепции для улучшения уровня деятельности систем идентификации лиц:

Увеличивается чёткость датчиков — чем больше информации фиксируется камерой/глубинными сенсорами, тем меньше риск погрешности;
Совершенствуются искусственные интеллекты — новейшие конструкции вида MobileNetV3 обеспечивают возможность быстро осваивать новым чертам внешности пользователя прямо на устройстве без отправки данных в облако.
Совершенствуются технологии антиспуфинга — теперь смартфоны способны отличать реальные анимированные лица от фиксированных фотографий/масок по незаметным движениям кожи.
Интеграция со умными устройствами — умные часы могут авто закрыть доступ к мобильный телефон, если владелец ушёл далеко.
Возникают комбинированные системы — в частности объединяющие аудио опознание + лицо + отпечаток пальца.

Здесь, какие тенденции очень востребованы в данный момент:

1) Уменьшение деталей

Производители намереваются сократить габариты выреза (“чёлки”) под датчики на дисплее за счёт интеграции компактных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на устройстве

Для повышения личной безопасности всё больше вычислений происходит внутри устройства без пересылки данных во дополнительный облачный услугу.

3) Унификация стандартов

Гугл активно продвигает стандарт BiometricPrompt API, с целью чтобы подобные платформы, например как cabura, и любые Android-приложения могли работать с всеми формами биометрии стандартизированно.

Что подобрать на сегодня?

Если тебе важна максимальная защита данных, остановите выбор на флагманские модели с вмонтированным ИК-излучателем или ToF-датчиком глубины.

iPhone каждого актуальных поколений
Huawei Mate/P линейки
Xiaomi Expert
Vivo X серии
Оппо Find X серии.

Если средства скромен – лучше предпочесть классическим методам безопасности (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в cabura, задействовать только как дополнительную опцию комфорта.

Как улучшить удобство использования возможности?

Есть несколько советов для пользователей, кто уже пользуется функцию распознавания лица:

Часто обновляйте свою изображение-шаблон, если кардинально меняется внешний вид.
Не забывайте протирать линзу передней камеры – разводы могут понизить четкость!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам включает фотоаппарат как только вы поднимаете его.
При регистрационного процесса постарайтесь сохранять лицо неподвижно впереди объектива не допуская сильного наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвели взгляд от дисплея.

Перспективы развития технологии

В предстоящие времена можно ожидать возникновения полностью безконтактных способов идентификации персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + походка + движения рук!

Также возможно появление новых способов обеспечения личной информации – скажем, переменное модификация электронного шаблона после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из самых интересных инноваций нашего эпохи! Она обеспечивает общение со смартфоном проще чем до этого, и такие программы, как кабура казино, могут существенно оптимизировать ваш опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы понимаете, как функционирует эта система внутри, – сумеете осознаннее определять свой будущий устройство!