Как действует распознавание лицевых образов в мобильных устройствах

Почему мы выбираем разблокирование по лицевому распознаванию

В прошлые годы определение физиономий превратилось в одной из наиболее востребованных возможностей для открытия умных телефонов. Лишь несколько годов назад основная масса пользователей довольствовались PIN-кодами, паролями или сканерами отпечатков пальцев. Но с появлением таких технологий, например cabura, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Что превращает данную возможность очень нужной? Во-первых, это комфортно: не нужно удерживать в памяти сложные пароли или отыскивать нужный палец в мраке. Также, это мгновенно: современные алгоритмы идентифицируют лицо практически за доли секунды. В-третью очередь, это чувство футуризма — будто в кинофильмах про кабура разведчиков.

Впрочем за такой видимой легкостью прячется целый универсум трудных технологий и инженерных концепций. Позвольте нам разобраться, как конкретно работает идентификация по лицу в актуальных смартфонах, какие бывают способы, насколько они безопасны и что нас ждёт впереди.

Короткая хроника эволюции инноваций

Идентификация лиц как методика существует уже более пятидесяти лет. Изначальные пробы автоматизированного изучения лица были предприняты еще в 1960-х годах в исследовательских центрах США. Тогда вычислительные машины способны были лишь определять очертания головы и измерять дистанции между очами и устами на монохромных изображениях.

Начальные торговые системы стали доступны в девяностых годах, но они были неидеальны: действовали неспешно и часто ошибались. Только с прогрессом нейронных сетей и таких систем, как кабура, мощных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять собственные решения.

Ключевые стадии действия механизма идентификации

Процесс идентификации лица можно ориентировочно сегментировать на несколько ключевых этапов:

Распознавание лица — устройство выявляет существование человеческого лица в снимке.
Выделение особенностей — механизм исследует черты физиономии: конфигурацию зрительных органов, носа, уст, положение надбровных дуг.
Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе выделенных признаков.
Сравнение со стандартом — полученный модель сверяется со записанной при внесении биометрической данными владельца.
Принятие решения — если совпадение достаточно высокое, смартфон деблокируется.

Каждый из указанных этапов нуждается в специальных алгоритмов и усовершенствований для скорой работы прямо на устройстве.

Железные составляющие: что прячется в их недрах

Обычная передняя камера.

Наиболее несложный метод распознавания облика использует только переднюю видеокамеру смартфона. Данный метод осуществлён во многочисленных недорогих версиях Android-девайсов.

Плюсы:

Не нуждается в внешних сенсоров.
Шустро функционирует при хорошем освещённости.

Слабые стороны:

Несложно ввести в заблуждение изображением или роликом.
Неудачно действует при плохом свете или нестандартных ракурсах.

ИК камера и точечный проектор

Более усовершенствованные системы, такие как кабура, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология лежит в основе Face ID от Apple.

Каким способом это функционирует:

Точечный проектор отображает на лицо пользователя невидимую сетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 точек).
ИК камера записывает деформацию этой сетки по плоскости лица.
Создаётся 3D глубинная карта глубины, которая практически неосуществима для подделки типичной снимком или маской.

Выигрыши

Надёжная функционирование даже в полной темноте.
Высокая защита к фальсификациям.
Точность распознавания выше 99%.

Дополнительные сенсоры

В отдельных устройствах используются также вспомогательные датчики: ToF (Time-of-Flight), которые определяют период прохождения луча до объекта и обратно; Цветные-датчики дальности; специальные световые лидары для формирования более аккуратной 3D-модели лица.

Эти технологии используются чаще всего во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искусственный интеллект на действии

Текущие устройства опознания физиономий немыслимы при отсутствии эксплуатации artificial intelligence и machine learning. Именно из-за таким разработкам, как кабура, гаджет может узнавать пользователя даже при изменениях внешности: новая причёска, растительность на лице, очки или макияж не становятся барьером для разблокировки.

Обнаружение лиц

В начальном этапе система необходимо быстро найти образ лица в пределах целого изображения с камеры. Для данной цели применяются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены распознавать лиц человека среди множества других объектов.

Пример: метод MTCNN может обнаруживать физиономию даже с частичном перекрытии (например, шарфом или рукой).

Определение основных точек

После обнаружения лица устройство, такая как кабура, устанавливает местоположение ключевых точек: кончики глаз, кончик носа, края губ и так далее. Часто задействуется от 68 до 128 главных точек на лице.

Это действие необходимо для нормализации визуала: если человек находится с смартфон под наклоненным, или повернул головку, программа корректирует картинку до стандартного положения для последующего изучения.

Формирование биометрии шаблона

Далее нейросеть строит уплотненное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Данный образец крайне затруднительно сфальсифицировать: он не удерживает само картинку юзера, а лишь исключительные особенности его вида, что делает его оптимальным для таких систем, как кабура казино.

Сопоставление и вынесение выбора

Когда юзер желает разлочить телефон глазами, механизм воспроизводит все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный границу (обычно больше 99%), телефон, как и платформа кабура казино, доступен; если нет — доступ блокируется.

Приспособление к изменениям внешности

Увлекательная характеристика нынешних системы — возможность самостоятельного обучения. Если ты регулярно разблокируете телефон с обновленной прической или очками, алгоритм постепенно модернизирует эталонный модель вашего облика для повышения точности работы без снижения уровня безопасности.

Охрана биометрических данных информации.

Многие юзеры боятся держать свои биометрические данные на мобильном устройстве из-за угрозы утечки информации или взлома гаджета. Некоторые фирмы, вроде кабура казино, предлагают решения для увеличения сохранности информации юзеров.

Локальное хранение: Преимущественно аппаратов хранит био-идентификационные модели лишь внутрь безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не покидают гаджет и закрыты даже производителю.
Шифрование: Все данные сберегаются только в кодированном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Программы сторонних разработчиков не имеют прямого возможности доступа к биометрическим данным; они могут лишь требовать факт верификации идентичности через системный API.

Необходимо подчеркнуть значимую подробность: если кто-либо сможет получить доступ к вашему телефону физически (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство компании осуществляют защиту от “слепого” разблокирования — к примеру, заставляют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие бывают виды определения лиц?

На сегодняшний день можно выделить выделить три главных метода к осуществлению этой задачи:

Программное 2D идентификация

Эксплуатируется только передняя видеокамера без дополнительных сенсоров дистанции. Такой метод встречается обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность воплощения; низкая затраты; оперативная работа при хорошем свете.
Минусы: несложно одурачить снимком; ненадежная работа ночью; низкая безопасность.

Оборудование для объёмное оцифровка

Использует ИК видеокамеру + проекционный модуль пикселей + датчики дистанции (Face ID от Apple; аналогичные решения у Huawei Mate).
Достоинства: большая надежность; не получится подделать фото/видео; постоянная работа в любых условиях освещения.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с ИИ-дополнением

Используют комбинацию программных методов + техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как кабура и Google Pixel Face Unlock последних поколений, объединяют фронтальную камеру c ИК сенсором мобильности Soli Radar для защиты от подделок жестами/масками/видеоэкранами чужих устройств.

Образцы применения различных техник

iPhone серии X/11/12/13/14 применяют только техническое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID в числе Android.
Samsung Galaxy S10 модель/S20 поддерживают как программное обеспечение плоское идентификацию по снимку фронталкой, так и сканер радужки глаза.
Huawei Mate20 Pro использует систему из ИК-подсветки + Dot Projector + ToF-сенсор

Трудности безопасности и неверные сигналы

Несмотря на впечатляющий прогресс инноваций за недавние годы, совершенных механизмов пока не наблюдается:

Вероятность обмана: Бюджетные телефоны без труда открываются высококачественной изображением хозяина или видеозаписью с дисплея иного гаджета.
Идентичные двойняшки: Даже самые совершенные системы могут перепутать между однояйцевыми близнецами либо родственниками с очень аналогичной внешностью.
Трансформации внешности: Резкое утрата веса/набор веса, косметические процедуры или травмы порой необходимы для обновления данных биометрии.
Условия записи: Интенсивная освещённость солнцем или же интенсивная темнота могут снизить точность идентификации признаков.

Здесь некоторые подсказок по надёжному применению:

Для важных операций всегда внедряйте двухфакторную аутентификацию;
Не запускайте опцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
Регулярно обновляйте программное обеспечение мобильного устройства для защиты от новых видов атак;
Включайте функцию “Требовать открытых глаз” везде, где она доступна.

В каких местах ещё применяется технологии кроме мобильных телефонов?

Пускай тема нашей публикации касается именно смартфонам и планшетам, стоит упомянуть о прочих направлениях внедрения технологии:

Мониторинг доступа в офисах и многоквартирных зданиях;
Платёжные устройства банков (“Face Pay”);
Цифровые удостоверения личности современного типа;
Системы видеонаблюдения муниципальных служб;
Автоматизирование отслеживания присутствия образовательных учреждений/институтов;
Аутентификация участников персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — достаточно пройти через турникет без карты или мобильника! Схожие инициативы осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким способом трансформируется технический процесс сегодня?

Каждый годик возникают свежие концепции для усовершенствования стандарта функционирования систем распознавания лиц:

Увеличивается детализация датчиков — чем больше деталей фиксируется фотоаппаратом/глубинными сенсорами, тем меньше риск неточности;
Развиваются нейросети — передовые конструкции типа MobileNetV3 обеспечивают возможность быстро адаптироваться к новым характеристикам вида владельца прямо на устройстве без отправки данных в облако.
Улучшаются способы антиспуфинга — теперь телефоны умеют отличать настоящие движущиеся облики от неподвижных снимков/масок по мельчайшим движениям кожи.
Синхронизация со умными устройствами — интеллектуальные часы могут самостоятельно заблокировать телефон, если обладатель удалился на значительное расстояние.
Появляются смешанные устройства — к примеру комбинирующие голосовую идентификацию + облик + отпечаток пальца.

Здесь, которые тренды очень востребованы в данный момент:

1) Сокращение элементов

Изготовители пытаются уменьшить величину выреза (“чёлки”) под сенсоры на дисплее за счёт интеграции миниатюрных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на устройстве

Для улучшения личной безопасности всё более обработки данных выполняется на месте без передачи данных во дополнительный облачный услугу.

3) Упорядочивание стандартов

Google энергично пропагандирует эталон BiometricPrompt API, для того чтобы подобные платформы, вроде cabura, и любые Android-приложения могли работать с различными типами биометрии единообразно.

Что подобрать сегодня?

Если тебе необходима наивысшая защита информации, выбирайте топовые аппараты с интегрированным ИК-проектором либо ToF-датчиком глубины.

iPhone всех существующих новейших поколений
Huawei Companion/P ряда
Mix Expert
Vivo X модели
Oppo Найти X серии.

Если средства скромен – лучше выбирать классическим методам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в cabura, использовать только как второстепенную возможность удобства.

Каким образом улучшить комфорт работы функции?

Есть пара лайфхаков для пользователей, кто уже использует разблокировку через лицо:

Часто меняйте свою изображение-шаблон, если сильно меняется внешний вид.
Не пренебрегайте чистить объектив передней камеры – пятна могут снизить точность!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам активирует фотоаппарат когда вы берёте его в руки.
Во время регистрационного процесса пытайтесь сохранять голову ровно впереди видеоустройства без резкого наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отворачиваетесь от дисплея.

Возможности развития инноваций

В ближайшие времена можно предполагать возникновения полностью дистанционных способов опознания персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + голос + шаги + манипуляции руками!

Также предполагается появление свежих способов охраны конфиденциальности – например, переменное корректировка диджитал паттерна после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из самых интересных инноваций нашего периода! Она обеспечивает интеракцию со смартфоном удобнее чем до этого, и такие приложения, как кабура казино, могут в разы повысить ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы знаете, как работает эта методика внутри, – будете в состоянии вдумчиво выбирать свой будущий гаджет!