Каким образом функционирует распознавание лиц в смартфонах

Для чего мы выбираем разблокировку по лицевому распознаванию

В недавние годы определение лиц является одной из наиболее востребованных функций для открытия смартфонов. Лишь некоторые лет ранее основная часть пользователей удовлетворялись PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением подобных технологий, как cabura, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Что превращает эту конкретную функцию очень нужной? Прежде всего, это удобно: не нужно запоминать сложные пароли или искать нужный палец в тьме. Кроме того, это оперативно: современные алгоритмы распознают лицо практически за мгновение. В-третью очередь, это чувство футуризма — будто в кинолентах про кабура агентов.

Тем не менее за данной на первый взгляд простотой прячется полный вселенная комплексных техник и инженерных решений. Давайте понять, как именно действует идентификация по лицу в новейших гаджетах, какие бывают способы, насколько они защищены и что нас предстоит.

Краткая повествование эволюции технологии

Распознавание лиц как технология имеется уже более 50 лет. Первые пробы автоматизированного анализа лиц были осуществлены еще в 1960-х годы в лабораториях США. Тогда вычислительные машины способны были лишь выделять силуэты черепа и определять промежутки между глазами и губами на ахроматических фотографиях.

Изначальные коммерческие системы стали доступны в 1990-х годах, но они были неидеальны: действовали неспешно и часто ошибались. Только с развитием нейронных сетей и таких платформ, как кабура, сильных мобильных чипов идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным идентификацией лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать свои разработки.

Главные стадии работы устройства идентификации

Процесс идентификации лица можно ориентировочно разделить на несколько основных этапов:

1. Распознавание лица — устройство определяет присутствие гуманного образа в снимке.
2. Выделение особенностей — алгоритм исследует контуры физиономии: очертания глаз, носа, уст, позицию бровей.
3. Построение структуры — создаётся особенный цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со стандартом — сформированный образец сопоставляется с сохранённой при внесении биометрической данными владельца.
5. Принятие решения — если соответствие достаточно высокое, смартфон открывается.

Всякий из указанных этапов нуждается в специальных процедур и оптимизаций для скорой работы прямо на устройстве.

Технические элементы: что прячется внутри

Типичная селфи камера.

Наиболее легкий способ определения облика применяет исключительно лицевую камеру смартфона. Подобный подход внедрён во многочисленных бюджетных моделях Android-девайсов.

Достоинства:

• Не нуждается в дополнительных датчиков.
• Быстро работает при качественном освещённости.

Недостатки:

• Легко одурачить фотографией или видео.
• Плохо работает при плохом освещении или необычных ракурсах.

Инфракрасная камера и пунктирный проектор

Более усовершенствованные системы, такие как кабура, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология составляет базу Face ID от Apple.

Каким образом это работает:

• Точечный устройство проекции отображает на облик юзера невидимую структуру из тысяч инфракрасных меток (например, Face ID задействует около 30 000 пятен).
• ИК устройство регистрирует изменение формы данной решетки по поверхности лица.
• Получается 3D карта глубины глубинности, которая практически неподвластна для фальсификации обычной фотографией или маскировкой.

Плюсы

• Надёжная деятельность даже в полной тьме.
• Сильная сопротивляемость к имитациям.
• Точность идентификации выше 99%.

Дополнительные сенсоры

В определённых аппаратах используются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют период прохождения луча до цели и обратно; Трехцветные-датчики глубины; специальные оптические измерители расстояния для формирования более точной 3D-модели физиономии.

Эти инновации применяются в основном во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: синтетический интеллект в исполнении

Современные механизмы распознавания лиц немыслимы в отсутствие применения искусственного интеллекта и machine learning. Именно благодаря таким технологиям, как кабура, аппарат может узнавать пользователя даже при трансформациях внешнего вида: новая укладка, борода, очки или грим не становятся помехой для открытия.

Обнаружение физиономии

При начальном этапе алгоритм необходимо мгновенно обнаружить образ лица среди целого снимка с камеры. Для этого используются многоуровневые классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены находить человеческие лица среди множества других объектов.

Пример: процесс MTCNN может обнаруживать физиономию даже при неполном перекрытии (например, платком или рукой).

Идентификация ключевых точек

После обнаружения лица система, такая как кабура, вычисляет расположение основных точек: уголки глаз, кончик носа, края губ и так далее. Часто задействуется от 68 до 128 главных меток на лицевой области.

Это действие необходимо для стабилизации картинки: если юзер удерживает мобильник под наклоном, или наклонил голову, программа “выпрямляет” изображение до нормального состояния для последующего изучения.

Создание биометрического шаблона

Далее нейросеть строит компактное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 флоатов.

Такой образец очень сложно сфальсифицировать: он не хранит непосредственно картинку юзера, а лишь уникальные черты его внешности, что делает его совершенным для таких площадок, как кабура казино.

Сопоставление и принятие выбора

Если юзер намеревается разлочить телефон взором, система воспроизводит все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный границу (обычно больше 99%), телефон, как и платформа кабура казино, открывается; если нет — доступ запрещается.

Привыкание к метаморфозам облика

Занимательная характеристика современных системы — возможность самообучения. Если ты постоянно разблокируете телефон с свежей прической или очками, программа постепенно обновляет эталонный шаблон вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Охрана биометрии данных.

Множество пользователи боятся сохранять свои био-идентификационные данные на телефоне из-за угрозы потери данных или взлома устройства. Определенные компании, например кабура казино, предоставляют варианты для увеличения сохранности сведений пользователей.

• Локальное хранение: Большинство аппаратов сохраняет биометричные шаблоны лишь внутрь безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не выходят из устройство и недоступны включая производителю.

• Шифрование: Все сведения сохраняются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Программы сторонних девелоперов не имеют прямого доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Необходимо подчеркнуть существенную подробность: если кто-либо достанет физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители внедряют защиту от неосознанного разблокирования — к примеру, просят открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают виды распознавания лиц на изображениях?

На сегодняшний день можно выделить различить три ключевых подхода к выполнению этой операции:

Программное плоское идентификация

Применяется только фронтальная видеокамера без экстра детекторов глубины. Подобный подход используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота реализации; низкая затраты; оперативная деятельность при качественном свете.
Минусы: легко обмануть снимком; ненадежная функционирование ночью; слабая защищенность.

Аппаратное объёмное оцифровка

Задействует ИК камеру + проектор пикселей + датчики глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Достоинства: значительная надежность; невозможно обмануть изображение/видеозапись; стабильная деятельность при любом освещении.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с ИИ-дополнением

Используют комбинацию софтверных методов + техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, например кабура и Google Pixel Face Unlock новейших версий, сочетают фронтальную камеру c ИК сенсором движения Soli Radar для предотвращения от подделок руками/масками/видеодисплеями посторонних устройств.

Иллюстрации эксплуатации разных способов

• iPhone линейки X/11/12/13/14 используют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз представил подобие Face ID в числе Android.
• Samsung Galaxy S10/S20 имеют как программное плоское идентификацию по изображению фронтальной камерой, так и сканер радужки глаза.
• Huawei Mate20 Pro применяет комплекс из ИК-освещения + Dot Projector + ToF-сенсор

Вопросы охраны и неверные срабатывания

Несмотря на замечательный развитие техники за последние годы, идеальных системы пока не наблюдается:

1. Вероятность мошенничества: Недорогие смартфоны легко доступны качественной изображением пользователя либо роликом с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые совершенные системы могут ошибиться между однояйцевыми близнецами либо родственниками с очень аналогичной внешностью.
3. Трансформации внешности: Резкое снижение веса/увеличение массы тела, косметические процедуры или травмы иногда необходимы для перерегистрации биометрии.
4. Условия съёмки: Сильная подсветка солнцем либо плотная темнота могут понизить точность распознавания признаков.

Здесь некоторые подсказок для надёжному эксплуатации:

• Для важных операций всегда применяйте двухфакторную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Постоянно апгрейдите прошивку телефона для защиты от современных угроз;
• Включайте функцию “Требовать открытых глаз” в тех местах, где она есть.

В каких областях дополнительно находится применение технологии за исключением смартфонов?

Несмотря на то, что тема данной работы касается именно мобильным устройствам, необходимо сказать о других сферах применения технологии:

• Управление входа в деловых центрах и резиденциях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Цифровые идентификационные документы последнего поколения;
• Установки видеомониторинга городских сервисов;
• Автоматизирование регистрации присутствия школ/институтов;
• Вход юзеров персональных компьютеров/ноутбуков.

Например: В городском метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без пластика или мобильника! Аналогичные программы осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким способом трансформируется технический процесс сегодня?

Любой год возникают новые мысли для повышения стандарта функционирования систем распознавания лиц:

1. Увеличивается разрешение датчиков — чем больше информации фиксируется фотоаппаратом/глубинными сенсорами, тем меньше вероятность неточности;
2. Развиваются нейросети — передовые архитектуры модели MobileNetV3 дают возможность быстро осваивать дополнительным характеристикам внешности пользователя непосредственно на девайсе без отправки данных в облако.
3. Развиваются способы антиспуфинга — теперь телефоны способны различать реальные анимированные лица от статичных снимков/масок по незаметным микродвижениям.
4. Интеграция со умными устройствами — интеллектуальные часы могут авто заблокировать мобильный телефон, если владелец отошёл далеко.
5. Возникают комбинированные механизмы — например объединяющие голосовую аутентификацию + облик + пальцевой отпечаток.

Итак, какие тренды очень востребованы в данный момент:

1) Уменьшение компонентов

Компании пытаются минимизировать размер выреза (“чёлки”) под сенсоры на дисплее за счёт внедрения маленьких ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для улучшения конфиденциальности всё более расчётов осуществляется локально без отправки информации во дополнительный облачный услугу.

3) Унификация стандартов

Google энергично продвигает стандарт BiometricPrompt API, чтобы аналогичные системы, например как cabura, и каждые Android-программы были совместимы с любыми видами биометрии единообразно.

Что подобрать сегодня?

Если вам нужна максимальная защита данных, выбирайте топовые аппараты с вмонтированным ИК-излучателем или же ToF-сенсором глубины.

• iPhone всех последних поколений
• Huawei Companion/Series P серии
• Mi Pro
• Vivo X серии
• Oppo Обнаружить X серий.

Если средства невелик – лучше выбирать обычным способам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в cabura, задействовать только как второстепенную опцию удобства.

Каким способом повысить удобство функционирования опции?

Есть некоторые лайфхаков для людей, кто уже пользуется разблокировку по лицу:

1. Регулярно обновляйте свою изображение-шаблон, если кардинально трансформируется внешний вид.
2. Не пренебрегайте чистить объектив фронтальной камеры – загрязнения могут снизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам запускает фотоаппарат когда вы берёте его в руки.
4. При записи пытайтесь сохранять голову ровно перед видеоустройства не допуская резкого наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвернулись от экрана.

Перспективы развития техники

В предстоящие периоды можно предвкушать возникновения полностью дистанционных способов идентификации человека сразу по нескольким биометрическим параметрам одновременно: физиономия + звучание + походка + движения рук!

Также предполагается возникновение современных методов защиты личной информации – к примеру, изменяющееся изменение цифрового образца после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из наиболее интересных техник нашего периода! Она делает интеракцию со смартфоном комфортнее чем до этого, и такие аппы, как кабура казино, могут значительно оптимизировать ваш пользовательский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как работает эта методика изнутри, – сможете более осмысленно выбирать свой очередной устройство!