Как работает идентификация лиц в смартфонах

Для чего мы выбираем разблокировку по лицевому распознаванию

В прошлые годы определение физиономий стало одной из самых популярных опций для разблокировки смартфонов. Лишь несколько годков назад основная масса юзеров обходились пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением подобных технологий, как On X, нам достаточно просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Что обуславливает эту конкретную особенность настолько популярной? Для начала, это удобно: не нужно запоминать замысловатые пароли или искать правильный палец в мраке. Кроме того, это быстро: современные системы узнают лицо фактически за мгновение. В-третьем пункте, это впечатление будущего — будто в кинофильмах про onx разведчиков.

Однако за этой видимой несложностью скрывается полный мир сложных техник и инженерных решений. Давайте исследовать, как конкретно функционирует распознавание лиц в новейших смартфонах, какие применяются технологии, насколько они безопасны и что нас ожидает в будущем.

Короткая история прогресса техники

Идентификация лиц как техника существует уже более пятидесяти лет. Изначальные пробы машинного исследования облика были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда компьютеры умели лишь обозначать силуэты черепа и вычислять дистанции между зрачками и устами на черно-белых снимках.

Первые коммерческие установки стали доступны в девяностых годах, но они были далеки от совершенства: действовали неспешно и нередко ошибались. Только с эволюцией синтетических сетей и таких систем, как On-X, высокопроизводительных мобильных процессоров определение лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным сканированием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять личные разработки.

Ключевые шаги действия системы распознавания

Процесс определения лица можно ориентировочно сегментировать на несколько важных этапов:

1. Распознавание лиц — аппарат выявляет присутствие гуманного лица в снимке.
2. Извлечение признаков — алгоритм исследует особенности облика: очертания зрительных органов, носа, уст, положение надбровных дуг.
3. Построение шаблона — создаётся неповторимый электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с эталоном — созданный модель сопоставляется со записанной при внесении биометрической данными владельца.
5. Принятие определения — если соответствие достаточно существенное, смартфон деблокируется.

Всякий из данных этапов нуждается в особых методов и оптимизаций для оперативной работы непосредственно на девайсе.

Железные составляющие: что прячется в их недрах

Типичная фронтальная камера.

Наиболее несложный метод определения лица использует только лицевую камеру смартфона мобильного устройства. Данный способ осуществлён во многочисленных доступных вариантах Android-девайсов.

Преимущества:

• Не потребляет дополнительных сенсоров.
• Шустро работает при качественном свете.

Отрицательные стороны:

• Несложно одурачить фотографией или видео.
• Плохо работает при слабом освещении или нестандартных ракурсах.

ИК камера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как On-X, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс лежит в основе Face ID от Apple.

Каким способом это действует:

• Точечный проекционный прибор проецирует на лицо юзера невидимую сетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 точек).
• ИК устройство регистрирует изменение формы данной сетки по плоскости физиономии.
• Получается трехмерная глубинная карта глубины, которая почти неподвластна для подделки стандартной снимком или маскировкой.

Плюсы

• Надёжная функционирование даже в полной неосвещённости.
• Большая защита к фальсификациям.
• Точность идентификации выше 99%.

Дополнительные сенсорные устройства

В определённых аппаратах применяются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые определяют период прохождения света до предмета и обратно; RGB-датчики дальности; специальные лазерные измерители расстояния для формирования более аккуратной 3D-модели физиономии.

Эти разработки применяются в основном во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: синтетический интеллект в действии

Нынешние механизмы опознания физиономий неосуществимы при отсутствии применения artificial intelligence и машинного обучения. Именно из-за таким инновациям, как On-X, аппарат в состоянии узнавать владельца даже при трансформациях облика: новая причёска, щетина, очки или макияж не становятся помехой для открытия.

Обнаружение лица

На первом шаге программа необходимо мгновенно распознать лицо в пределах полного снимка камеры. Для этой задачи задействуются многоуровневые классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые натренированы распознавать лиц человека среди множества других объектов.

Пример: процесс MTCNN способен обнаруживать лицо даже в случае частичном перекрытии (например, шалью или рукой).

Идентификация основных моментов

После идентификации лица система, такая как On-X, определяет местоположение главных точек: кончики глаз, кончик носа, края губ и так далее. Обычно используется от 68 до 128 основных маркеров на лицевой области.

Это требуется для нормализации изображения: если пользователь держит телефон под наклоненным, или повернул голову, программа корректирует изображение до обычного угла для последующего изучения.

Создание биометрического модели

Далее искусственная сеть строит сжатое цифровое представление ("эмбеддинг") лица пользователя — своеобразный цифровой "отпечаток" лица длиной от 128 до 512 флоатов.

Такой образец весьма трудно сфальсифицировать: он не сохраняет само картинку юзера, а лишь особенные черты его вида, что делает его оптимальным для таких систем, как Он Икс Казино.

Сравнение и вынесение выбора

В случае, когда человек хочет разблокировать смартфон взглядом, система повторяет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный порог (обычно больше 99%), телефон, как и платформа Он Икс Казино, открывается; если нет — доступ не предоставляется.

Привыкание к трансформациям внешнего вида

Увлекательная черта современных систем — возможность самообучения. Если вы постоянно доступаете к мобильное устройство с свежей прической или очками, программа постепенно освежает эталонный модель вашего лица для увеличения точности действия без ухудшения безопасности.

Безопасность биометрии данных.

Многие пользователи беспокоятся держать свои биометрические идентификационные данные на мобильном устройстве из-за вероятности утечки информации или взлома гаджета. Определенные организации, например Он Икс Казино, предлагают решения для повышения сохранности данных клиентов.

• Локальное сбережение: Преимущественно девайсов записывает биометричные образцы исключительно в пределах защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают аппарат и закрыты включая создателю.

• Шифрование: Все сведения сохраняются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения внешних девелоперов не имеют прямого доступа к биометрическим; они могут лишь требовать факт верификации личности через системный API.

Стоит упомянуть значимую подробность: в случае, если кто-либо получит физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители внедряют меры безопасности от неосознанного разблокирования — к примеру, заставляют разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют категории определения лиц?

Сегодня можно выделить определить три ключевых способа к осуществлению этой функции:

Программируемое двухмерное распознавание

Используется только передняя камера без дополнительных сенсоров дистанции. Подобный способ наблюдается наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность осуществления; минимальная стоимость; быстрая деятельность при хорошем свете.
Минусы: легко ввести в заблуждение снимком; неустойчивая функционирование ночью; низкая охрана.

Оборудование для трёхмерное сканирование

Задействует ИК камеру + проекционный модуль точек + сенсоры глубины (Face ID у Apple; подобные решения у Huawei Mate).
Достоинства: высокая достоверность; не получится подделать изображение/видеозапись; стабильная деятельность в любых условиях освещения.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана ("чёлка")

Комбинированные способы с дополнением ИИ

Используют комбинацию программных методов + аппаратную обработку + постобработку нейросетями для повышения устойчивости к атакам ("anti-spoofing"). Например, подобные товары, как On-X и Google Pixel Face Unlock последних поколений, сочетают фронтальную камеру c ИК датчиком движения Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями посторонних устройств.

Примеры эксплуатации разных способов

• iPhone линейки X/11/12/13/14 применяют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition впервые предложил подобие Face ID в числе Android.
• Samsung Galaxy S10/S20 обеспечивают как программное 2D распознавание по изображению фронтальной камерой, так и сканер глазного ириса.
• Huawei Mate20 Pro применяет набор из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Вопросы защиты и неверные сигналы

Несмотря на поразительный развитие технологий за прошедшие годы, безупречных систем пока не существует:

1. Вероятность обмана: Доступные мобильники просто "разблокируются" четкой изображением пользователя или видеозаписью с экрана другого устройства.
2. Идентичные двойняшки: Даже самые безупречные механизмы могут перепутать между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
3. Трансформации внешнего вида: Стремительное похудение/набор веса, косметические процедуры либо повреждения порой необходимы для обновления данных биометрии.
4. Условия фотографирования: Интенсивная засветка солнечным светом либо интенсивная темнота могут уменьшить аккуратность распознавания признаков.

Здесь несколько советов для безопасному использованию:

• Для значимых операций всегда применяйте двухфакторную аутентификацию;
• Не запускайте опцию "Разблокировка по лицу" на бюджетных аппаратах без ИК-сенсоров;
• Постоянно обновляйте программное обеспечение смартфона для предотвращения угроз от новых видов атак;
• Включайте настройку "Требовать распахнутых глаз" везде, где она доступна.

Где ещё находится применение технология за исключением смартфонов?

Несмотря на то, что предмет этой статьи сосредоточена на в частности смартфонам и планшетам, следует отметить прочих направлениях внедрения технологии:

• Мониторинг входа в офисах и многоквартирных зданиях;
• Платёжные терминалы финансовых учреждений ("Face Pay");
• Цифровые паспорта последнего поколения;
• Установки видеомониторинга городских подразделений;
• Механизация учёта посещаемости учебных заведений/университетов;
• Аутентификация участников компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система платежа проезда по фейсу ("Face Pay") — нужно лишь пройти через барьер без карты или мобильника! Аналогичные программы реализуются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким образом трансформируется технический процесс сегодня?

Каждый годик проявляются новые идеи для усовершенствования стандарта функционирования систем лицевого распознавания:

1. Увеличивается чёткость датчиков — чем больше элементов фиксируется камерой/датчиками глубины, тем меньше вероятность погрешности;
2. Развиваются искусственные интеллекты — современные конструкции типа MobileNetV3 дают возможность оперативно адаптироваться к дополнительным чертам облика обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Совершенствуются способы антиспуфинга — теперь смартфоны умеют различать настоящие живые лица от статичных фото/маскировок по микроскопическим микродвижениям.
4. Интеграция со умными устройствами — смарт-часы могут самостоятельно блокировать мобильный телефон, если пользователь ушёл далеко.
5. Проявляются гибридные системы — например совмещающие голосовую идентификацию + физиономию + отпечаток пальца.

Здесь, те тренды очень популярны в данный момент:

1) Сокращение элементов

Компании намереваются минимизировать величину отверстия ("чёлки") под датчики на дисплее за счёт внедрения маленьких ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для улучшения конфиденциальности всё больше обработки данных осуществляется внутри устройства без отправки информации во сторонний облачный услугу.

3) Стандартизация регламентов

Гугл интенсивно продвигает эталон BiometricPrompt API, чтобы такие системы, например как On X, и все Android-приложения были совместимы с различными типами биометрии единообразно.

Какое выбрать на сегодня?

Когда тебе важна предельная защита информации, остановите выбор на флагманские аппараты со встроенным ИК-излучателем или же ToF-датчиком глубины.

• iPhone всех актуальных версий
• Huawei Mate/Series P линейки
• Mi Pro
• Vivo X линейки
• Oppo Найти X серии.

Если средства скромен – лучше отдавать предпочтение классическим средствам безопасности (PIN-код/сканер отпечатка), а возможность "разблокировка по лицу", такую как в On X, применять только как опциональную возможность комфорта.

Каким образом улучшить комфорт функционирования опции?

Есть пара советов для людей, кто уже пользуется разблокировку через лицо:

1. Периодически обновляйте свою фото-шаблон, если значительно меняется облик.
2. Не пренебрегайте протирать объектив передней камеры – пятна могут снизить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам включает фотоаппарат как только вы берёте его в руки.
4. При записи старайтесь удерживать лицо ровно напротив объектива не допуская сильного наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отворачиваетесь от экрана.

Возможности развития техники

В скоро наступающие годы можно ожидать появления полностью бесконтактных способов идентификации персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + голос + походка + жесты рук!

Также предполагается возникновение новых способов защиты приватности – к примеру, динамическое корректировка диджитал паттерна после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых увлекательных инноваций нашего эпохи! Она делает общение со смартфоном проще чем до этого, и такие аппы, как Он Икс Казино, могут существенно улучшить ваш опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы осведомлены, как функционирует эта технология в деталях, – будете в состоянии вдумчиво подбирать свой очередной гаджет!