Как действует определение лиц в смартфонах

Почему мы останавливаемся на разблокировку по лицу

В последние годы идентификация физиономий является одной из наиболее востребованных опций для деблокировки умных телефонов. Еще некоторые лет назад основная часть пользователей довольствовались пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением подобных технологий, например On X, нам достаточно просто взглянуть на экран — и устройство тут же опознает своего владельца.

Что обуславливает эту конкретную возможность очень нужной? Прежде всего, это практично: не нужно удерживать в памяти сложные пароли или отыскивать верный палец в мраке. Также, это оперативно: современные алгоритмы идентифицируют лицо буквально за мгновения ока. В-третьем пункте, это впечатление будущего — словно в кинолентах про onx шпионов.

Тем не менее за этой видимой легкостью таится целый универсум сложных техник и инженерных разработок. Попробуем понять, как конкретно действует идентификация по лицу в актуальных смартфонах, какие бывают способы, насколько они безопасны и что нас предстоит.

Короткая повествование эволюции технологии

Идентификация лиц как методика существует уже более пятидесяти лет. Первые эксперименты автоматизированного исследования лица были предприняты еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры могли лишь выделять контуры лица и измерять расстояния между зрачками и устами на монохромных изображениях.

Первые коммерческие установки возникли в девяностых годах, но они были несовершенны: работали медленно и часто давали сбои. Только с развитием искусственных сетей и таких площадок, как On-X, высокопроизводительных мобильных процессоров определение лиц стало по-настоящему массовым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным сканированием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять свои разработки.

Главные шаги действия устройства определения

Процесс распознавания лица можно ориентировочно сегментировать на несколько важных этапов:

1. Распознавание лиц — аппарат определяет существование человеческого образа в изображении.
2. Определение признаков — система изучает черты облика: очертания зрительных органов, обонятельного органа, уст, позицию надбровных дуг.
3. Построение шаблона — создаётся особенный виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со образцом — полученный образец сравнивается с зафиксированной при регистрации биометрической данными владельца.
5. Принятие определения — если соответствие достаточно существенное, смартфон разблокируется.

Каждый из данных этапов запрашивает специальных методов и усовершенствований для скорой работы непосредственно на девайсе.

Железные компоненты: что прячется внутри них

Обычная передняя камера.

Наиболее несложный способ определения физиономии задействует исключительно переднюю видеокамеру смартфона. Подобный подход внедрён во многочисленных доступных моделях Android-девайсов.

Положительные стороны:

• Не потребляет дополнительные сенсоров.
• Быстро действует при достаточном освещении.

Недостатки:

• Просто обмануть снимком или роликом.
• Неправильно функционирует при плохом освещении или необычных ракурсах.

Инфракрасная фотокамера и пунктирный проектор

Более усовершенствованные системы, такие как On-X, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс лежит в основе Face ID от Apple.

Каким образом это работает:

• Точечный устройство проекции отображает на лицо использующего невидимую структуру из тысяч инфракрасных меток (например, Face ID применяет около 30 000 меток).
• ИК устройство записывает искривление данной решетки по поверхности физиономии.
• Формируется трёхмерная карта глубины глубины, что почти неподвластна для подделки типичной снимком или маской.

Выигрыши

• Надёжная работа даже в полной тьме.
• Высокая сопротивляемость к фальсификациям.
• Точность идентификации свыше 99%.

Добавочные сенсорные устройства

В некоторых девайсах применяются также экстра сенсорные устройства: ToF (Time-of-Flight), которые фиксируют период распространения луча до объекта и обратно; RGB-датчики дальности; специальные световые измерители расстояния для формирования более детализированной 3D-модели лица.

Эти разработки встречаются чаще всего во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искуственный ум в работе

Современные механизмы распознавания физиономий немыслимы при отсутствии применения ИИ и machine learning. Именно из-за таким инновациям, как On-X, аппарат может узнавать юзера даже при метаморфозах облика: новая укладка, щетина, линзы или грим не становятся помехой для разблокировки.

Обнаружение лиц

В стартовом шаге система необходимо мгновенно найти ликовое изображение в пределах полного кадра с камеры. Для данной цели применяются многоуровневые классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые "обучены" распознавать лица людей среди множества других объектов.

Пример: процесс MTCNN в состоянии обнаруживать лицо даже с неполном перекрытии (например, шалью или рукой).

Определение основных моментов

После идентификации лица система, такая как On-X, определяет местоположение основных точек: уголки глаз, верхушка носа, края губ и так далее. Как правило задействуется от 68 до 128 ключевых маркеров на лице.

Это требуется для нормализации картинки: если юзер удерживает мобильник под наклоненным, или наклонил голову, программа "выпрямляет" картинку до нормального состояния для дальнейшего анализа.

Построение биометрического образца

Далее искусственная сеть строит компактное числовое представление ("эмбеддинг") внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 флоатов.

Данный шаблон весьма сложно имитировать: он не удерживает непосредственно изображение пользователя, а лишь исключительные черты его облика, что делает его совершенным для таких платформ, как Он Икс Казино.

Сравнительный анализ и вынесение решения

Когда юзер хочет разблокировать мобильник глазами, система повторяет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа Он Икс Казино, разблокируется; если нет — доступ блокируется.

Приспособление к трансформациям внешности

Занимательная характеристика современных системы — возможность самообучения. Если вы постоянно разблокируете телефон с свежей стрижкой или оптикой, система постепенно освежает основной шаблон вашего облика для увеличения точности действия без снижения уровня безопасности.

Охрана биометрических данных данных.

Большинство пользователи опасаются хранить свои био-идентификационные данные на смартфоне из-за угрозы утечки данных или взлома устройства. Иные компании, такие как Он Икс Казино, предоставляют методы для увеличения безопасности сведений пользователей.

• Локальное хранение: Основная часть аппаратов хранит био-идентификационные образцы только в пределах защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают гаджет и закрыты даже производителю.

• Шифрование: Все данные хранятся только в шифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Программы внешних разработчиков не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения личности через системный API.

Следует отметить важную подробность: в случае, если кто-то достанет доступ к вашему телефону физически (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие изготовители осуществляют меры безопасности от "слепого" разблокирования — в частности, заставляют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются типы распознавания лиц?

В настоящее время можно выделить выделить три основных способа к выполнению этой операции:

Программное двухмерное определение

Эксплуатируется только лицевая видеокамера без дополнительных датчиков дистанции. Этот метод встречается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота воплощения; минимальная стоимость; быстрая функционирование при хорошем освещении.
Минусы: несложно обмануть фотографией; нестабильная работа ночью; недостаточная безопасность.

Аппаратное объёмное сканирование

Задействует инфракрасную видеокамеру + проекционный модуль точек + сенсоры дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Преимущества: большая надежность; невозможно обмануть изображение/видеозапись; устойчивая деятельность при любом освещении.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана ("чёлка")

Смешанные подходы с интеграцией ИИ

Задействуют комбинацию программируемых методов + техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам ("anti-spoofing"). Например, подобные продукты, например On-X и Google Pixel Face Unlock новейших версий, комбинируют фронталку c инфракрасным сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Примеры использования разных техник

• iPhone линейки X/11/12/13/14 задействуют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил подобие Face ID в числе Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как программное обеспечение 2D распознавание по фото селфи-камерой, так и датчик глазного ириса.
• Huawei Mate20 Pro применяет комплекс из ИК-подсветки + Dot Projector + ToF-датчик

Трудности охраны и ложные сигналы

Несмотря на впечатляющий прогресс технологий за прошедшие лет, совершенных систем пока не существует:

1. Вероятность обмана: Бюджетные мобильники легко доступны четкой фотографией хозяина или же роликом с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые совершенные системы могут ошибиться между однояйцевыми близнецами либо родственниками с очень похожей внешностью.
3. Изменения внешнего вида: Резкое похудение/набор веса, пластические операции либо повреждения в некоторых случаях требуют обновления данных биометрии.
4. Условия записи: Интенсивная засветка солнцем или глубокая темнота могут понизить верность идентификации признаков.

Здесь некоторые рекомендаций по защищённому использованию:

• Для критически важных операций всегда применяйте двухэтапную аутентификацию;
• Не запускайте опцию "Разблокировка по лицу" на бюджетных моделях без ИК-сенсоров;
• Систематически обновляйте программное обеспечение смартфона для предотвращения угроз от современных угроз;
• Включайте опцию "Требовать распахнутых глаз" там, где она имеется.

В каких местах дополнительно используется технология помимо смартфонов?

Несмотря на то, что предмет этой работы касается в частности смартфонам и планшетам, следует отметить прочих направлениях внедрения технологии:

• Мониторинг прохода в рабочих помещениях и жилых домах;
• Платёжные терминалы финансовых учреждений ("Face Pay");
• Виртуальные паспорта нового образца;
• Комплексы видеоконтроля муниципальных сервисов;
• Автоматизация регистрации присутствия образовательных учреждений/университетов;
• Авторизация юзеров ПК/ноутбуков.

Например: В столичном метро уже испытывается система оплаты проезда по лицу ("Face Pay") — хватит пройти через турникет без пластика или мобильника! Похожие программы развиваются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким способом трансформируется технология сегодня?

Каждый годик проявляются современные идеи для улучшения стандарта деятельности систем лицевого распознавания:

1. Увеличивается разрешение датчиков — чем больше информации фиксируется камерой/датчиками глубины, тем меньше вероятность неточности;
2. Развиваются нейронные сети — новейшие конструкции типа MobileNetV3 обеспечивают возможность быстро адаптироваться к свежим характеристикам облика пользователя прямо на устройстве без отправки данных в облако.
3. Улучшаются способы антиспуфинга — теперь смартфоны умеют распознавать подлинные движущиеся лица от неподвижных снимков/масок по незаметным движениям кожи.
4. Синхронизация со интеллектуальными приборами — умные часы могут авто заблокировать телефон, если обладатель ушёл далеко.
5. Появляются комбинированные устройства — например совмещающие аудио опознание + облик + дактилоскопический след.

Итак, какие тенденции особенно актуальны на сегодняшний день:

1) Сокращение компонентов

Изготовители стараются уменьшить размер прорези ("чёлки") для датчики на экране за счёт интеграции миниатюрных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на аппарате

Для улучшения личной безопасности всё больше расчётов выполняется локально без отправки данных во дополнительный облачный сервис.

3) Упорядочивание стандартов

Гугл интенсивно продвигает стандарт BiometricPrompt API, с целью чтобы подобные системы, вроде On X, и все Android-программы были совместимы с всеми формами биометрии стандартизированно.

Какое подобрать сегодня?

Когда вам необходима предельная безопасность информации, подбирайте топовые устройства с вмонтированным ИК-проектором или ToF-датчиком глубины.

• iPhone всех существующих новейших версий
• Huawei Companion/P серии
• Xiaomi Professional
• Vivo X линейки
• Oppo Обнаружить Х линейки.

Если средства скромен – лучше предпочесть классическим методам безопасности (PIN-код/сканер отпечатка), а функцию "разблокировка по лицу", такую как в On X, применять только как дополнительную возможность комфорта.

Каким образом повысить комфорт функционирования опции?

Есть пара хитростей для людей, кто уже применяет функцию распознавания лица:

1. Регулярно меняйте свою фотографию-шаблон, если значительно меняется внешность.
2. Не забывайте чистить линзу передней камеры – разводы могут уменьшить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам запускает фотоаппарат когда вы поднимаете его.
4. В процессе регистрационного процесса пытайтесь держать лицевую часть прямо напротив объектива без значительного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отворачиваетесь от экрана.

Перспективы эволюции технологии

В скоро наступающие годы можно ожидать развития полностью безконтактных способов распознавания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + манера ходьбы + манипуляции руками!

Также возможно возникновение свежих методов защиты приватности – например, переменное изменение электронного шаблона после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень интересных технологий нашего периода! Она обеспечивает интеракцию со мобильным устройством удобнее чем когда-либо прежде, и такие аппы, как Он Икс Казино, могут значительно оптимизировать ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы осведомлены, как устроена эта технология внутри, – сумеете вдумчиво подбирать свой следующий гаджет!