Каким образом действует определение лиц в смартфонах

Зачем мы предпочитаем разблокировку по лицевому распознаванию

В прошлые времена определение лиц стало одной из наиболее востребованных функций для разблокировки умных телефонов. Лишь несколько лет ранее основная часть использующих довольствовались PIN-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением подобных технологий, например admiral x, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект превращает эту конкретную особенность такой востребованной? Во-первых, это комфортно: не нужно удерживать в памяти сложные пароли или искать нужный палец в темноте. Также, это мгновенно: современные алгоритмы идентифицируют лицо практически за мгновения ока. В-третью очередь, это ощущение футуристичности — словно в кинолентах про admiral x зеркало разведчиков.

Впрочем за этой на первый взгляд несложностью скрывается целый универсум сложных методов и инженерных разработок. Давайте понять, как именно действует идентификация по лицу в актуальных гаджетах, какие существуют технологии, насколько они надёжны и что нас предстоит.

Короткая история прогресса техники

Распознавание лиц как техника существует уже более пятидесяти лет. Первые эксперименты машинного изучения лица были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины способны были лишь обозначать контуры лица и вычислять дистанции между зрачками и губами на монохромных изображениях.

Начальные бизнес установки появились в 1990-х годах, но они были несовершенны: работали медленно и нередко ошибались. Только с прогрессом нейронных сетей и таких платформ, как адмирал х, мощных мобильных процессоров идентификация лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным идентификацией лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали интегрировать личные разработки.

Ключевые стадии работы механизма идентификации

Процесс идентификации лица можно примерно поделить на несколько ключевых этапов:

1. Идентификация лица — камера распознает присутствие людского образа в изображении.
2. Определение особенностей — система изучает черты физиономии: форму зрительных органов, обонятельного органа, уст, расположение надбровных дуг.
3. Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с эталоном — полученный шаблон сверяется со зафиксированной при регистрации биометрической информацией владельца.
5. Принятие решения — если соответствие достаточно высокое, смартфон разблокируется.

Каждый из указанных шагов запрашивает индивидуальных процедур и улучшений для скорой работы прямо на устройстве.

Технические элементы: что скрыто в их недрах

Стандартная селфи камера.

Самый простой вариант идентификации лица задействует лишь переднюю видеокамеру мобильного устройства. Такой метод реализован во многих недорогих версиях Android-девайсов.

Положительные стороны:

• Не требует дополнительных датчиков.
• Оперативно действует при достаточном освещении.

Недостатки:

• Просто обмануть изображением или роликом.
• Неудачно работает при слабом освещении или непривычных ракурсах.

ИК камера и пунктирный проекционный аппарат

Более совершенные системы, такие как адмирал х, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология является основой Face ID от Apple.

Каким образом это работает:

• Точечный проектор проецирует на лицо пользователя невидимую сетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 точек).
• Инфракрасная камера записывает искривление этой сетки по плоскости физиономии.
• Получается 3D карта глубины, что почти невозможна для фальсификации стандартной фото или маскировкой.

Плюсы

• Надёжная работа даже в полной темноте.
• Сильная защита к имитациям.
• Точность определения более 99%.

Добавочные датчики

В отдельных девайсах используются также экстра сенсорные устройства: ToF (Time-of-Flight), которые фиксируют период распространения света до цели и обратно; RGB-датчики глубины; специальные лазерные измерители расстояния для формирования более точной 3D-модели лица.

Эти разработки применяются в основном во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: искуственный ум в действии

Современные системы распознавания лиц немыслимы при отсутствии применения ИИ и машинного обучения. Именно благодаря таким технологиям, как адмирал х, аппарат может узнавать юзера даже при трансформациях облика: новая стрижка, щетина, очки или макияж не становятся барьером для деблокировки.

Обнаружение лиц

В стартовом шаге система должна быстро найти ликовое изображение внутри полного кадра с камеры. Для этого применяются каскадные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые ”обучены” идентифицировать лиц человека среди множества других объектов.

Пример: процесс MTCNN в состоянии распознавать лицо даже с частичном закрытии (например, шарфом или рукой).

Идентификация важных моментов

После обнаружения лица устройство, такая как адмирал х, определяет местоположение основных точек: уголки глаз, кончик носа, контуры губ и так далее. Часто используется от 68 до 128 ключевых меток на лицевой области.

Данное нужно для нормализации визуала: если юзер находится с смартфон под наклоном, или повернул голову, программа исправляет картинку до стандартного положения для последующего изучения.

Создание биометрического идентификатора модели

Далее нейронная сеть строит сжатое числовое представление (”эмбеддинг”) лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 вещественных чисел.

Данный формат крайне трудно сфальсифицировать: он не сохраняет непосредственно фото юзера, а лишь исключительные характеристики его облика, что делает его идеальным для таких площадок, как admiral-x.

Сопоставление и вынесение выбора

В случае, когда пользователь намеревается открыть телефон взглядом, механизм воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный границу (обычно превышает 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ блокируется.

Привыкание к изменениям облика

Увлекательная черта современных систем — способность самообучения. Если вы постоянно открываете мобильное устройство с новой прической или оптикой, система постепенно модернизирует основной модель вашего внешности для улучшения точности функционирования без снижения уровня безопасности.

Охрана биометрических данных информации.

Множество пользователи боятся сохранять свои биометрические данные на мобильном устройстве из-за риска утечки информации или взлома устройства. Некоторые компании, такие как admiral-x, предлагают варианты для повышения сохранности сведений юзеров.

• Локальное сбережение: Большинство аппаратов записывает биометрические образцы исключительно внутрь защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не выходят из гаджет и закрыты в том числе создателю.

• Шифрование: Все данные сохраняются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Программы внешних девелоперов не обладают непосредственного возможности доступа к биометрическим; они могут лишь требовать подтверждение верификации личности через системный API.

Стоит подчеркнуть важную особенность: если кто-то сможет получить физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители осуществляют защиту от автоматического разблокирования — в частности, заставляют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют виды идентификации лиц?

На сегодняшний день можно различить три главных подхода к реализации этой операции:

Программируемое плоское идентификация

Эксплуатируется только передняя камера без вспомогательных сенсоров глубины. Подобный способ встречается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота реализации; минимальная стоимость; оперативная функционирование при хорошем освещении.
Минусы: легко обмануть снимком; нестабильная работа ночью; слабая охрана.

Техническое 3D сканирование

Применяет инфракрасную видеокамеру + проектор точек + датчики дистанции (Face ID от Apple; подобные решения у Huawei Mate).
Достоинства: высокая достоверность; не получится обмануть фото/видео; устойчивая работа при любом освещении.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (”чёлка”)

Комбинированные методы с дополнением ИИ

Применяют комбинацию программируемых методов + техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (”anti-spoofing”). Например, подобные изделия, например адмирал х и Google Pixel Face Unlock новейших версий, комбинируют фронтальную камеру c ИК датчиком движения Soli Radar для предотвращения от подделок руками/масками/видеодисплеями чужих устройств.

Образцы эксплуатации разнообразных методов

• iPhone серии X/11/12/13/14 применяют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые внедрил аналог Face ID среди Android.
• Samsung Galaxy S10/S20 обеспечивают как софтверное 2D распознавание по фото фронтальной камерой, так и сканер глазного ириса.
• Huawei Mate20 Pro задействует комплекс из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Проблемы безопасности и ошибочные сигналы

Несмотря на замечательный прогресс техники за недавние годы, безупречных механизмов пока не существует:

1. Возможность обмана: Бюджетные смартфоны без труда доступны высококачественной снимком пользователя либо роликом с экрана другого устройства.
2. Идентичные близнецы: Даже самые безупречные устройства могут ошибиться между однояйцевыми близнецами либо семьями с очень схожей внешностью.
3. Метаморфозы облика: Внезапное снижение веса/увеличение массы тела, пластические операции или повреждения в некоторых случаях необходимы для обновления данных биометрических данных.
4. Условия фотографирования: Интенсивная подсветка солнцем или же интенсивная темнота могут понизить верность распознавания признаков.

Вот некоторые подсказок по безопасному эксплуатации:

• Для критически важных операций всегда внедряйте двухэтапную аутентификацию;
• Не запускайте возможность ”Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
• Регулярно апгрейдите ПО смартфона для обеспечения безопасности от современных угроз;
• Включайте функцию ”Требовать открытых глаз” там, где она доступна.

В каких местах дополнительно используется технологии кроме смартфонов?

Несмотря на то, что предмет нашей публикации посвящена в частности портативным гаджетам, следует отметить других сферах применения технологии:

• Контроль входа в рабочих помещениях и резиденциях;
• Платёжные устройства банков (”Face Pay”);
• Электронные удостоверения личности последнего поколения;
• Установки видеонаблюдения муниципальных подразделений;
• Механизация учёта присутствия образовательных учреждений/университетов;
• Аутентификация пользователей ПК/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по фейсу (”Face Pay”) — нужно лишь пройти через турникет без карты или телефона! Аналогичные инициативы реализуются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как трансформируется техпроцесс в нынешнее время?

Любой годочек возникают новые идеи для улучшения качества функционирования систем распознавания лиц:

1. Увеличивается чёткость сенсорных устройств — чем больше деталей фиксируется видеокамерой/датчиками глубины, тем меньше риск неточности;
2. Совершенствуются нейросети — современные структуры типа MobileNetV3 обеспечивают возможность быстро осваивать дополнительным чертам вида обладателя прямо на устройстве без пересылки информации в облачное хранилище.
3. Развиваются способы антиспуфинга — теперь мобильные устройства могут различать подлинные движущиеся лица от фиксированных снимков/маскировок по незаметным движениям кожи.
4. Взаимодействие со смарт-гаджетами — интеллектуальные часы могут самостоятельно блокировать мобильный телефон, если обладатель ушёл далеко.
5. Проявляются комбинированные механизмы — в частности объединяющие аудио аутентификацию + физиономию + отпечаток пальца.

Вот, какие направления в особенности востребованы на сегодняшний день:

1) Уменьшение компонентов

Производители намереваются сократить габариты прорези (”чёлки”) под датчики на дисплее за счёт внедрения миниатюрных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для повышения личной безопасности всё больше вычислений выполняется локально без пересылки информации во дополнительный облачный услугу.

3) Упорядочивание норм

Гугл интенсивно пропагандирует стандарт BiometricPrompt API, для того чтобы подобные платформы, как admiral x, и каждые Android-программы могли работать с любыми видами биометрии унифицированно.

Какое подобрать на сегодня?

В случае если вам всем необходима максимальная сохранность информации, подбирайте передовые устройства с вмонтированным ИК-излучателем или же ToF-сенсором глубины.

• iPhone всех существующих последних поколений
• Huawei Mate/P серии
• Xiaomi Professional
• Vivo X линейки
• Oppo Обнаружить Икс серий.

Если средства ограничен – лучше выбирать классическим средствам безопасности (PIN-код/сканер пальца), а возможность ”разблокировка по лицу”, такую как в admiral x, использовать только как второстепенную возможность удобства.

Как повысить комфорт функционирования возможности?

Есть несколько лайфхаков для тех, кто уже пользуется функцию распознавания лица:

1. Регулярно обновляйте свою изображение-шаблон, если сильно трансформируется внешний вид.
2. Не забывайте протирать линзу передней камеры – загрязнения могут снизить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам запускает фотоаппарат как только вы поднимаете его.
4. Во время записи пытайтесь удерживать голову ровно напротив видеоустройства не допуская значительного наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отвели взгляд от дисплея.

Будущее прогресса инноваций

В ближайшие годы можно ожидать возникновения полностью безконтактных способов идентификации индивидуума сразу по нескольким биометрическим параметрам одновременно: лицо + голос + манера ходьбы + жесты рук!

Также предполагается возникновение новых подходов обеспечения конфиденциальности – например, динамическое модификация цифрового шаблона после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – единственная из самых захватывающих техник нашего времени! Она обеспечивает интеракцию со смартфоном удобнее чем когда-либо прежде, и такие аппы, как admiral-x, могут значительно улучшить ваш опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы осведомлены, как работает эта система изнутри, – будете в состоянии вдумчиво определять свой очередной девайс!