Как работает идентификация лиц в мобильных устройствах

Почему мы предпочитаем разблокирование по фейсу

В прошлые времена распознавание физиономий стало одной из наиболее востребованных опций для разблокировки умных телефонов. Лишь несколько годов ранее большинство пользователей довольствовались PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, как вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что превращает эту особенность очень нужной? Во-первых, это практично: не нужно удерживать в памяти трудные пароли или отыскивать нужный палец в тьме. Также, это мгновенно: современные программы идентифицируют лицо практически за доли секунды. В-третьих, это ощущение футуристичности — будто в кинофильмах про вулкан казино шпионов.

Однако за данной на первый взгляд несложностью таится целый вселенная трудных технологий и инженерных разработок. Позвольте нам разобраться, как именно действует распознавание лиц в новейших гаджетах, какие бывают технологии, насколько они надёжны и что нас предстоит.

Сжатая история эволюции техники

Распознавание лиц как технология присутствует уже более пятидесяти годов. Начальные попытки автоматического анализа лиц были предприняты еще в 1960-х годах в лабораториях США. Тогда вычислительные машины умели лишь выделять силуэты головы и измерять промежутки между глазами и устами на черно-белых изображениях.

Изначальные коммерческие системы возникли в 1990-х годах, но они были далеки от совершенства: функционировали медленно и часто давали сбои. Только с развитием нейронных сетей и таких систем, как вулкан россии, мощных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным идентификацией лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие начали интегрировать собственные решения.

Основные шаги функционирования устройства распознавания

Процесс определения лица можно ориентировочно разделить на несколько важных этапов:

1. Идентификация лица — камера определяет существование гуманного образа в снимке.
2. Выделение характеристик — алгоритм исследует черты облика: форму глаз, носа, уст, положение бровей.
3. Построение структуры — создаётся неповторимый электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с образцом — полученный шаблон сравнивается с записанной при внесении биометрической данными владельца.
5. Принятие выбора — если соответствие достаточно значительное, смартфон деблокируется.

Каждый из этих шагов запрашивает специальных алгоритмов и оптимизаций для оперативной работы непосредственно на девайсе.

Железные составляющие: что находится в их недрах

Стандартная селфи камера.

Простейший простой вариант идентификации лица применяет исключительно фронтальную камеру смартфона. Данный метод осуществлён во многих доступных вариантах Android-устройств.

Достоинства:

• Необходимо потребляет дополнительные датчиков.
• Шустро действует при достаточном освещении.

Слабые стороны:

• Легко одурачить снимком или видео.
• Плохо функционирует при низком освещённости или непривычных углах обзора.

ИК фотокамера и пунктирный проектор

Более совершенные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология является основой Face ID от Apple.

Как это работает:

• Точечный проекционный прибор показывает на лицо использующего невидимую сетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 точек).
• Инфракрасная устройство фиксирует изменение формы данной решетки по плоскости физиономии.
• Создаётся 3D карта глубины глубины, что практически неосуществима для имитации типичной фотографией или маскировкой.

Преимущества

• Надёжная функционирование даже в полной темноте.
• Большая устойчивость к подделкам.
• Точность идентификации выше 99%.

Добавочные сенсоры

В определённых аппаратах задействуются также дополнительные сенсоры: ToF (Time-of-Flight), которые определяют период прохождения луча до объекта и обратно; Цветные-датчики глубины; специальные световые измерители расстояния для создания более аккуратной 3D-модели лица.

Эти разработки используются в основном во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искусственный разум в действии

Текущие системы опознания лиц немыслимы при отсутствии использования искусственного интеллекта и машинного обучения. Именно из-за таким технологиям, как вулкан россии, устройство может узнавать пользователя даже при изменениях облика: новая причёска, борода, линзы или косметика не становятся препятствием для деблокировки.

Детектирование лица

На стартовом шаге программа обязана мгновенно найти ликовое изображение среди полного изображения камеры. Для этой задачи используются последовательные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые “обучены” находить лица людей среди множества других объектов.

Пример: алгоритм MTCNN может находить облик даже в случае неполном перекрытии (например, шалью или рукой).

Идентификация важных аспектов

После обнаружения лица устройство, такая как вулкан россии, устанавливает местоположение ключевых точек: края глаз, верхушка носа, края губ и так далее. Часто используется от 68 до 128 главных меток на лице.

Это требуется для стабилизации картинки: если человек находится с смартфон под углом, или повернул головку, программа “выпрямляет” изображение до нормального состояния для последующего изучения.

Построение биометрического идентификатора образца

Далее нейронная сеть строит уплотненное цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след внешности длиной от 128 до 512 чисел с плавающей запятой.

Данный образец очень затруднительно сфальсифицировать: он не удерживает само картинку юзера, а лишь исключительные черты его внешности, что делает его идеальным для таких площадок, как vulkan russia.

Сравнительный анализ и осуществление заключения

Если пользователь намеревается разблокировать телефон взором, механизм осуществляет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный уровень (обычно выше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ блокируется.

Приспособление к изменениям внешнего вида

Занимательная характеристика актуальных системы — возможность самообучения. Если вы часто открываете телефон с новой укладкой или оптикой, алгоритм постепенно обновляет эталонный модель вашего лица для улучшения точности функционирования без ухудшения безопасности.

Охрана биометрических данных данных.

Множество пользователи опасаются сохранять свои биометрические идентификационные данные на телефоне из-за угрозы потери данных или взлома устройства. Определенные компании, вроде vulkan russia, предлагают решения для повышения сохранности информации клиентов.

• Локальное хранение: Основная часть аппаратов хранит биометричные образцы лишь внутри защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не покидают аппарат и недоступны включая изготовителю.

• Шифрование: Все данные сберегаются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения внешних разработчиков не обладают прямого возможности доступа к биометрическим данным; они могут лишь требовать подтверждение верификации личности через системный API.

Следует подчеркнуть существенную особенность: если какой-то человек сможет получить доступ к вашему телефону физически (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители осуществляют систему защиты от “слепого” разблокирования — в частности, требуют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются виды распознавания лиц на изображениях?

Сегодня можно выделить выделить 3 главных подхода к реализации этой операции:

Программное двухмерное идентификация

Эксплуатируется только фронтальная видеокамера без дополнительных сенсоров дистанции. Этот метод наблюдается наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; умеренная цена; быстрая деятельность при качественном освещении.
Минусы: просто одурачить фотографией; ненадежная функционирование ночью; недостаточная охрана.

Техническое объёмное сканирование

Применяет ИК камеру + проектор пикселей + датчики дистанции (Face ID от Apple; аналогичные решения у Huawei Mate).
Достоинства: значительная достоверность; невозможно подделать фото/видео; стабильная работа при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с интеграцией ИИ

Применяют комбинацию программных методов + аппаратную обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как вулкан россии и Google Pixel Face Unlock последних версий, комбинируют фронтальную камеру c ИК сенсором мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Иллюстрации эксплуатации разных способов

• iPhone модели X/11/12/13/14 используют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз предложил эквивалент Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 поддерживают как софтверное плоское распознавание по фото селфи-камерой, так и сканер ириса глаза.
• Huawei Mate20 Pro задействует систему из ИК-инфракрасного света + Dot Projector + ToF-датчик

Вопросы защиты и ошибочные сигналы

Несмотря на замечательный развитие инноваций за последние лет, идеальных систем пока не наблюдается:

1. Вероятность подвоха: Доступные мобильники просто открываются высококачественной фотографией пользователя либо видео с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые безупречные устройства могут ошибиться между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
3. Трансформации облика: Резкое снижение веса/набор веса, косметические процедуры либо повреждения иногда необходимы для повторной регистрации биометрии.
4. Условия фотографирования: Сильная освещённость солнечным светом либо интенсивная затенение могут понизить верность идентификации признаков.

Ниже пара рекомендаций по безопасному эксплуатации:

• Для важных операций всегда применяйте двухфакторную аутентификацию;
• Не активируйте возможность “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
• Постоянно обновляйте программное обеспечение телефона для защиты от новых видов атак;
• Включайте настройку “Требовать открытых глаз” в тех местах, где она есть.

В каких областях ещё применяется технологии кроме мобильных телефонов?

Пускай основная мысль нашей публикации сосредоточена на в частности портативным гаджетам, стоит упомянуть о других сферах применения технологии:

• Контроль входа в рабочих помещениях и многоквартирных зданиях;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Цифровые удостоверения личности последнего поколения;
• Системы видеоконтроля городских сервисов;
• Механизация регистрации явки учебных заведений/институтов;
• Аутентификация пользователей персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через турникет без пластика или телефона! Аналогичные программы осуществляются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом изменяется технический процесс сегодня?

Любой годик появляются новые идеи для улучшения уровня функционирования систем лицевого распознавания:

1. Увеличивается разрешение сенсорных устройств — чем больше информации фиксируется камерой/датчиками глубины, тем меньше шанс ошибки;
2. Улучшаются нейросети — передовые конструкции типа MobileNetV3 позволяют быстро осваивать дополнительным особенностям вида обладателя напрямую на гаджете без отправки данных в облако.
3. Улучшаются технологии антиспуфинга — теперь телефоны могут отличать подлинные живые облики от статичных фотографий/масок по микроскопическим движениям кожи.
4. Синхронизация со смарт-гаджетами — умные часы могут автоматически заблокировать мобильный телефон, если обладатель отошёл далеко.
5. Появляются смешанные механизмы — например комбинирующие аудио опознание + физиономию + дактилоскопический след.

Здесь, которые тренды особенно востребованы на сегодняшний день:

1) Миниатюризация элементов

Производители стараются уменьшить габариты отверстия (“чёлки”) для датчики на экране за счёт внедрения компактных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на аппарате

Для повышения конфиденциальности всё больше вычислений происходит на месте без отправки данных во дополнительный облачный услугу.

3) Стандартизация норм

Google интенсивно продвигает норму BiometricPrompt API, с целью чтобы такие платформы, например как вулкан россия, и каждые Android-приложения могли работать с всеми формами биометрии единообразно.

Какое подобрать на сегодня?

Когда вам нужна максимальная сохранность информации, выбирайте топовые модели с интегрированным ИК-проектором либо ToF-датчиком глубины.

• iPhone каждого новейших поколений
• Huawei Partner/P ряда
• Xiaomi Professional
• Vivo X линейки
• Oppo Найти X серий.

Если финансы невелик – лучше отдавать предпочтение классическим средствам защиты (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную опцию удобства.

Как улучшить комфорт использования функции?

Есть несколько хитростей для тех, кто уже использует разблокировку через лицо:

1. Периодически обновляйте свою изображение-шаблон, если сильно изменяется внешность.
2. Не пренебрегайте чистить линзу передней камеры – загрязнения могут уменьшить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам включает камеру когда вы берёте его в руки.
4. В процессе записи пытайтесь сохранять голову ровно перед объектива исключая сильного наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвели взгляд от дисплея.

Будущее эволюции инноваций

В предстоящие периоды можно предполагать возникновения полностью бесконтактных способов опознания индивидуума сразу по нескольким биометрическим параметрам одновременно: облик + голос + манера ходьбы + жесты рук!

Также возможно появление новых способов обеспечения конфиденциальности – например, переменное корректировка цифрового шаблона после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых захватывающих инноваций нашего эпохи! Она предоставляет взаимодействие со мобильным устройством удобнее чем до этого, и такие программы, как vulkan russia, могут значительно улучшить ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы осведомлены, как устроена эта технология в деталях, – сумеете осознаннее выбирать свой очередной устройство!