Каким способом работает определение лиц в телефонах

Зачем мы выбираем разлочивание по лицевому распознаванию

В последние годы распознавание физиономий является одной из самых популярных опций для деблокировки смартфонов. Всего пару годков тому назад основная масса пользователей обходились PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что превращает эту конкретную функцию настолько популярной? Для начала, это практично: не нужно помнить трудные пароли или отыскивать верный палец в тьме. Во-вторых, это мгновенно: современные программы идентифицируют лицо фактически за мгновения ока. В-третью очередь, это ощущение футуристичности — как будто в кинофильмах про вулкан автомат агентов.

Однако за этой кажущейся несложностью прячется полный мир трудных техник и инженерных решений. Попробуем разобраться, как именно действует распознавание лиц в новейших смартфонах, какие применяются технологии, насколько они защищены и что нас предстоит.

Короткая хроника эволюции инноваций

Распознавание лиц как технология присутствует уже более 50 годов. Изначальные эксперименты автоматизированного исследования лица были осуществлены еще в 1960-х годы в научных учреждениях США. Тогда компьютеры способны были лишь обозначать очертания черепа и измерять дистанции между зрачками и ртом на черно-белых снимках.

Изначальные бизнес установки возникли в 1990-х годах, но они были неидеальны: действовали неспешно и часто ошибались. Только с развитием искусственных сетей и таких систем, как вулкан россии, высокопроизводительных мобильных чипов определение лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным сканированием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие стали интегрировать свои разработки.

Главные шаги работы механизма определения

Процесс идентификации лица можно условно разделить на несколько важных этапов:

Идентификация лиц — камера определяет присутствие человеческого лица в изображении.
Определение характеристик — механизм анализирует черты облика: очертания зрительных органов, носа, губ, расположение бровей.
Построение модели — создаётся особенный электронный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со эталоном — созданный модель сверяется с сохранённой при внесении биометрической информацией владельца.
Принятие решения — если соответствие достаточно значительное, смартфон разблокируется.

Каждый из этих шагов требует индивидуальных процедур и усовершенствований для быстрой работы прямо на устройстве.

Технические компоненты: что прячется внутри них

Стандартная фронтальная камера.

Самый простой легкий метод распознавания физиономии применяет исключительно лицевую камеру смартфона. Данный подход осуществлён во многих доступных моделях Android-устройств.

Достоинства:

Не нуждается в требует дополнительных датчиков.
Шустро действует при качественном свете.

Минусы:

Несложно ввести в заблуждение снимком или видео.
Неправильно работает при низком свете или необычных точках зрения.

ИК фотокамера и точечный проектор

Более усовершенствованные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика является основой Face ID от Apple.

Как это действует:

Точечный проекционный прибор показывает на облик юзера невидимую сетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 меток).
ИК камера записывает изменение формы данной сетки по плоскости лица.
Создаётся трехмерная глубинная карта глубинности, что почти что невозможна для фальсификации типичной фотографией или маской.

Достоинства

Надёжная функционирование даже в полной неосвещённости.
Большая защита к имитациям.
Точность распознавания свыше 99%.

Добавочные датчики

В отдельных устройствах применяются также дополнительные датчики: ToF (Time-of-Flight), которые фиксируют время распространения луча до цели и обратно; Цветные-датчики дальности; специальные оптические лидары для создания более аккуратной 3D-модели лица.

Эти технологии применяются наиболее часто во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искусственный интеллект на действии

Текущие устройства идентификации лиц немыслимы при отсутствии применения искусственного интеллекта и machine learning. Именно вследствие таким разработкам, как вулкан россии, устройство способно идентифицировать владельца даже при трансформациях внешности: новая стрижка, растительность на лице, очки или грим не становятся препятствием для деблокировки.

Распознавание физиономии

На стартовом шаге алгоритм необходимо мгновенно найти образ лица среди полного снимка с камеры. Для этой задачи используются последовательные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены находить человеческие лица среди множества других объектов.

Пример: метод MTCNN способен распознавать облик даже с частичном закрытии (например, платком или ладонью).

Идентификация важных аспектов

После распознавания лица система, такая как вулкан россии, устанавливает расположение основных точек: уголки глаз, конец носа, края губ и так далее. Часто применяется от 68 до 128 ключевых меток на лицевой области.

Это необходимо для стабилизации картинки: если юзер держит мобильник под наклоном, или наклонил голову, программа исправляет изображение до нормального состояния для дальнейшего анализа.

Создание биометрии модели

Далее нейронная сеть строит сжатое цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след лица длиной от 128 до 512 флоатов.

Такой формат весьма сложно сфальсифицировать: он не удерживает само фото пользователя, а лишь уникальные характеристики его облика, что делает его совершенным для таких систем, как vulkan russia.

Сравнение и осуществление решения

В случае, когда юзер намеревается разблокировать телефон глазами, программа повторяет все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый границу (обычно превышает 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ блокируется.

Привыкание к метаморфозам внешнего вида

Увлекательная черта современных систем — способность самостоятельного обучения. Если ты часто доступаете к смартфон с свежей прической или очками, система постепенно освежает основной образец вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Защита биометрических данных информации.

Множество клиенты боятся держать свои биометрические данные на мобильном устройстве из-за риска потери данных или взлома устройства. Иные организации, например vulkan russia, предоставляют методы для повышения защиты информации клиентов.

Локальное сохранение: Преимущественно устройств сохраняет биометричные шаблоны исключительно в пределах безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не выходят из устройство и закрыты включая производителю.
Шифрование: Все информация сохраняются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Программы внешних разработчиков не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения личности через системный API.

Необходимо отметить важную подробность: в случае, если кто-либо получит физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители осуществляют защиту от неосознанного разблокирования — например, требуют разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются виды идентификации лиц на изображениях?

Сегодня можно определить различить три ключевых метода к выполнению этой задачи:

Софтверное двухмерное определение

Эксплуатируется только лицевая камера без вспомогательных сенсоров дистанции. Подобный подход наблюдается наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота реализации; минимальная стоимость; скоростная функционирование при хорошем освещении.
Минусы: легко ввести в заблуждение снимком; ненадежная деятельность ночью; низкая защищенность.

Оборудование для 3D оцифровка

Применяет ИК камеру + проекционный модуль пикселей + датчики дистанции (Face ID у Apple; аналогичные решения у Huawei Mate).
Преимущества: большая достоверность; нельзя обмануть изображение/видеозапись; постоянная работа в любых условиях освещения.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с дополнением ИИ

Используют комбинацию софтверных методов + техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие товары, например вулкан россии и Google Pixel Face Unlock современных поколений, комбинируют фронтальную камеру c ИК сенсором движения Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями чужих устройств.

Образцы применения разнообразных методов

iPhone серии X/11/12/13/14 применяют только техническое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition в первый раз представил эквивалент Face ID в числе Android.
Samsung Galaxy S10 модель/S20 имеют как программное обеспечение двухмерное идентификацию по фото селфи-камерой, так и датчик глазного ириса.
Huawei Mate20 Pro задействует систему из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Трудности охраны и ложные сигналы

Несмотря на впечатляющий прогресс технологий за последние годы, идеальных механизмов пока не имеется:

Вероятность обмана: Недорогие телефоны легко открываются качественной фотографией хозяина либо видеозаписью с дисплея иного гаджета.
Идентичные двойняшки: Даже самые идеальные устройства могут ошибиться между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
Метаморфозы облика: Резкое утрата веса/увеличение массы тела, пластические операции либо повреждения в некоторых случаях требуют перерегистрации биометрии.
Условия записи: Интенсивная подсветка солнечным светом или глубокая темнота могут понизить аккуратность распознавания признаков.

Ниже некоторые советов по безопасному использованию:

Для важных операций всегда применяйте двухэтапную аутентификацию;
Не включайте опцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
Постоянно обновляйте прошивку программное обеспечение мобильного устройства для предотвращения угроз от новых видов атак;
Включайте опцию “Требовать раскрытых глаз” в тех местах, где она доступна.

В каких областях дополнительно используется технология за исключением смартфонов?

Пускай предмет этой работы касается конкретно смартфонам и планшетам, следует отметить других сферах применения технологии:

Мониторинг входа в рабочих помещениях и многоквартирных зданиях;
Платёжные аппараты банков (“Face Pay”);
Виртуальные паспорта современного поколения;
Системы видеонаблюдения муниципальных сервисов;
Механизация учёта присутствия школ/институтов;
Авторизация пользователей персональных компьютеров/ноутбуков.

Например: В московском метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — нужно лишь пройти через барьер без карты или мобильника! Похожие проекты реализуются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как трансформируется технический процесс сегодня?

Всякий годочек появляются современные концепции для повышения уровня деятельности систем распознавания лиц:

Увеличивается детализация сенсоров — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше риск неточности;
Совершенствуются нейросети — современные структуры модели MobileNetV3 обеспечивают возможность оперативно обучаться новым характеристикам облика владельца прямо на устройстве без отправки данных в облако.
Развиваются методы антиспуфинга — теперь мобильные устройства способны различать настоящие живые лица от фиксированных фото/маскировок по незаметным микродвижениям.
Взаимодействие со смарт-гаджетами — смарт-часы могут автоматически закрыть доступ к телефон, если владелец ушёл далеко.
Возникают комбинированные устройства — к примеру комбинирующие речевую идентификацию + лицо + пальцевой отпечаток.

Здесь, которые тенденции очень востребованы в данный момент:

1) Миниатюризация элементов

Изготовители пытаются сократить габариты прорези (“чёлки”) для сенсоры на дисплее за счёт внедрения маленьких ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на аппарате

Для увеличения приватности всё больше обработки данных выполняется на месте без пересылки данных во сторонний облачный сервис.

3) Стандартизация норм

Гугл интенсивно продвигает норму BiometricPrompt API, чтобы подобные системы, вроде вулкан россия, и любые Android-программы могли взаимодействовать с всеми формами биометрии стандартизированно.

Какое подобрать на сегодня?

Когда тебе важна максимальная защита информации, подбирайте топовые модели с интегрированным ИК-проектором либо ToF-сенсором глубины.

iPhone каждого актуальных поколений
Huawei Companion/P Series линейки
Mix Expert
Vivo X серии
Оппо Обнаружить Икс серии.

Если бюджет ограничен – лучше предпочесть обычным способам защиты (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в вулкан россия, применять только как дополнительную опцию комфорта.

Каким способом улучшить комфорт работы функции?

Есть несколько хитростей для пользователей, кто уже использует разблокировку по лицу:

Периодически обновляйте свою фотографию-шаблон, если значительно трансформируется внешний вид.
Не упускайте из виду очищать линзу передней камеры – загрязнения могут понизить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам запускает фотоаппарат если вы берёте его в руки.
При записи старайтесь удерживать лицевую часть неподвижно напротив камеры не допуская резкого наклона головы.
Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвернулись от экрана.

Возможности прогресса техники

В предстоящие периоды можно предвкушать возникновения полностью дистанционных способов опознания персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + звучание + манера ходьбы + движения рук!

Также вероятно возникновение новых методов охраны конфиденциальности – к примеру, переменное корректировка электронного образца после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых захватывающих техник нашего времени! Она предоставляет интеракцию со смартфоном удобнее чем когда-либо прежде, и такие приложения, как vulkan russia, могут значительно повысить ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как работает эта технология внутри, – сумеете вдумчиво определять свой следующий девайс!