Как функционирует идентификация лицевых образов в телефонах

Зачем мы останавливаемся на разлочивание по лицу

В последние годы распознавание лиц превратилось в одной из самых распространённых возможностей для разблокировки мобильных телефонов. Всего пару годков ранее основная часть использующих обходились пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением таких технологий, например вулкан россия, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какая вещь обуславливает эту конкретную особенность такой востребованной? Прежде всего, это практично: не нужно удерживать в памяти сложные пароли или находить правильный палец в темноте. Кроме того, это мгновенно: современные алгоритмы распознают лицо фактически за доли секунды. В-третьих, это ощущение футуризма — будто в кинофильмах про vulkan russia агентов.

Однако за такой видимой простотой таится полный вселенная комплексных техник и инженерных решений. Давайте понять, как точно работает распознавание лиц в новейших смартфонах, какие применяются технологии, насколько они защищены и что нас ожидает в будущем.

Короткая повествование эволюции инноваций

Распознавание лиц как технология существует уже более 50 лет. Изначальные эксперименты машинного анализа лиц были предприняты еще в 1960-х годы в лабораториях США. Тогда компьютеры способны были лишь определять контуры лица и измерять промежутки между очами и губами на монохромных изображениях.

Первые бизнес платформы появились в 90-х, но они были далеки от совершенства: действовали неспешно и нередко ошибались. Только с развитием синтетических сетей и таких площадок, как вулкан россии, мощных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным распознаванием лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали интегрировать свои решения.

Ключевые шаги действия устройства идентификации

Процесс распознавания лица можно условно разделить на несколько важных этапов:

1. Обнаружение лица — аппарат выявляет существование людского лица в кадре.
2. Извлечение характеристик — механизм исследует контуры облика: форму зрительных органов, обонятельного органа, губ, положение надбровных дуг.
3. Построение шаблона — создаётся уникальный виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с стандартом — созданный образец сопоставляется с записанной при регистрации биометрической информацией владельца.
5. Принятие определения — если сходство достаточно значительное, смартфон открывается.

Всякий из этих стадий нуждается в индивидуальных алгоритмов и усовершенствований для скорой работы прямо на устройстве.

Технические элементы: что скрыто внутри них

Типичная передняя камера.

Самый несложный вариант идентификации физиономии задействует только переднюю камеру смартфона мобильного устройства. Данный метод внедрён во различных доступных моделях Android-устройств.

Положительные стороны:

• Не нуждается в внешних датчиков.
• Шустро работает при хорошем освещении.

Недостатки:

• Легко обмануть фотографией или видео.
• Неудачно действует при низком свете или нестандартных углах обзора.

ИК камера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология является основой Face ID от Apple.

Каким способом это функционирует:

• Точечный устройство проекции отображает на облик использующего невидимую сетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 пятен).
• Инфракрасная камера регистрирует деформацию этой сетки по поверхности физиономии.
• Создаётся трехмерная карта глубины глубины, которая почти неосуществима для подделки типичной фотографией или маской.

Выигрыши

• Надёжная деятельность даже в полной неосвещённости.
• Сильная устойчивость к фальсификациям.
• Точность идентификации более 99%.

Дополнительные датчики

В отдельных аппаратах задействуются также дополнительные датчики: ToF (Time-of-Flight), которые фиксируют период прохождения луча до цели и обратно; Трехцветные-датчики дальности; специальные оптические дальномеры для формирования более детализированной 3D-модели физиономии.

Эти разработки применяются чаще всего во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искусственный разум на работе

Текущие устройства распознавания физиономий неосуществимы без применения искусственного интеллекта и машинного обучения. Именно благодаря таким разработкам, как вулкан россии, гаджет способно идентифицировать пользователя даже при метаморфозах внешности: новая причёска, борода, очки или макияж не становятся помехой для разблокировки.

Обнаружение лиц

На стартовом шаге система необходимо быстро обнаружить лицо внутри полного снимка с камеры. Для этой задачи используются многоуровневые классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые подготовлены идентифицировать лиц человека среди множества других объектов.

Пример: алгоритм MTCNN может распознавать лицо даже с частичном перекрытии (например, шарфом или ладонью).

Определение основных точек

После идентификации лица устройство, такая как вулкан россии, определяет положение ключевых точек: кончики глаз, конец носа, контуры губ и так далее. Как правило применяется от 68 до 128 главных маркеров на лицевой области.

Это действие необходимо для выравнивания визуала: если пользователь держит смартфон под наклоном, или наклонил головку, программа исправляет изображение до обычного угла для дальнейшего анализа.

Формирование биометрического идентификатора образца

Далее нейронная сеть строит уплотненное цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Такой образец крайне затруднительно подделать: он не сохраняет непосредственно фото юзера, а лишь особенные характеристики его вида, что делает его совершенным для таких систем, как vulkan russia.

Сравнение и осуществление решения

Когда пользователь хочет разлочить смартфон глазами, механизм воспроизводит все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый границу (обычно выше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ не предоставляется.

Привыкание к метаморфозам внешности

Интересная характеристика современных систем — возможность самообучения. Если ты постоянно разблокируете смартфон с свежей прической или очками, алгоритм постепенно обновляет базовый модель вашего внешности для увеличения точности действия без ухудшения безопасности.

Защита биометрических данных информации.

Множество клиенты опасаются держать свои биометрические данные на мобильном устройстве из-за угрозы утечки информации или взлома устройства. Определенные организации, например vulkan russia, предлагают решения для улучшения безопасности сведений пользователей.

• Локальное хранение: Основная часть устройств хранит био-идентификационные образцы исключительно внутрь безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют аппарат и не доступны в том числе создателю.

• Шифрование: Все данные хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения сторонних девелоперов не обладают непосредственного доступа к биометрическим; они могут лишь требовать подтверждение верификации идентичности через системный API.

Следует отметить значимую особенность: если кто-то достанет доступ к вашему телефону физически (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие компании осуществляют защиту от “слепого” разблокирования — например, заставляют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются виды определения лиц на изображениях?

На сегодняшний день можно выделить различить 3 основных подхода к выполнению этой задачи:

Программируемое плоское идентификация

Используется только фронтальная видеокамера без вспомогательных датчиков глубины. Этот метод наблюдается чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность осуществления; низкая затраты; скоростная функционирование при качественном свете.
Минусы: просто ввести в заблуждение фотографией; нестабильная деятельность ночью; слабая безопасность.

Аппаратное трёхмерное оцифровка

Задействует ИК камеру + проектор пикселей + датчики дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Достоинства: значительная достоверность; не получится исказить фото/видео; стабильная функционирование при любом освещении.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с интеграцией ИИ

Применяют комбинацию программных методов + аппаратно-техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие товары, как вулкан россии и Google Pixel Face Unlock последних поколений, комбинируют фронтальную камеру c ИК датчиком движения Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями чужих устройств.

Иллюстрации использования разных методов

• iPhone линейки X/11/12/13/14 применяют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз предложил аналог Face ID среди Android.
• Samsung Galaxy S10/S20 обеспечивают как программное 2D идентификацию по изображению фронтальной камерой, так и датчик ириса глаза.
• Huawei Mate20 Pro применяет набор из ИК-освещения + Dot Projector + ToF-датчик

Вопросы охраны и ложные тревоги

Несмотря на поразительный прогресс техники за последние лет, идеальных механизмов пока не существует:

1. Шанс мошенничества: Доступные телефоны без труда открываются высококачественной фотографией хозяина либо видеозаписью с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые совершенные системы могут ошибиться между монозиготными близнецами либо семьями с очень схожей внешностью.
3. Трансформации внешности: Стремительное утрата веса/набор веса, косметические процедуры или повреждения в некоторых случаях требуют перерегистрации биометрических данных.
4. Условия записи: Сильная подсветка солнечным светом либо интенсивная затенение могут снизить аккуратность распознавания признаков.

Ниже несколько подсказок для защищённому использованию:

• Для критически важных операций всегда применяйте дополнительную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Систематически апгрейдите прошивку телефона для предотвращения угроз от современных угроз;
• Включайте функцию “Требовать открытых глаз” в тех местах, где она есть.

В каких областях дополнительно используется технология за исключением мобильных телефонов?

Хотя предмет данной работы сосредоточена на в частности смартфонам и планшетам, следует отметить других сферах применения технологии:

• Мониторинг входа в офисах и жилых домах;
• Платёжные терминалы банков (“Face Pay”);
• Электронные идентификационные документы нового поколения;
• Установки видеонаблюдения муниципальных подразделений;
• Автоматизация регистрации явки школ/университетов;
• Аутентификация участников компьютеров/ноутбуков.

Например: В столичном метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без карты или телефона! Похожие проекты реализуются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким образом меняется технология сегодня?

Всякий годочек появляются свежие идеи для повышения стандарта функционирования систем идентификации лиц:

1. Увеличивается разрешение сенсоров — чем больше информации фиксируется фотоаппаратом/глубинными сенсорами, тем меньше вероятность погрешности;
2. Развиваются нейросети — современные архитектуры вида MobileNetV3 обеспечивают возможность быстро адаптироваться к новым особенностям внешности владельца непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Улучшаются технологии антиспуфинга — теперь смартфоны способны отличать подлинные живые лица от статичных фото/маскировок по мельчайшим микродвижениям.
4. Интеграция со смарт-гаджетами — умные часы могут авто заблокировать смартфон, если пользователь ушёл далеко.
5. Возникают гибридные механизмы — к примеру совмещающие речевую аутентификацию + физиономию + дактилоскопический след.

Вот, которые направления очень актуальны сейчас:

1) Сокращение деталей

Компании намереваются минимизировать величину прорези (“чёлки”) под датчики на дисплее за счёт интеграции компактных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для повышения конфиденциальности всё больше вычислений выполняется внутри устройства без отправки информации во дополнительный облачный сервис.

3) Унификация норм

Google энергично продвигает эталон BiometricPrompt API, с целью чтобы такие платформы, как вулкан россия, и все Android-программы могли взаимодействовать с любыми видами биометрии единообразно.

Какое подобрать сегодня?

Когда вам всем необходима предельная сохранность информации, остановите выбор на флагманские модели с интегрированным ИК-проектором или же ToF-сенсором глубины.

• iPhone всех существующих новейших моделей
• Huawei Partner/P Series серии
• Mi Expert
• Vivo X модели
• Оппо Найти Х серии.

Если финансы ограничен – лучше отдавать предпочтение традиционным способам защиты (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную возможность комфорта.

Каким образом увеличить комфорт использования функции?

Есть некоторые советов для тех, кто уже применяет функцию распознавания лица:

1. Часто меняйте свою фотографию-шаблон, если значительно меняется внешний вид.
2. Не упускайте из виду очищать линзу передней камеры – пятна могут понизить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам включает камеру когда вы берёте его в руки.
4. В процессе записи постарайтесь удерживать лицо неподвижно напротив объектива не допуская значительного наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвернулись от дисплея.

Будущее эволюции техники

В предстоящие периоды можно ожидать появления полностью бесконтактных способов опознания человека сразу по нескольким биометрическим данным параметрам одновременно: облик + звучание + манера ходьбы + движения рук!

Также возможно появление свежих подходов охраны личной информации – например, изменяющееся модификация электронного шаблона после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – единственная из наиболее увлекательных технологий нашего времени! Она обеспечивает общение со смартфоном удобнее чем раньше, и такие программы, как vulkan russia, могут значительно улучшить ваш опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы осведомлены, как устроена эта система в деталях, – сможете вдумчиво подбирать свой очередной гаджет!