Как работает определение лиц в мобильных устройствах

Зачем мы предпочитаем разлочивание по лицу

В недавние годы идентификация лиц превратилось в одной из самых популярных опций для деблокировки смартфонов. Лишь некоторые годов назад большинство юзеров обходились пин-кодами, паролями или сканерами отпечатков пальцев. Но при появлением таких технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какой аспект превращает данную особенность такой востребованной? Во-первых, это комфортно: не нужно помнить трудные пароли или отыскивать нужный палец в мраке. Кроме того, это быстро: современные системы распознают лицо практически за мгновения ока. В-третьем пункте, это чувство будущего — будто в кинолентах про казино вулкан агентов.

Тем не менее за такой видимой несложностью прячется целый универсум трудных технологий и инженерных разработок. Давайте разобраться, как конкретно функционирует фейсканирование в актуальных мобильных телефонах, какие бывают технологии, насколько они надёжны и что нас предстоит.

Короткая повествование эволюции инноваций

Идентификация лиц как технология существует уже более пятидесяти годов. Начальные попытки машинного изучения облика были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры умели лишь выделять силуэты головы и определять дистанции между очами и устами на ахроматических изображениях.

Изначальные торговые платформы появились в 90-х, но они были несовершенны: действовали неспешно и часто ошибались. Только с прогрессом нейронных сетей и таких площадок, как вулкан россии, сильных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали внедрять свои решения.

Основные стадии действия системы идентификации

Процесс идентификации лица можно примерно сегментировать на несколько важных этапов:

1. Идентификация лица — устройство определяет наличие людского лица в кадре.
2. Определение признаков — система анализирует особенности облика: конфигурацию зрительных органов, обонятельного органа, губ, позицию надбровных дуг.
3. Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со образцом — созданный модель сопоставляется со сохранённой при внесении биометрической данными владельца.
5. Принятие решения — если сходство достаточно высокое, смартфон открывается.

Каждый из данных этапов запрашивает специальных алгоритмов и оптимизаций для скорой работы непосредственно на девайсе.

Технические элементы: что находится в их недрах

Типичная селфи камера.

Самый простой легкий метод распознавания лица применяет только лицевую камеру смартфона. Подобный метод осуществлён во многих бюджетных вариантах Android-девайсов.

Преимущества:

• Необходимо нуждается в дополнительных датчиков.
• Шустро действует при достаточном освещении.

Минусы:

• Легко ввести в заблуждение изображением или видео.
• Неудачно действует при слабом освещении или нестандартных углах обзора.

ИК фотокамера и пунктирный проектор

Более усовершенствованные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика лежит в основе Face ID от Apple.

Каким образом это действует:

• Точечный устройство проекции отображает на облик юзера невидимую структуру из тысяч инфракрасных меток (например, Face ID применяет около 30 000 точек).
• ИК устройство фиксирует искривление этой сетки по поверхности физиономии.
• Формируется трёхмерная карта глубинности, что практически неподвластна для фальсификации типичной фото или маскировкой.

Достоинства

• Надёжная деятельность даже в полной тьме.
• Сильная сопротивляемость к подделкам.
• Точность идентификации выше 99%.

Дополнительные сенсоры

В отдельных аппаратах используются также экстра сенсорные устройства: ToF (Time-of-Flight), которые фиксируют время распространения луча до предмета и обратно; Трехцветные-датчики глубины; специальные световые лидары для построения более детализированной 3D-модели физиономии.

Эти технологии используются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искуственный разум на действии

Нынешние устройства идентификации лиц немыслимы при отсутствии использования ИИ и машинного обучения. Именно из-за таким технологиям, как вулкан россии, аппарат может идентифицировать юзера даже при метаморфозах облика: новая причёска, щетина, линзы или косметика не становятся барьером для разблокировки.

Детектирование лица

При стартовом стадии система необходимо быстро обнаружить лицо внутри полного изображения с камеры. Для данной цели задействуются многоуровневые классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые подготовлены находить человеческие лица среди множества других объектов.

Пример: процесс MTCNN способен обнаруживать облик даже при частичном перекрытии (например, платком или рукой).

Идентификация важных точек

После обнаружения лица устройство, такая как вулкан россии, вычисляет местоположение главных точек: уголки глаз, верхушка носа, границы губ и так далее. Как правило задействуется от 68 до 128 главных маркеров на лицевой поверхности.

Это действие требуется для стабилизации визуала: если человек держит мобильник под наклоненным, или повернул голову, программа корректирует картинку до нормального состояния для дальнейшего анализа.

Формирование биометрии шаблона

Далее искусственная сеть строит компактное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 вещественных чисел.

Данный формат весьма трудно подделать: он не удерживает непосредственно картинку пользователя, а лишь исключительные черты его внешности, что делает его оптимальным для таких систем, как vulkan russia.

Сопоставление и вынесение выбора

Когда пользователь намеревается разблокировать мобильник глазами, механизм повторяет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый порог (обычно превышает 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ не предоставляется.

Приспособление к метаморфозам внешнего вида

Занимательная черта нынешних системы — способность самостоятельного обучения. Если вы часто разблокируете телефон с новой стрижкой или очками, программа постепенно обновляет базовый образец вашего облика для увеличения точности действия без снижения уровня безопасности.

Безопасность биометрических данных данных.

Многие юзеры боятся хранить свои био-идентификационные данные на телефоне из-за вероятности потери данных или взлома гаджета. Иные организации, например vulkan russia, предлагают методы для увеличения защиты данных юзеров.

• Локальное хранение: Большинство аппаратов сохраняет биометрические шаблоны только в пределах безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают устройство и не доступны даже создателю.

• Шифрование: Все данные сохраняются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы сторонних девелоперов не обладают непосредственного доступа к биометрическим данным; они могут лишь требовать факт верификации личности через системный API.

Стоит подчеркнуть значимую подробность: если кто-то сможет получить доступ к вашему телефону физически (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство изготовители внедряют меры безопасности от автоматического разблокирования — например, требуют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают виды определения лиц?

В настоящее время можно выделить выделить три главных способа к выполнению этой задачи:

Софтверное двухмерное идентификация

Применяется только лицевая камера без дополнительных датчиков дистанции. Подобный метод наблюдается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота реализации; умеренная затраты; скоростная работа при хорошем освещении.
Минусы: просто ввести в заблуждение снимком; неустойчивая работа ночью; слабая защищенность.

Оборудование для трёхмерное сканирование

Задействует ИК видеокамеру + проекционный модуль пикселей + датчики глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Достоинства: большая надежность; невозможно исказить изображение/видеозапись; стабильная деятельность в любых условиях освещения.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с интеграцией ИИ

Используют комбинацию программных методов + аппаратно-техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие товары, как вулкан россии и Google Pixel Face Unlock последних версий, комбинируют фронтальную камеру c ИК сенсором мобильности Soli Radar для защиты от подделок руками/масками/видеодисплеями чужих устройств.

Образцы использования различных техник

• iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил эквивалент Face ID в числе Android.
• Samsung Galaxy S10/S20 поддерживают как софтверное плоское распознавание по фото селфи-камерой, так и сканер глазного ириса.
• Huawei Mate20 Pro применяет комплекс из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Вопросы безопасности и ошибочные сигналы

Несмотря на поразительный успехи техники за прошедшие годы, идеальных систем пока не имеется:

1. Вероятность подвоха: Доступные смартфоны просто “разблокируются” четкой фотографией владельца либо видео с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые идеальные устройства могут ошибиться между монозиготными близнецами либо семьями с очень аналогичной внешностью.
3. Изменения облика: Внезапное утрата веса/увеличение массы тела, косметические процедуры или повреждения иногда требуют перерегистрации биометрических данных.
4. Условия фотографирования: Сильная освещённость солнцем либо плотная затенение могут снизить точность распознавания признаков.

Ниже несколько советов для защищённому эксплуатации:

• Для значимых операций всегда используйте двухфакторную аутентификацию;
• Не запускайте функцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Систематически апгрейдите программное обеспечение мобильного устройства для обеспечения безопасности от актуальных атак;
• Включайте функцию “Требовать открытых глаз” в тех местах, где она есть.

В каких областях также применяется технология помимо смартфонов?

Хотя основная мысль нашей статьи посвящена в частности смартфонам и планшетам, необходимо сказать о альтернативных областях использования технологии:

• Управление входа в деловых центрах и жилых домах;
• Платёжные терминалы банков (“Face Pay”);
• Цифровые удостоверения личности последнего поколения;
• Комплексы видеомониторинга муниципальных подразделений;
• Автоматизация учёта явки учебных заведений/вузов;
• Вход пользователей персональных компьютеров/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через барьер без пластика или телефона! Похожие программы реализуются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом меняется техпроцесс в нынешнее время?

Всякий годик появляются новые мысли для улучшения стандарта функционирования систем идентификации лиц:

1. Увеличивается чёткость сенсоров — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше шанс ошибки;
2. Совершенствуются искусственные интеллекты — современные структуры вида MobileNetV3 позволяют оперативно обучаться дополнительным особенностям внешности пользователя напрямую на гаджете без отправки данных в облако.
3. Развиваются технологии антиспуфинга — теперь телефоны способны различать реальные движущиеся облики от статичных фото/маскировок по незаметным движениям кожи.
4. Синхронизация со умными устройствами — смарт-часы могут автоматически закрыть доступ к телефон, если пользователь отошёл далеко.
5. Проявляются смешанные механизмы — например совмещающие речевую опознание + лицо + пальцевой отпечаток.

Итак, какие направления особенно популярны в данный момент:

1) Сокращение деталей

Изготовители намереваются уменьшить величину выреза (“чёлки”) для датчики на экране за счёт встраивания компактных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для улучшения личной безопасности всё больше обработки данных происходит на месте без отправки данных во дополнительный облачный услугу.

3) Упорядочивание норм

Google интенсивно пропагандирует эталон BiometricPrompt API, чтобы аналогичные системы, как вулкан россия, и все Android-аппы были совместимы с различными типами биометрии единообразно.

Какое решить сегодня?

Если вам всем важна предельная защита информации, подбирайте флагманские модели с вмонтированным ИК-излучателем или ToF-сенсором глубины.

• iPhone всех актуальных версий
• Huawei Partner/Series P линейки
• Xiaomi Professional
• Vivo X линейки
• Oppo Обнаружить Х линейки.

Если бюджет невелик – лучше предпочесть традиционным средствам безопасности (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную опцию комфорта.

Каким способом улучшить комфорт функционирования возможности?

Есть пара лайфхаков для тех, кто уже пользуется разблокировку по лицу:

1. Часто обновляйте свою фото-шаблон, если кардинально трансформируется внешность.
2. Не упускайте из виду чистить объектив передней камеры – разводы могут снизить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам запускает камеру когда вы поднимаете его.
4. В процессе регистрации старайтесь держать лицевую часть ровно напротив видеоустройства не допуская сильного наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отворачиваетесь от экрана.

Будущее развития техники

В предстоящие периоды можно ожидать появления полностью дистанционных способов идентификации персоны сразу по нескольким биометрическим данным параметрам одновременно: облик + голос + манера ходьбы + манипуляции руками!

Также предполагается появление современных способов обеспечения конфиденциальности – например, динамическое корректировка цифрового образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – единственная из наиболее захватывающих технологий нашего времени! Она делает взаимодействие со смартфоном проще чем когда-либо прежде, и такие аппы, как vulkan russia, могут значительно улучшить ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как устроена эта система в деталях, – будете в состоянии более осмысленно определять свой следующий устройство!