Каким образом действует определение лиц в смартфонах

Каким образом действует определение лиц в смартфонах

Зачем мы предпочитаем разлочивание по лицу

В последние времена распознавание лиц стало одной из наиболее востребованных опций для открытия умных телефонов. Всего некоторые годов ранее большинство использующих обходились пин-кодами, паролями или датчиками отпечатков пальцев. Но при появлением подобных технологий, как Вулкан Платинум, нам достаточно просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект обуславливает эту особенность настолько популярной? Прежде всего, это комфортно: не нужно удерживать в памяти замысловатые пароли или находить нужный палец в мраке. Кроме того, это оперативно: современные системы идентифицируют лицо фактически за доли секунды. В-третьем пункте, это впечатление футуристичности — как будто в фильмах про вулкан платинум зеркало шпионов.

Тем не менее за данной видимой несложностью прячется весь универсум трудных техник и инженерных решений. Позвольте нам разобраться, как именно функционирует идентификация по лицу в новейших смартфонах, какие бывают способы, насколько они надёжны и что нас предстоит.

Короткая хроника эволюции инноваций

Распознавание лиц как методика существует уже более 50 годов. Начальные пробы машинного исследования лиц были осуществлены еще в 1960-х годы в лабораториях США. Тогда ЭВМ могли лишь обозначать силуэты головы и измерять дистанции между зрачками и ртом на черно-белых изображениях.

Первые бизнес платформы стали доступны в 90-х, но они были несовершенны: действовали неспешно и часто давали сбои. Только с прогрессом синтетических сетей и таких систем, как Vulkan Platinum, сильных мобильных микросхем идентификация лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным распознаванием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять свои разработки.

Ключевые этапы функционирования механизма идентификации

Процесс идентификации лица можно ориентировочно поделить на несколько основных этапов:

  1. Обнаружение лица — аппарат определяет существование людского лица в изображении.
  2. Выделение признаков — система исследует черты лица: очертания глаз, обонятельного органа, губ, положение бровей.
  3. Построение шаблона — создаётся уникальный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
  4. Сравнение с эталоном — созданный модель сравнивается со зафиксированной при учёте биометрической данными владельца.
  5. Принятие определения — если совпадение достаточно существенное, смартфон деблокируется.

Всякий из этих шагов запрашивает индивидуальных алгоритмов и улучшений для быстрой работы непосредственно на девайсе.

Железные элементы: что находится внутри них

Обычная передняя камера.

Простейший легкий метод определения облика использует только переднюю видеокамеру мобильного устройства. Данный подход осуществлён во многих бюджетных вариантах Android-девайсов.

Положительные стороны:

  • Не нуждается в дополнительные сенсоров.
  • Шустро работает при достаточном свете.

Недостатки:

  • Просто ввести в заблуждение изображением или видео.
  • Неудачно функционирует при слабом освещении или необычных углах обзора.

ИК фотокамера и пунктирный проекционный аппарат

Более совершенные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология является основой Face ID от Apple.

Каким способом это работает:

  • Точечный проектор проецирует на физиономию использующего невидимую структуру из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
  • Инфракрасная камера регистрирует искривление данной сетки по плоскости лица.
  • Получается 3D карта глубины, что почти что невозможна для фальсификации типичной фото или маской.

Достоинства

  • Надёжная работа даже в полной темноте.
  • Большая сопротивляемость к подделкам.
  • Точность определения более 99%.

Добавочные сенсорные устройства

В отдельных устройствах задействуются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые измеряют время распространения луча до цели и обратно; Цветные-датчики дальности; специальные световые лидары для создания более точной 3D-модели лица.

Эти технологии используются чаще всего во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: синтетический ум в исполнении

Нынешние механизмы распознавания лиц немыслимы в отсутствие использования искусственного интеллекта и machine learning. Именно вследствие таким технологиям, как Vulkan Platinum, устройство может идентифицировать юзера даже при трансформациях облика: новая причёска, борода, очки или макияж не становятся барьером для разблокировки.

Распознавание лица

В первом стадии система должна оперативно распознать ликовое изображение среди всего снимка камеры. Для этой задачи используются многоуровневые классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые «обучены» находить лица людей среди множества других объектов.

Пример: процесс MTCNN в состоянии находить лицо даже с неполном перекрытии (например, шарфом или ладонью).

Идентификация важных аспектов

После обнаружения лица устройство, такая как Vulkan Platinum, устанавливает положение главных точек: уголки глаз, верхушка носа, контуры губ и так далее. Как правило задействуется от 68 до 128 основных меток на лицевой поверхности.

Данное нужно для выравнивания визуала: если юзер удерживает смартфон под углом, или наклонил голову, программа «выпрямляет» изображение до нормального состояния для дальнейшего анализа.

Формирование биометрии образца

Далее искусственная сеть строит компактное числовое представление («эмбеддинг») лица пользователя — своеобразный цифровой след внешности длиной от 128 до 512 чисел с плавающей запятой.

Этот образец крайне затруднительно подделать: он не сохраняет само изображение пользователя, а лишь исключительные особенности его облика, что делает его совершенным для таких площадок, как Вулкан Казино Платинум.

Сравнительный анализ и принятие решения

В случае, когда юзер желает открыть мобильник глазами, программа повторяет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный порог (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, открывается; если нет — доступ блокируется.

Привыкание к изменениям облика

Интересная характеристика современных системы — возможность самостоятельного обучения. Если ты часто разблокируете телефон с свежей прической или оптикой, программа постепенно освежает основной образец вашего внешности для улучшения точности функционирования без ухудшения безопасности.

Защита биометрических данных информации.

Множество пользователи беспокоятся сохранять свои био-идентификационные данные на мобильном устройстве из-за вероятности утечки информации или хакерской атаки. Иные фирмы, например Вулкан Казино Платинум, предлагают варианты для увеличения защиты информации клиентов.

  • Локальное хранение: Основная часть девайсов хранит биометрические шаблоны только внутрь защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из гаджет и недоступны даже создателю.

  • Шифрование: Все сведения хранятся только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

  • Изоляция приложений: Приложения сторонних разработчиков не обладают прямого доступа к биометрическим данным; они могут лишь требовать подтверждение подтверждения личности через системный API.

Необходимо упомянуть важную особенность: в случае, если кто-либо достанет доступ к вашему телефону физически (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество компании внедряют меры безопасности от «слепого» разблокирования — например, просят раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют виды определения лиц?

На сегодняшний день можно выделить выделить 3 основных способа к осуществлению этой функции:

Программируемое плоское распознавание

Применяется только фронтальная камера без вспомогательных сенсоров дистанции. Такой способ используется обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота реализации; умеренная затраты; оперативная функционирование при достаточном свете.
Минусы: просто обмануть снимком; неустойчивая работа ночью; низкая охрана.

Оборудование для 3D сканирование

Задействует инфракрасную видеокамеру + проектор пикселей + сенсоры глубины (Face ID от Apple; аналогичные технологии у Huawei Mate).
Плюсы: большая надёжность; невозможно исказить фото/видео; стабильная функционирование в любых условиях освещения.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана («чёлка»)

Комбинированные методы с интеграцией ИИ

Применяют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для повышения устойчивости к атакам («anti-spoofing»). Например, такие продукты, как Vulkan Platinum и Google Pixel Face Unlock современных версий, объединяют фронталку c инфракрасным сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Примеры применения разнообразных способов

  • iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное 3D-сканирование
  • Xiaomi Mi8 Explorer Edition в первый раз представил эквивалент Face ID в числе Android.
  • Samsung Galaxy S10 модель/S20 обеспечивают как программное плоское идентификацию по снимку селфи-камерой, так и сенсор ириса глаза.
  • Huawei Mate20 Pro использует комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Вопросы защиты и ошибочные сигналы

Несмотря на впечатляющий успехи инноваций за прошедшие лет, идеальных систем пока не наблюдается:

  1. Возможность подвоха: Бюджетные телефоны без труда доступны четкой фотографией владельца или видео с дисплея иного гаджета.
  2. Идентичные близняшки: Даже самые безупречные устройства могут спутать между однояйцевыми близнецами либо семьями с очень схожей внешностью.
  3. Изменения облика: Стремительное похудение/набор веса, хирургические вмешательства или повреждения в некоторых случаях требуют повторной регистрации биометрических данных.
  4. Условия съёмки: Интенсивная засветка солнечным светом либо глубокая тень могут уменьшить точность распознавания признаков.

Здесь несколько рекомендаций для безопасному эксплуатации:

  • Для критически важных операций всегда используйте двухфакторную аутентификацию;
  • Не активируйте опцию «Разблокировка по лицу» на недорогих аппаратах без ИК-сенсоров;
  • Регулярно обновляйте ПО телефона для предотвращения угроз от современных угроз;
  • Включайте опцию «Требовать распахнутых глаз» в тех местах, где она доступна.

Где также находится применение технологии кроме смартфонов?

Несмотря на то, что предмет данной публикации касается именно мобильным устройствам, необходимо сказать о альтернативных областях использования технологии:

  • Мониторинг доступа в офисах и многоквартирных зданиях;
  • Платёжные терминалы финансовых учреждений («Face Pay»);
  • Электронные паспорта последнего образца;
  • Комплексы видеомониторинга муниципальных служб;
  • Автоматизирование отслеживания посещаемости школ/вузов;
  • Авторизация пользователей компьютеров/ноутбуков.

Например: В городском метро уже тестируется система платежа проезда по фейсу («Face Pay») — хватит пройти через турникет без карты или мобильника! Схожие программы осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом трансформируется технология в нынешнее время?

Всякий годочек возникают новые идеи для усовершенствования уровня функционирования систем лицевого распознавания:

  1. Увеличивается чёткость сенсорных устройств — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше вероятность неточности;
  2. Совершенствуются нейросети — современные конструкции типа MobileNetV3 позволяют оперативно осваивать новым характеристикам внешности владельца прямо на устройстве без пересылки информации в облачное хранилище.
  3. Совершенствуются способы антиспуфинга — теперь мобильные устройства умеют распознавать подлинные движущиеся облики от фиксированных снимков/маскировок по микроскопическим движениям кожи.
  4. Синхронизация со умными устройствами — смарт-часы могут самостоятельно закрыть доступ к мобильный телефон, если владелец ушёл далеко.
  5. Проявляются комбинированные системы — например совмещающие аудио аутентификацию + лицо + пальцевой отпечаток.

Здесь, какие направления в особенности актуальны сейчас:

1) Уменьшение деталей

Компании стараются сократить величину прорези («чёлки») для датчики на экране за счёт встраивания компактных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на девайсе

Для увеличения конфиденциальности всё больше расчётов происходит локально без пересылки информации во внешний облачный услугу.

3) Стандартизация стандартов

Гугл активно продвигает стандарт BiometricPrompt API, для того чтобы такие платформы, вроде Вулкан Платинум, и каждые Android-аппы могли работать с всеми формами биометрии стандартизированно.

Какое подобрать сегодня?

Если вам всем нужна максимальная безопасность данных, остановите выбор на флагманские устройства со встроенным ИК-излучателем или же ToF-датчиком глубины.

  • iPhone всех существующих актуальных поколений
  • Huawei Partner/P Series ряда
  • Mi Pro
  • Vivo X линейки
  • Оппо Обнаружить Х серии.

Если бюджет скромен – лучше выбирать классическим способам защиты (PIN-код/сканер отпечатка), а возможность «разблокировка по лицу», такую как в Вулкан Платинум, применять только как дополнительную возможность удобства.

Как повысить комфорт функционирования опции?

Есть пара советов для тех, кто уже пользуется разблокировку через лицо:

  1. Периодически обновляйте свою изображение-шаблон, если сильно трансформируется внешний вид.
  2. Не забывайте очищать объектив фронтальной камеры – пятна могут понизить точность!
  3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам запускает камеру если вы поднимаете его.
  4. Во время записи пытайтесь держать голову прямо перед камеры без значительного наклона головы.
  5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отворачиваетесь от дисплея.

Перспективы развития технологии

В скоро наступающие времена можно предвкушать развития полностью дистанционных способов распознавания персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + речь + манера ходьбы + манипуляции руками!

Также возможно возникновение современных подходов обеспечения личной информации – к примеру, переменное корректировка диджитал образца после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее захватывающих техник нашего времени! Она делает взаимодействие со мобильным устройством комфортнее чем раньше, и такие аппы, как Вулкан Казино Платинум, могут в разы оптимизировать ваш юзерский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы знаете, как устроена эта методика внутри, – сможете более осмысленно определять свой следующий гаджет!