Как действует распознавание лиц в телефонах

Для чего мы останавливаемся на разблокирование по лицевому распознаванию

В прошлые времена идентификация лиц является одной из самых распространённых функций для деблокировки мобильных телефонов. Еще несколько годов назад основная масса юзеров обходились PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением таких технологий, как вулкан россия, нам вполне лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что обуславливает эту конкретную возможность очень нужной? Для начала, это удобно: не нужно запоминать трудные пароли или находить правильный палец в темноте. Кроме того, это мгновенно: современные системы идентифицируют лицо буквально за мгновение. В-третьих, это чувство футуризма — словно в кинофильмах про казино вулкан агентов.

Впрочем за этой на первый взгляд легкостью скрывается весь мир комплексных техник и инженерных решений. Позвольте нам понять, как точно функционирует распознавание лиц в новейших смартфонах, какие бывают технологии, насколько они надёжны и что нас ожидает в будущем.

Краткая история развития инноваций

Идентификация лиц как технология присутствует уже более 50 лет. Первые эксперименты автоматического изучения облика были сделаны еще в 1960-х годы в научных учреждениях США. Тогда вычислительные машины способны были лишь выделять очертания лица и определять расстояния между зрачками и ртом на черно-белых снимках.

Начальные торговые системы стали доступны в 1990-х годах, но они были несовершенны: функционировали медленно и часто давали сбои. Только с развитием искусственных сетей и таких платформ, как вулкан россии, высокопроизводительных мобильных процессоров определение лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять личные разработки.

Основные стадии работы механизма определения

Процесс распознавания лица можно ориентировочно сегментировать на несколько важных этапов:

Обнаружение лиц — устройство выявляет наличие людского образа в изображении.
Определение особенностей — система изучает контуры лица: конфигурацию зрительных органов, обонятельного органа, губ, положение бровей.
Построение шаблона — создаётся уникальный электронный отпечаток (faceprint) на основе выделенных признаков.
Сравнение со эталоном — созданный шаблон сопоставляется с сохранённой при регистрации биометрической информацией владельца.
Принятие выбора — если соответствие достаточно значительное, смартфон разблокируется.

Любой из указанных стадий запрашивает специальных методов и усовершенствований для оперативной работы прямо на устройстве.

Технические компоненты: что находится внутри них

Стандартная передняя камера.

Самый простой легкий способ распознавания облика задействует только фронтальную камеру смартфона. Такой способ внедрён во многочисленных доступных моделях Android-девайсов.

Сильные стороны:

Не нуждается в потребляет внешних датчиков.
Оперативно действует при качественном освещении.

Слабые стороны:

Легко одурачить снимком или видеозаписью.
Неправильно действует при слабом свете или необычных точках зрения.

ИК фотокамера и точечный проектор

Более продвинутые системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика является основой Face ID от Apple.

Каким образом это работает:

Точечный устройство проекции показывает на лицо юзера невидимую решетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 меток).
Инфракрасная камера фиксирует деформацию этой решетки по плоскости лица.
Получается трехмерная карта глубины глубины, которая почти неподвластна для фальсификации обычной фото или маской.

Выигрыши

Надёжная работа даже в полной темноте.
Высокая сопротивляемость к фальсификациям.
Точность идентификации выше 99%.

Добавочные датчики

В некоторых устройствах используются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые определяют время движения луча до предмета и обратно; Цветные-датчики глубины; специальные лазерные лидары для построения более точной 3D-модели лица.

Эти технологии используются наиболее часто во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искусственный интеллект в исполнении

Текущие системы идентификации лиц немыслимы в отсутствие использования artificial intelligence и machine learning. Именно из-за таким разработкам, как вулкан россии, устройство может узнавать пользователя даже при трансформациях внешности: новая причёска, растительность на лице, линзы или макияж не становятся помехой для деблокировки.

Детектирование лица

На начальном этапе система необходимо мгновенно найти образ лица среди полного снимка камеры. Для данной цели используются каскадные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые подготовлены находить человеческие лица среди множества других объектов.

Пример: метод MTCNN в состоянии распознавать физиономию даже с частичном закрытии (например, шарфом или рукой).

Выделение ключевых аспектов

После обнаружения лица система, такая как вулкан россии, устанавливает местоположение главных точек: кончики глаз, конец носа, контуры губ и так далее. Как правило применяется от 68 до 128 главных точек на лицевой поверхности.

Это действие нужно для стабилизации картинки: если юзер удерживает телефон под наклоном, или наклонил голову, программа “выпрямляет” картинку до обычного угла для последующего изучения.

Создание биометрического идентификатора образца

Далее нейросеть строит компактное цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след лица длиной от 128 до 512 флоатов.

Этот формат очень сложно имитировать: он не удерживает само картинку пользователя, а лишь исключительные черты его облика, что делает его идеальным для таких платформ, как vulkan russia.

Сравнение и осуществление выбора

Если человек желает разблокировать мобильник глазами, программа воспроизводит все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый уровень (обычно выше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ блокируется.

Привыкание к изменениям внешнего вида

Увлекательная черта актуальных систем — способность самообучения. Если ты регулярно открываете смартфон с новой укладкой или очками, алгоритм постепенно модернизирует основной шаблон вашего внешности для увеличения точности действия без ухудшения безопасности.

Охрана биометрии информации.

Большинство юзеры беспокоятся хранить свои биометрические данные на смартфоне из-за риска утечки данных или хакерской атаки. Иные компании, например vulkan russia, предлагают методы для повышения безопасности данных юзеров.

Локальное хранение: Преимущественно девайсов хранит биометричные модели только внутри безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают гаджет и закрыты в том числе производителю.
Шифрование: Все информация сберегаются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Приложения внешних разработчиков не обладают прямого доступа к биометрическим данным; они могут лишь требовать подтверждение подтверждения идентичности через системный API.

Необходимо подчеркнуть важную подробность: если кто-либо сможет получить физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие компании внедряют защиту от “слепого” разблокирования — в частности, заставляют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются виды распознавания лиц на изображениях?

Сегодня можно выделить определить 3 главных способа к реализации этой операции:

Программное двухмерное распознавание

Используется только лицевая видеокамера без экстра детекторов дистанции. Такой метод наблюдается обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота реализации; минимальная стоимость; оперативная деятельность при качественном свете.
Минусы: просто ввести в заблуждение снимком; неустойчивая деятельность ночью; недостаточная охрана.

Техническое объёмное сканирование

Задействует ИК видеокамеру + проектор пикселей + датчики глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Преимущества: высокая достоверность; нельзя исказить фото/видео; стабильная деятельность при любом освещении.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные способы с ИИ-дополнением

Задействуют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие продукты, как вулкан россии и Google Pixel Face Unlock новейших версий, комбинируют фронтальную камеру c ИК датчиком мобильности Soli Radar для предотвращения от фальсификаций руками/масками/видеодисплеями чужих устройств.

Примеры эксплуатации разных способов

iPhone линейки X/11/12/13/14 используют только техническое трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition первый раз предложил подобие Face ID среди Android.
Samsung Galaxy S10/S20 имеют как софтверное 2D идентификацию по фото фронталкой, так и сканер ириса глаза.
Huawei Mate20 Pro использует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Проблемы защиты и неверные сигналы

Несмотря на поразительный развитие инноваций за прошедшие лет, совершенных механизмов пока не имеется:

Возможность обмана: Доступные телефоны легко открываются высококачественной снимком владельца либо видеозаписью с экрана другого устройства.
Идентичные близняшки: Даже самые идеальные механизмы могут ошибиться между однояйцевыми близнецами либо родственниками с очень похожей внешностью.
Метаморфозы внешнего вида: Стремительное похудение/увеличение массы тела, пластические операции или травмы в некоторых случаях необходимы для перерегистрации биометрии.
Условия съёмки: Яркая засветка солнцем либо плотная затенение могут снизить точность определения признаков.

Вот несколько рекомендаций по безопасному эксплуатации:

Для важных операций всегда используйте двухэтапную аутентификацию;
Не включайте опцию “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
Систематически обновляйте прошивку смартфона для предотвращения угроз от новых видов атак;
Включайте настройку “Требовать открытых глаз” везде, где она доступна.

В каких областях дополнительно находится применение технологии кроме смартфонов?

Хотя тема нашей работы касается в частности портативным гаджетам, необходимо сказать о альтернативных областях использования технологии:

Управление входа в рабочих помещениях и резиденциях;
Платёжные аппараты банков (“Face Pay”);
Электронные идентификационные документы современного поколения;
Комплексы видеоконтроля городских сервисов;
Автоматизирование отслеживания посещаемости школ/университетов;
Вход участников персональных компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без карты или мобильника! Аналогичные программы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом изменяется технический процесс в наше время?

Любой годик появляются свежие концепции для повышения стандарта деятельности систем распознавания лиц:

Увеличивается чёткость сенсорных устройств — чем больше информации фиксируется фотоаппаратом/датчиками глубины, тем меньше шанс погрешности;
Совершенствуются нейронные сети — передовые конструкции модели MobileNetV3 обеспечивают возможность скоростно обучаться дополнительным характеристикам вида владельца непосредственно на девайсе без отправки данных в облако.
Совершенствуются способы антиспуфинга — теперь мобильные устройства могут отличать подлинные живые лица от фиксированных фото/маскировок по незаметным микродвижениям.
Синхронизация со смарт-гаджетами — интеллектуальные часы могут авто блокировать мобильный телефон, если пользователь отошёл далеко.
Проявляются гибридные механизмы — к примеру объединяющие речевую опознание + физиономию + отпечаток пальца.

Итак, какие тренды очень востребованы сейчас:

1) Миниатюризация деталей

Производители намереваются сократить величину отверстия (“чёлки”) для датчики на дисплее за счёт внедрения компактных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для повышения личной безопасности всё более вычислений выполняется внутри устройства без пересылки информации во внешний облачный сервис.

3) Стандартизация регламентов

Гугл активно продвигает эталон BiometricPrompt API, чтобы подобные системы, вроде вулкан россия, и все Android-программы могли взаимодействовать с всеми формами биометрии единообразно.

Какое подобрать сегодня?

Если вам всем необходима предельная сохранность данных, подбирайте флагманские устройства с вмонтированным ИК-проектором либо ToF-сенсором глубины.

iPhone всех последних версий
Huawei Mate/P Series ряда
Xiaomi Pro
Vivo X модели
Оппо Найти X серии.

Если средства невелик – лучше отдавать предпочтение классическим способам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, применять только как дополнительную возможность комфорта.

Каким способом улучшить практичность использования функции?

Есть пара советов для людей, кто уже пользуется разблокировку через лицо:

Регулярно обновляйте свою фотографию-шаблон, если сильно изменяется внешний вид.
Не забывайте протирать линзу фронтальной камеры – загрязнения могут уменьшить четкость!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам запускает камеру если вы поднимаете его.
При регистрационного процесса постарайтесь удерживать голову ровно перед объектива исключая значительного наклона головы.
Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвели взгляд от экрана.

Будущее развития инноваций

В скоро наступающие периоды можно предвкушать возникновения полностью безконтактных способов опознания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + речь + шаги + манипуляции руками!

Также предполагается развитие свежих способов охраны конфиденциальности – к примеру, изменяющееся модификация диджитал паттерна после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее интересных инноваций нашего периода! Она делает взаимодействие со мобильным устройством проще чем до этого, и такие программы, как vulkan russia, могут значительно улучшить ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы знаете, как функционирует эта технология внутри, – сумеете осознаннее подбирать свой очередной гаджет!