Каким образом действует идентификация лиц в мобильных устройствах

Зачем мы выбираем разлочивание по фейсу

В недавние годы идентификация лиц превратилось в одной из самых популярных возможностей для деблокировки смартфонов. Еще некоторые годов ранее основная масса юзеров довольствовались PIN-кодами, паролями или датчиками отпечатков пальцев. Но при появлением таких технологий, например вулкан россия, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Что обуславливает эту конкретную функцию настолько популярной? Прежде всего, это удобно: не нужно помнить трудные пароли или отыскивать нужный палец в тьме. Также, это оперативно: современные алгоритмы узнают лицо практически за мгновения ока. В-третью очередь, это ощущение футуристичности — будто в фильмах про вулкан казино агентов.

Впрочем за данной на первый взгляд несложностью скрывается весь вселенная сложных технологий и инженерных концепций. Давайте разобраться, как точно действует распознавание лиц в новейших мобильных телефонах, какие бывают методы, насколько они защищены и что нас предстоит.

Короткая хроника развития технологии

Идентификация лиц как техника существует уже более пятидесяти годов. Начальные эксперименты машинного исследования лиц были осуществлены еще в 1960-х годах в научных учреждениях США. Тогда вычислительные машины способны были лишь выделять силуэты черепа и измерять дистанции между глазами и устами на монохромных изображениях.

Изначальные бизнес платформы появились в 1990-х годах, но они были далеки от совершенства: действовали неспешно и нередко ошибались. Только с развитием синтетических сетей и таких площадок, как вулкан россии, мощных мобильных чипов распознавание лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие стали внедрять личные разработки.

Основные этапы функционирования механизма идентификации

Процесс определения лица можно примерно разделить на несколько важных этапов:

1. Обнаружение лица — аппарат выявляет присутствие человеческого лица в кадре.
2. Выделение характеристик — система анализирует особенности облика: конфигурацию зрительных органов, носа, губ, позицию бровей.
3. Построение модели — создаётся неповторимый виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со образцом — созданный шаблон сверяется со записанной при регистрации биометрической данными владельца.
5. Принятие определения — если сходство достаточно значительное, смартфон деблокируется.

Всякий из данных шагов запрашивает особых процедур и усовершенствований для быстрой работы прямо на устройстве.

Железные элементы: что скрыто в их недрах

Обычная фронтальная камера.

Простейший легкий метод идентификации физиономии применяет только лицевую камеру смартфона мобильного устройства. Подобный способ внедрён во различных доступных версиях Android-устройств.

Положительные стороны:

• Не нуждается в потребляет внешних сенсоров.
• Быстро работает при достаточном освещённости.

Отрицательные стороны:

• Легко одурачить фотографией или видео.
• Неправильно работает при плохом свете или нестандартных ракурсах.

Инфракрасная фотокамера и точечный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология составляет базу Face ID от Apple.

Каким способом это работает:

• Точечный проектор показывает на облик использующего невидимую решетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 меток).
• Инфракрасная камера записывает изменение формы этой сетки по поверхности лица.
• Создаётся 3D карта глубины глубины, которая почти что неосуществима для фальсификации обычной фото или маскировкой.

Достоинства

• Надёжная функционирование даже в полной неосвещённости.
• Сильная защита к подделкам.
• Точность распознавания свыше 99%.

Добавочные сенсорные устройства

В некоторых девайсах применяются также дополнительные сенсоры: ToF (Time-of-Flight), которые измеряют период прохождения луча до предмета и обратно; RGB-датчики глубины; специальные лазерные дальномеры для построения более точной 3D-модели лица.

Эти технологии используются чаще всего во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: синтетический разум в действии

Современные системы опознания лиц невозможны в отсутствие эксплуатации artificial intelligence и машинного обучения. Именно из-за таким разработкам, как вулкан россии, устройство способно распознавать пользователя даже при изменениях внешности: новая стрижка, борода, очки или косметика не становятся барьером для разблокировки.

Детектирование лица

При первом этапе программа необходимо быстро найти образ лица в пределах целого кадра с камеры. Для этой задачи применяются последовательные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые натренированы распознавать лица людей среди множества других объектов.

Пример: метод MTCNN может обнаруживать физиономию даже при частичном перекрытии (например, платком или ладонью).

Идентификация важных точек

После распознавания лица устройство, такая как вулкан россии, определяет местоположение главных точек: уголки глаз, конец носа, края губ и так далее. Как правило используется от 68 до 128 основных точек на лицевой области.

Данное необходимо для стабилизации визуала: если юзер держит телефон под наклоном, или наклонил голову, программа исправляет картинку до обычного угла для последующего изучения.

Создание биометрического модели

Далее нейронная сеть строит сжатое числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 чисел с плавающей запятой.

Данный образец очень затруднительно сфальсифицировать: он не удерживает само изображение юзера, а лишь особенные черты его внешности, что делает его совершенным для таких платформ, как vulkan russia.

Сопоставление и принятие выбора

Когда человек хочет разлочить телефон глазами, программа осуществляет все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый границу (обычно больше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ запрещается.

Привыкание к изменениям облика

Увлекательная особенность актуальных систем — возможность самостоятельного обучения. Если ты постоянно доступаете к смартфон с обновленной стрижкой или оптикой, программа постепенно модернизирует эталонный образец вашего облика для увеличения точности действия без ухудшения безопасности.

Охрана биометрии информации.

Большинство пользователи опасаются держать свои биометрические данные на смартфоне из-за вероятности утечки информации или взлома гаджета. Некоторые организации, такие как vulkan russia, предоставляют решения для повышения безопасности сведений юзеров.

• Локальное сохранение: Большинство устройств хранит биометрические модели только внутрь защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют гаджет и не доступны даже производителю.

• Шифрование: Все данные сберегаются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих разработчиков не обладают непосредственного доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Следует упомянуть значимую деталь: если какой-то человек достанет физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство производители внедряют систему защиты от “слепого” разблокирования — в частности, требуют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают виды определения лиц на изображениях?

На сегодняшний день можно определить различить три основных метода к реализации этой задачи:

Программное 2D распознавание

Эксплуатируется только лицевая камера без вспомогательных датчиков глубины. Такой подход встречается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность воплощения; низкая цена; скоростная работа при достаточном освещении.
Минусы: легко ввести в заблуждение фотографией; ненадежная работа ночью; недостаточная безопасность.

Аппаратное 3D сканирование

Применяет инфракрасную видеокамеру + проектор точек + датчики глубины (Face ID от Apple; аналогичные технологии у Huawei Mate).
Преимущества: большая надёжность; не получится исказить фото/видео; стабильная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с дополнением ИИ

Задействуют комбинацию программируемых методов + аппаратную обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например вулкан россии и Google Pixel Face Unlock последних версий, объединяют фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Примеры использования разнообразных методов

• iPhone серии X/11/12/13/14 используют только аппаратное трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые внедрил аналог Face ID среди Android.
• Samsung Galaxy S10 версия/S20 обеспечивают как софтверное двухмерное распознавание по изображению фронталкой, так и сенсор глазного ириса.
• Huawei Mate20 Pro использует набор из ИК-освещения + Dot Projector + ToF-датчик

Проблемы защиты и ложные срабатывания

Несмотря на впечатляющий успехи техники за последние годы, совершенных систем пока не имеется:

1. Шанс подвоха: Недорогие телефоны без труда доступны качественной фотографией пользователя или же видео с экрана другого устройства.
2. Идентичные близнецы: Даже самые совершенные устройства могут спутать между монозиготными близнецами либо родичами с очень похожей внешностью.
3. Метаморфозы внешности: Внезапное снижение веса/набор веса, хирургические вмешательства или травмы порой требуют повторной регистрации биометрии.
4. Условия фотографирования: Яркая засветка солнцем или же глубокая темнота могут понизить аккуратность определения признаков.

Ниже пара советов по защищённому эксплуатации:

• Для важных операций всегда применяйте двухэтапную аутентификацию;
• Не активируйте возможность “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Регулярно обновляйте ПО мобильного устройства для обеспечения безопасности от актуальных атак;
• Включайте настройку “Требовать раскрытых глаз” везде, где она имеется.

В каких местах ещё находится применение технология кроме мобильных телефонов?

Хотя тема нашей публикации сосредоточена на именно мобильным устройствам, стоит упомянуть о других сферах применения технологии:

• Мониторинг входа в офисах и жилых домах;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Цифровые идентификационные документы нового типа;
• Установки видеомониторинга городских служб;
• Автоматизация регистрации присутствия образовательных учреждений/вузов;
• Вход юзеров ПК/ноутбуков.

Например: В столичном метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без пластика или мобильника! Аналогичные программы развиваются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом меняется технический процесс сегодня?

Любой годочек появляются современные идеи для повышения уровня работы систем лицевого распознавания:

1. Увеличивается чёткость сенсорных устройств — чем больше деталей фиксируется фотоаппаратом/глубинными сенсорами, тем меньше риск погрешности;
2. Развиваются нейросети — новейшие структуры типа MobileNetV3 дают возможность быстро осваивать новым характеристикам облика владельца прямо на устройстве без отправки данных в облако.
3. Совершенствуются технологии антиспуфинга — теперь мобильные устройства умеют различать подлинные анимированные лица от фиксированных снимков/масок по незаметным микродвижениям.
4. Интеграция со интеллектуальными приборами — смарт-часы могут самостоятельно закрыть доступ к смартфон, если обладатель отошёл далеко.
5. Появляются комбинированные устройства — например объединяющие аудио опознание + облик + отпечаток пальца.

Вот, которые тенденции в особенности популярны сейчас:

1) Миниатюризация деталей

Компании пытаются сократить величину отверстия (“чёлки”) под сенсоры на дисплее за счёт встраивания маленьких ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для увеличения конфиденциальности всё больше обработки данных происходит на месте без отправки информации во сторонний облачный услугу.

3) Упорядочивание норм

Гугл интенсивно продвигает стандарт BiometricPrompt API, с целью чтобы такие площадки, например как вулкан россия, и все Android-программы могли работать с всеми формами биометрии стандартизированно.

Что выбрать на сегодня?

В случае если вам всем важна предельная сохранность данных, подбирайте топовые аппараты с вмонтированным ИК-проектором либо ToF-сенсором глубины.

• iPhone всех существующих актуальных моделей
• Huawei Partner/P линейки
• Xiaomi Professional
• Vivo X модели
• Oppo Обнаружить Икс серии.

Если финансы ограничен – лучше отдавать предпочтение традиционным средствам защиты (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в вулкан россия, использовать только как дополнительную возможность комфорта.

Как увеличить комфорт работы опции?

Есть некоторые советов для тех, кто уже применяет разблокировку через лицо:

1. Часто меняйте свою изображение-шаблон, если кардинально изменяется внешний вид.
2. Не пренебрегайте чистить объектив фронтальной камеры – пятна могут понизить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам активирует фотоаппарат если вы поднимаете его.
4. Во время записи старайтесь держать голову ровно перед видеоустройства не допуская сильного наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отворачиваетесь от экрана.

Будущее развития техники

В предстоящие времена можно предвкушать возникновения полностью безконтактных способов опознания человека сразу по нескольким биометрическим параметрам одновременно: лицо + звучание + шаги + манипуляции руками!

Также возможно развитие новых подходов охраны приватности – скажем, изменяющееся изменение цифрового образца после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень захватывающих инноваций нашего периода! Она обеспечивает общение со смартфоном комфортнее чем когда-либо прежде, и такие программы, как vulkan russia, могут в разы оптимизировать ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы осведомлены, как устроена эта система в деталях, – сможете более осмысленно подбирать свой будущий девайс!