Каким способом действует распознавание лиц в смартфонах

Зачем мы останавливаемся на разблокировку по лицевому распознаванию

В недавние времена распознавание лиц является одной из самых распространённых возможностей для открытия умных телефонов. Лишь пару годов тому назад большинство использующих обходились пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением таких технологий, например вулкан россия, нам вполне лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Что превращает эту возможность такой востребованной? Во-первых, это удобно: не нужно запоминать замысловатые пароли или искать верный палец в темноте. Также, это мгновенно: современные программы распознают лицо фактически за мгновение. В-третьем пункте, это ощущение футуристичности — как будто в кинолентах про вулкан автомат разведчиков.

Тем не менее за данной на первый взгляд легкостью прячется весь вселенная сложных технологий и инженерных разработок. Попробуем исследовать, как именно работает распознавание лиц в актуальных мобильных телефонах, какие существуют методы, насколько они надёжны и что нас ожидает в будущем.

Сжатая повествование прогресса техники

Распознавание лиц как технология имеется уже более пятидесяти годов. Первые пробы автоматизированного анализа лиц были предприняты еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ умели лишь выделять очертания лица и измерять промежутки между очами и губами на монохромных фотографиях.

Первые коммерческие установки стали доступны в девяностых годах, но они были неидеальны: действовали неспешно и часто давали сбои. Только с развитием нейронных сетей и таких платформ, как вулкан россии, мощных мобильных процессоров определение лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным сканированием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие стали внедрять свои решения.

Ключевые шаги действия системы распознавания

Процесс определения лица можно примерно сегментировать на несколько важных этапов:

1. Распознавание лиц — устройство определяет существование людского образа в кадре.
2. Определение признаков — алгоритм анализирует черты физиономии: очертания зрительных органов, обонятельного органа, уст, расположение надбровных дуг.
3. Построение структуры — создаётся уникальный виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со эталоном — созданный шаблон сопоставляется со сохранённой при учёте биометрической информацией владельца.
5. Принятие выбора — если соответствие достаточно значительное, смартфон открывается.

Всякий из этих стадий нуждается в особых методов и улучшений для оперативной работы прямо на устройстве.

Железные элементы: что скрыто внутри них

Стандартная передняя камера.

Наиболее несложный вариант распознавания облика использует лишь переднюю камеру смартфона смартфона. Подобный подход осуществлён во различных доступных версиях Android-девайсов.

Сильные стороны:

• Необходимо нуждается в дополнительные сенсоров.
• Быстро действует при качественном освещённости.

Минусы:

• Несложно обмануть фотографией или роликом.
• Неудачно работает при слабом освещённости или необычных углах обзора.

ИК камера и пунктирный проектор

Более усовершенствованные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс составляет базу Face ID от Apple.

Как это действует:

• Точечный проекционный прибор показывает на лицо юзера невидимую решетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 меток).
• ИК устройство регистрирует искривление этой решетки по поверхности лица.
• Формируется трёхмерная карта глубины глубины, что почти неподвластна для имитации обычной снимком или маской.

Плюсы

• Надёжная функционирование даже в полной темноте.
• Большая устойчивость к имитациям.
• Точность идентификации выше 99%.

Добавочные датчики

В отдельных девайсах задействуются также вспомогательные сенсоры: ToF (Time-of-Flight), которые определяют период прохождения света до цели и обратно; RGB-датчики дальности; специальные световые дальномеры для формирования более аккуратной 3D-модели физиономии.

Эти разработки применяются наиболее часто во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искуственный разум на действии

Современные устройства опознания физиономий немыслимы при отсутствии эксплуатации artificial intelligence и machine learning. Именно из-за таким инновациям, как вулкан россии, устройство в состоянии узнавать юзера даже при изменениях внешности: новая укладка, растительность на лице, линзы или грим не становятся помехой для разблокировки.

Распознавание лиц

В первом стадии алгоритм обязана быстро найти ликовое изображение в пределах целого снимка камеры. Для данной цели задействуются многоуровневые классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые натренированы распознавать человеческие лица среди множества других объектов.

Пример: процесс MTCNN способен находить физиономию даже в случае частичном закрытии (например, шалью или ладонью).

Идентификация ключевых аспектов

После обнаружения лица устройство, такая как вулкан россии, устанавливает положение основных точек: края глаз, верхушка носа, границы губ и так далее. Обычно применяется от 68 до 128 ключевых маркеров на лице.

Это необходимо для выравнивания изображения: если юзер находится с телефон под наклоном, или повернул головку, программа корректирует изображение до обычного угла для дальнейшего анализа.

Построение биометрии модели

Далее искусственная сеть строит сжатое цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ лица длиной от 128 до 512 чисел с плавающей запятой.

Этот образец весьма затруднительно подделать: он не хранит непосредственно изображение юзера, а лишь особенные характеристики его облика, что делает его идеальным для таких систем, как vulkan russia.

Сравнительный анализ и вынесение выбора

Если пользователь желает разблокировать телефон взором, механизм повторяет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный границу (обычно превышает 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ не предоставляется.

Адаптация к изменениям облика

Интересная особенность нынешних системы — способность самообучения. Если вы постоянно открываете телефон с новой стрижкой или оптикой, программа постепенно обновляет базовый образец вашего облика для повышения точности работы без снижения уровня безопасности.

Охрана биометрических данных.

Множество юзеры беспокоятся держать свои био-идентификационные данные на телефоне из-за риска утечки данных или хакерской атаки. Иные организации, например vulkan russia, предлагают методы для повышения безопасности информации юзеров.

• Локальное сохранение: Большинство девайсов записывает биометричные шаблоны исключительно в пределах защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из устройство и не доступны включая производителю.

• Шифрование: Все информация сберегаются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы сторонних девелоперов не обладают непосредственного возможности доступа к биометрическим; они могут лишь требовать факт верификации личности через системный API.

Стоит подчеркнуть важную подробность: в случае, если какой-то человек достанет физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители осуществляют систему защиты от автоматического разблокирования — к примеру, заставляют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют типы определения лиц на изображениях?

На сегодняшний день можно определить определить три основных метода к реализации этой операции:

Программируемое двухмерное идентификация

Применяется только лицевая видеокамера без экстра сенсоров глубины. Подобный способ наблюдается наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость реализации; низкая стоимость; быстрая функционирование при качественном освещении.
Минусы: несложно обмануть снимком; ненадежная деятельность ночью; низкая защищенность.

Техническое объёмное сканирование

Применяет инфракрасную камеру + проектор точек + сенсоры глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Преимущества: большая надежность; нельзя исказить изображение/видеозапись; устойчивая функционирование при любом освещении.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с ИИ-дополнением

Задействуют комбинацию программных методов + аппаратную обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие товары, например вулкан россии и Google Pixel Face Unlock новейших поколений, комбинируют фронтальную камеру c ИК сенсором мобильности Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.

Образцы эксплуатации разнообразных методов

• iPhone серии X/11/12/13/14 используют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые представил эквивалент Face ID среди Android.
• Samsung Galaxy S10 версия/S20 поддерживают как софтверное двухмерное идентификацию по снимку селфи-камерой, так и датчик радужки глаза.
• Huawei Mate20 Pro применяет систему из ИК-подсветки + Dot Projector + ToF-сенсор

Вопросы защиты и ложные сигналы

Несмотря на поразительный развитие технологий за прошедшие годы, совершенных системы пока не наблюдается:

1. Вероятность подвоха: Недорогие мобильники легко открываются четкой снимком хозяина или же роликом с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые безупречные устройства могут спутать между монозиготными близнецами либо родичами с очень похожей внешностью.
3. Трансформации облика: Резкое утрата веса/увеличение массы тела, хирургические вмешательства или повреждения иногда требуют перерегистрации биометрических данных.
4. Условия записи: Яркая подсветка солнечным светом или плотная темнота могут снизить аккуратность определения признаков.

Вот несколько советов для надёжному применению:

• Для критически важных операций всегда внедряйте двухфакторную аутентификацию;
• Не включайте опцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
• Регулярно обновляйте прошивку прошивку мобильного устройства для предотвращения угроз от современных угроз;
• Включайте настройку “Требовать открытых глаз” в тех местах, где она есть.

Где также находится применение технология помимо смартфонов?

Пускай тема нашей статьи сосредоточена на в частности смартфонам и планшетам, стоит упомянуть о прочих направлениях внедрения технологии:

• Контроль прохода в офисах и жилых домах;
• Платёжные устройства банков (“Face Pay”);
• Цифровые паспорта нового образца;
• Установки видеонаблюдения муниципальных подразделений;
• Автоматизирование регистрации явки образовательных учреждений/вузов;
• Аутентификация участников компьютеров/ноутбуков.

Например: В городском метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без карты или телефона! Схожие программы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как меняется технический процесс в нынешнее время?

Каждый годик проявляются новые мысли для усовершенствования уровня работы систем лицевого распознавания:

1. Увеличивается детализация датчиков — чем больше деталей фиксируется камерой/глубинными сенсорами, тем меньше шанс погрешности;
2. Развиваются нейросети — современные структуры типа MobileNetV3 обеспечивают возможность скоростно адаптироваться к новым чертам облика владельца напрямую на гаджете без отправки данных в облако.
3. Совершенствуются технологии антиспуфинга — теперь мобильные устройства способны различать настоящие движущиеся облики от статичных снимков/маскировок по микроскопическим микродвижениям.
4. Взаимодействие со смарт-гаджетами — интеллектуальные часы могут самостоятельно блокировать мобильный телефон, если владелец ушёл далеко.
5. Проявляются гибридные системы — в частности объединяющие аудио идентификацию + облик + отпечаток пальца.

Вот, которые тенденции очень востребованы в данный момент:

1) Сокращение деталей

Производители намереваются сократить габариты прорези (“чёлки”) для датчики на экране за счёт интеграции миниатюрных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для повышения конфиденциальности всё более обработки данных осуществляется внутри устройства без отправки данных во сторонний облачный услугу.

3) Стандартизация норм

Google интенсивно пропагандирует эталон BiometricPrompt API, чтобы такие системы, как вулкан россия, и каждые Android-аппы были совместимы с любыми видами биометрии унифицированно.

Какое выбрать сегодня?

В случае если вам нужна наивысшая безопасность данных, остановите выбор на передовые аппараты с интегрированным ИК-излучателем или ToF-сенсором глубины.

• iPhone всех существующих последних поколений
• Huawei Partner/P ряда
• Xiaomi Pro
• Vivo X модели
• Оппо Найти X серий.

Если средства невелик – лучше выбирать обычным методам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в вулкан россия, задействовать только как дополнительную опцию комфорта.

Каким способом повысить практичность работы возможности?

Есть некоторые лайфхаков для пользователей, кто уже пользуется разблокировку по лицу:

1. Периодически обновляйте свою изображение-шаблон, если значительно трансформируется внешность.
2. Не забывайте очищать линзу фронтальной камеры – загрязнения могут снизить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам запускает камеру если вы берёте его в руки.
4. В процессе регистрации старайтесь держать голову прямо впереди камеры без значительного наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отворачиваетесь от экрана.

Будущее эволюции технологии

В предстоящие периоды можно предполагать развития полностью бесконтактных способов распознавания персоны сразу по нескольким биометрическим данным параметрам одновременно: облик + голос + шаги + жесты рук!

Также предполагается развитие свежих подходов охраны конфиденциальности – к примеру, динамическое изменение диджитал образца после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из очень интересных инноваций нашего периода! Она обеспечивает общение со смартфоном комфортнее чем до этого, и такие приложения, как vulkan russia, могут значительно повысить ваш опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как функционирует эта система изнутри, – сможете вдумчиво подбирать свой очередной гаджет!