Каким способом действует распознавание лицевых образов в телефонах

Для чего мы выбираем разблокирование по фейсу

В недавние годы определение лиц стало одной из самых популярных функций для открытия умных телефонов. Лишь некоторые годов тому назад большинство юзеров удовлетворялись пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением таких технологий, например admiral x, нам достаточно лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Какая вещь обуславливает эту возможность такой востребованной? Для начала, это практично: не нужно удерживать в памяти сложные пароли или находить нужный палец в мраке. Во-вторых, это оперативно: современные алгоритмы идентифицируют лицо фактически за мгновения ока. В-третьих, это впечатление будущего — будто в кинофильмах про admiral x разведчиков.

Тем не менее за этой видимой несложностью прячется весь универсум комплексных техник и инженерных концепций. Попробуем исследовать, как конкретно функционирует идентификация по лицу в актуальных мобильных телефонах, какие существуют методы, насколько они надёжны и что нас предстоит.

Сжатая повествование эволюции технологии

Распознавание лиц как технология имеется уже более 50 лет. Первые попытки автоматического анализа лица были предприняты еще в 1960-х годы в исследовательских центрах США. Тогда компьютеры способны были лишь обозначать контуры черепа и измерять расстояния между очами и ртом на монохромных изображениях.

Изначальные коммерческие системы возникли в 90-х, но они были далеки от совершенства: действовали неспешно и нередко ошибались. Только с прогрессом синтетических сетей и таких систем, как адмирал х, мощных мобильных чипов идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным идентификацией лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать личные решения.

Главные стадии функционирования механизма определения

Процесс идентификации лица можно ориентировочно разделить на несколько важных этапов:

1. Обнаружение лиц — камера определяет существование гуманного лица в кадре.
2. Выделение особенностей — система изучает особенности облика: форму глаз, обонятельного органа, губ, расположение бровей.
3. Построение шаблона — создаётся неповторимый цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со эталоном — полученный образец сверяется со сохранённой при внесении биометрической сведениями владельца.
5. Принятие решения — если совпадение достаточно значительное, смартфон деблокируется.

Каждый из данных стадий запрашивает индивидуальных процедур и оптимизаций для быстрой работы прямо на устройстве.

Железные компоненты: что прячется внутри

Стандартная фронтальная камера.

Простейший простой вариант распознавания физиономии использует исключительно лицевую камеру мобильного устройства. Такой подход реализован во многих бюджетных моделях Android-устройств.

Преимущества:

• Не нуждается в нуждается в дополнительных датчиков.
• Быстро действует при достаточном освещённости.

Минусы:

• Легко ввести в заблуждение фотографией или видео.
• Плохо функционирует при плохом свете или необычных ракурсах.

ИК фотокамера и точечный проектор

Более продвинутые системы, такие как адмирал х, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология составляет базу Face ID от Apple.

Как это действует:

• Точечный устройство проекции показывает на облик юзера невидимую решетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 меток).
• Инфракрасная камера записывает деформацию данной решетки по поверхности лица.
• Формируется трёхмерная глубинная карта глубинности, что почти невозможна для фальсификации стандартной фотографией или маскировкой.

Выигрыши

• Надёжная деятельность даже в полной неосвещённости.
• Большая сопротивляемость к подделкам.
• Точность определения более 99%.

Добавочные сенсоры

В отдельных аппаратах применяются также вспомогательные датчики: ToF (Time-of-Flight), которые фиксируют период движения света до предмета и обратно; Цветные-датчики глубины; специальные световые лидары для создания более детализированной 3D-модели физиономии.

Эти разработки используются наиболее часто во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искусственный ум в действии

Нынешние механизмы идентификации физиономий невозможны при отсутствии применения искусственного интеллекта и machine learning. Именно благодаря таким разработкам, как адмирал х, гаджет может узнавать пользователя даже при трансформациях облика: новая стрижка, растительность на лице, оптика или макияж не становятся помехой для деблокировки.

Детектирование лица

При начальном шаге система обязана быстро найти лицо в пределах целого кадра с камеры. Для этого применяются многоуровневые классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые “обучены” распознавать лиц человека среди множества других объектов.

Пример: процесс MTCNN может обнаруживать лицо даже при частичном закрытии (например, платком или рукой).

Выделение основных точек

После распознавания лица устройство, такая как адмирал х, вычисляет расположение главных точек: уголки глаз, кончик носа, контуры губ и так далее. Как правило применяется от 68 до 128 главных меток на лицевой поверхности.

Это действие требуется для стабилизации визуала: если пользователь держит мобильник под наклоном, или повернул голову, программа исправляет изображение до обычного угла для последующего изучения.

Построение биометрического идентификатора образца

Далее нейронная сеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след лица длиной от 128 до 512 чисел с плавающей запятой.

Этот формат очень затруднительно подделать: он не хранит непосредственно картинку юзера, а лишь уникальные черты его вида, что делает его идеальным для таких платформ, как admiral-x.

Сопоставление и осуществление решения

Когда человек желает разлочить смартфон взором, система повторяет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный уровень (обычно больше 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ не предоставляется.

Приспособление к трансформациям внешнего вида

Увлекательная особенность актуальных систем — возможность самостоятельного обучения. Если вы регулярно разблокируете телефон с свежей стрижкой или очками, система постепенно освежает основной шаблон вашего облика для увеличения точности действия без снижения уровня безопасности.

Охрана биометрических данных данных.

Большинство юзеры боятся сохранять свои биометрические данные на телефоне из-за угрозы потери данных или хакерской атаки. Иные фирмы, вроде admiral-x, предлагают решения для улучшения безопасности информации юзеров.

• Локальное хранение: Преимущественно девайсов сохраняет биометричные образцы только внутрь защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют устройство и недоступны включая изготовителю.

• Шифрование: Все информация хранятся только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Приложения внешних девелоперов не обладают непосредственного доступа к биометрическим; они могут лишь запрашивать факт подтверждения личности через системный API.

Стоит упомянуть важную подробность: в случае, если кто-либо получит физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие изготовители осуществляют защиту от неосознанного разблокирования — к примеру, заставляют разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают виды определения лиц?

Сегодня можно определить определить три ключевых подхода к выполнению этой задачи:

Софтверное двухмерное идентификация

Используется только фронтальная камера без вспомогательных детекторов глубины. Подобный подход используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота воплощения; низкая стоимость; быстрая работа при качественном свете.
Минусы: несложно ввести в заблуждение снимком; ненадежная деятельность ночью; недостаточная безопасность.

Техническое трёхмерное сканирование

Задействует ИК камеру + проекционный модуль точек + датчики дистанции (Face ID от Apple; подобные технологии у Huawei Mate).
Преимущества: большая надежность; невозможно обмануть фото/видео; постоянная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с интеграцией ИИ

Используют комбинацию программных методов + аппаратную обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например адмирал х и Google Pixel Face Unlock современных версий, сочетают фронталку c ИК датчиком движения Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.

Иллюстрации применения разнообразных способов

• iPhone серии X/11/12/13/14 применяют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз предложил аналог Face ID среди Android.
• Samsung Galaxy S10/S20 имеют как софтверное двухмерное определение по фото фронтальной камерой, так и датчик радужки глаза.
• Huawei Mate20 Pro задействует систему из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Трудности охраны и неверные тревоги

Несмотря на поразительный успехи техники за последние годы, безупречных систем пока не имеется:

1. Возможность обмана: Бюджетные смартфоны легко доступны высококачественной изображением хозяина или же роликом с экрана другого устройства.
2. Идентичные близняшки: Даже самые идеальные устройства могут ошибиться между монозиготными близнецами либо родственниками с очень схожей внешностью.
3. Трансформации внешнего вида: Резкое похудение/набор веса, пластические операции либо травмы порой требуют повторной регистрации биометрических данных.
4. Условия записи: Интенсивная подсветка солнечным светом либо глубокая тень могут понизить точность распознавания признаков.

Здесь некоторые подсказок для надёжному использованию:

• Для значимых операций всегда используйте дополнительную аутентификацию;
• Не включайте опцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
• Систематически обновляйте прошивку прошивку смартфона для предотвращения угроз от новых видов атак;
• Включайте опцию “Требовать открытых глаз” там, где она имеется.

Где дополнительно находится применение технология за исключением мобильных телефонов?

Пускай основная мысль данной публикации посвящена в частности портативным гаджетам, стоит упомянуть о альтернативных областях использования технологии:

• Мониторинг входа в деловых центрах и жилых домах;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Виртуальные удостоверения личности последнего образца;
• Комплексы видеомониторинга городских служб;
• Автоматизирование учёта явки образовательных учреждений/институтов;
• Аутентификация участников ПК/ноутбуков.

Например: В городском метро уже тестируется система платежа проезда по лицу (“Face Pay”) — достаточно пройти через барьер без карты или мобильника! Похожие проекты развиваются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как меняется техпроцесс сегодня?

Всякий годик возникают новые мысли для повышения стандарта работы систем распознавания лиц:

1. Увеличивается разрешение сенсорных устройств — чем больше информации фиксируется камерой/датчиками глубины, тем меньше риск неточности;
2. Развиваются нейросети — новейшие структуры модели MobileNetV3 обеспечивают возможность оперативно адаптироваться к дополнительным особенностям облика владельца непосредственно на девайсе без отправки данных в облако.
3. Развиваются способы антиспуфинга — теперь мобильные устройства умеют различать подлинные живые лица от фиксированных фотографий/маскировок по микроскопическим микродвижениям.
4. Взаимодействие со интеллектуальными приборами — смарт-часы могут авто блокировать смартфон, если пользователь удалился на значительное расстояние.
5. Возникают комбинированные устройства — к примеру объединяющие аудио опознание + облик + дактилоскопический след.

Здесь, какие тренды в особенности популярны на сегодняшний день:

1) Миниатюризация деталей

Компании намереваются минимизировать габариты выреза (“чёлки”) под сенсоры на дисплее за счёт внедрения компактных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения конфиденциальности всё больше вычислений происходит на месте без передачи информации во внешний облачный сервис.

3) Стандартизация норм

Google активно продвигает норму BiometricPrompt API, для того чтобы аналогичные платформы, вроде admiral x, и каждые Android-программы могли взаимодействовать с любыми видами биометрии стандартизированно.

Какое подобрать сегодня?

Если вам всем важна максимальная безопасность информации, подбирайте передовые аппараты с вмонтированным ИК-излучателем либо ToF-датчиком глубины.

• iPhone каждого последних моделей
• Huawei Mate/P Series линейки
• Xiaomi Professional
• Vivo X модели
• Оппо Find X серии.

Если бюджет невелик – лучше предпочесть традиционным средствам защиты (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в admiral x, применять только как дополнительную возможность комфорта.

Каким образом улучшить практичность использования опции?

Есть пара лайфхаков для людей, кто уже применяет разблокировку через лицо:

1. Периодически обновляйте свою фото-шаблон, если сильно меняется внешность.
2. Не забывайте очищать линзу фронтальной камеры – пятна могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам включает фотоаппарат когда вы поднимаете его.
4. При регистрационного процесса постарайтесь сохранять лицо прямо перед камеры не допуская сильного наклона головы.
5. Используйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отворачиваетесь от экрана.

Перспективы развития технологии

В скоро наступающие периоды можно предполагать возникновения полностью дистанционных способов распознавания персоны сразу по нескольким биометрическим данным параметрам одновременно: облик + звучание + шаги + жесты рук!

Также вероятно возникновение современных подходов обеспечения приватности – скажем, изменяющееся корректировка диджитал паттерна после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее интересных инноваций нашего периода! Она делает общение со мобильным устройством удобнее чем до этого, и такие приложения, как admiral-x, могут в разы улучшить ваш опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы осведомлены, как работает эта технология внутри, – сумеете более осмысленно подбирать свой очередной девайс!