Каким образом функционирует определение лиц в телефонах

Почему мы останавливаемся на разлочивание по лицу

В прошлые времена распознавание лиц превратилось в одной из самых распространённых опций для открытия умных телефонов. Лишь пару годов ранее большинство юзеров удовлетворялись PIN-кодами, паролями или датчиками отпечатков пальцев. Но при появлением подобных технологий, как cabura, нам достаточно лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Что превращает эту конкретную особенность такой востребованной? Для начала, это удобно: не нужно удерживать в памяти трудные пароли или искать верный палец в тьме. Также, это мгновенно: современные программы идентифицируют лицо практически за мгновение. В-третью очередь, это впечатление футуризма — будто в кинофильмах про cabura разведчиков.

Однако за данной видимой несложностью прячется целый вселенная трудных техник и инженерных концепций. Давайте разобраться, как конкретно функционирует распознавание лиц в новейших гаджетах, какие существуют методы, насколько они безопасны и что нас предстоит.

Краткая повествование прогресса технологии

Распознавание лиц как техника существует уже более 50 лет. Начальные попытки автоматического исследования облика были предприняты еще в 1960-х годы в лабораториях США. Тогда ЭВМ умели лишь определять контуры лица и измерять промежутки между глазами и устами на черно-белых снимках.

Первые торговые установки появились в 90-х, но они были несовершенны: действовали неспешно и нередко ошибались. Только с прогрессом синтетических сетей и таких систем, как кабура, мощных мобильных процессоров определение лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным идентификацией лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали интегрировать собственные решения.

Ключевые шаги работы устройства определения

Процесс определения лица можно условно разделить на несколько ключевых этапов:

1. Идентификация лица — устройство определяет присутствие человеческого образа в кадре.
2. Выделение характеристик — система исследует контуры лица: конфигурацию глаз, обонятельного органа, губ, положение надбровных дуг.
3. Построение модели — создаётся особенный цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с стандартом — сформированный шаблон сверяется со зафиксированной при учёте биометрической сведениями владельца.
5. Принятие выбора — если соответствие достаточно существенное, смартфон деблокируется.

Любой из этих шагов запрашивает индивидуальных алгоритмов и оптимизаций для оперативной работы непосредственно на девайсе.

Технические компоненты: что находится в их недрах

Стандартная передняя камера.

Самый простой метод определения физиономии применяет лишь фронтальную камеру смартфона. Такой подход реализован во многочисленных недорогих версиях Android-устройств.

Преимущества:

• Не нуждается в внешних датчиков.
• Быстро действует при качественном освещении.

Слабые стороны:

• Несложно обмануть снимком или роликом.
• Неправильно работает при слабом освещённости или непривычных углах обзора.

ИК камера и точечный проектор

Более усовершенствованные системы, такие как кабура, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика лежит в основе Face ID от Apple.

Каким способом это действует:

• Точечный устройство проекции отображает на лицо использующего невидимую решетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 точек).
• ИК камера фиксирует изменение формы этой решетки по плоскости физиономии.
• Формируется трёхмерная глубинная карта глубины, которая почти что неосуществима для имитации типичной снимком или маскировкой.

Плюсы

• Надёжная функционирование даже в полной темноте.
• Высокая устойчивость к подделкам.
• Точность определения более 99%.

Добавочные сенсорные устройства

В определённых устройствах задействуются также вспомогательные сенсоры: ToF (Time-of-Flight), которые измеряют время движения луча до предмета и обратно; RGB-датчики глубины; специальные световые лидары для построения более аккуратной 3D-модели лица.

Эти разработки применяются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: синтетический интеллект в действии

Текущие устройства распознавания лиц невозможны без эксплуатации ИИ и машинного обучения. Именно вследствие таким инновациям, как кабура, аппарат в состоянии узнавать пользователя даже при метаморфозах внешнего вида: новая стрижка, борода, линзы или макияж не становятся препятствием для деблокировки.

Распознавание физиономии

При начальном этапе алгоритм обязана мгновенно распознать образ лица среди полного кадра с камеры. Для данной цели применяются многоуровневые классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые натренированы идентифицировать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN способен обнаруживать облик даже в случае частичном закрытии (например, шарфом или ладонью).

Определение важных точек

После распознавания лица система, такая как кабура, устанавливает расположение главных точек: кончики глаз, кончик носа, контуры губ и так далее. Часто применяется от 68 до 128 основных маркеров на лице.

Данное необходимо для выравнивания визуала: если пользователь удерживает телефон под наклоном, или склонил головку, программа корректирует картинку до стандартного положения для дальнейшего анализа.

Создание биометрии образца

Далее нейронная сеть строит компактное цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след лица длиной от 128 до 512 вещественных чисел.

Такой формат крайне затруднительно имитировать: он не удерживает непосредственно картинку пользователя, а лишь уникальные характеристики его внешности, что делает его оптимальным для таких платформ, как кабура казино.

Сопоставление и принятие выбора

Если человек намеревается разблокировать мобильник взглядом, система воспроизводит все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный уровень (обычно больше 99%), телефон, как и платформа кабура казино, доступен; если нет — доступ не предоставляется.

Привыкание к изменениям внешнего вида

Увлекательная черта актуальных системы — возможность самостоятельного обучения. Если вы постоянно доступаете к телефон с свежей укладкой или очками, алгоритм постепенно модернизирует основной шаблон вашего лица для повышения точности работы без ухудшения безопасности.

Защита биометрических данных.

Большинство пользователи боятся хранить свои биометрические данные на мобильном устройстве из-за вероятности потери данных или хакерской атаки. Некоторые организации, такие как кабура казино, предлагают методы для увеличения сохранности информации юзеров.

• Локальное сбережение: Основная часть устройств хранит биометрические модели исключительно внутрь безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Они всегда не оставляют устройство и закрыты включая создателю.

• Шифрование: Все данные сберегаются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Программы третьих девелоперов не обладают непосредственного возможности доступа к биометрическим; они могут лишь запрашивать факт верификации личности через системный API.

Стоит подчеркнуть существенную особенность: если кто-то получит доступ к вашему телефону физически (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители внедряют защиту от неосознанного разблокирования — например, заставляют раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют типы определения лиц на изображениях?

Сегодня можно выделить 3 ключевых способа к осуществлению этой функции:

Программное двухмерное идентификация

Эксплуатируется только передняя камера без дополнительных сенсоров дистанции. Такой метод используется чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота воплощения; низкая цена; оперативная деятельность при хорошем свете.
Минусы: просто обмануть снимком; неустойчивая работа ночью; недостаточная безопасность.

Аппаратное объёмное сканирование

Использует ИК камеру + проекционный модуль пикселей + датчики дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Преимущества: большая достоверность; нельзя исказить фото/видео; постоянная функционирование в любых условиях освещения.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные способы с дополнением ИИ

Применяют комбинацию софтверных методов + аппаратную обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие продукты, как кабура и Google Pixel Face Unlock современных поколений, объединяют фронталку c инфракрасным датчиком мобильности Soli Radar для защиты от подделок жестами/масками/видеоэкранами чужих устройств.

Образцы эксплуатации различных методов

• iPhone модели X/11/12/13/14 используют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID в числе Android.
• Samsung Galaxy S10/S20 имеют как программное 2D распознавание по снимку селфи-камерой, так и датчик радужки глаза.
• Huawei Mate20 Pro применяет комплекс из ИК-инфракрасного света + Dot Projector + ToF-датчик

Трудности безопасности и ложные сигналы

Несмотря на замечательный прогресс инноваций за прошедшие годы, совершенных системы пока не имеется:

1. Вероятность обмана: Доступные мобильники без труда открываются качественной изображением хозяина или же роликом с экрана другого устройства.
2. Идентичные близнецы: Даже самые совершенные механизмы могут спутать между однояйцевыми близнецами либо семьями с очень похожей внешностью.
3. Изменения внешнего вида: Внезапное утрата веса/увеличение массы тела, пластические операции или травмы иногда необходимы для обновления данных биометрических данных.
4. Условия съёмки: Интенсивная освещённость солнцем или интенсивная тень могут снизить верность распознавания признаков.

Вот некоторые советов по защищённому эксплуатации:

• Для важных операций всегда используйте дополнительную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Систематически обновляйте ПО мобильного устройства для предотвращения угроз от актуальных атак;
• Включайте опцию “Требовать раскрытых глаз” там, где она имеется.

В каких местах дополнительно находится применение технологии кроме мобильных телефонов?

Хотя предмет этой работы посвящена в частности портативным гаджетам, необходимо сказать о прочих направлениях внедрения технологии:

• Контроль доступа в офисах и резиденциях;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Виртуальные удостоверения личности нового типа;
• Системы видеомониторинга муниципальных подразделений;
• Автоматизирование регистрации присутствия учебных заведений/институтов;
• Аутентификация юзеров ПК/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по лицу (“Face Pay”) — хватит пройти через барьер без пластика или телефона! Аналогичные проекты развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом меняется технология в наше время?

Всякий годочек появляются новые мысли для усовершенствования уровня функционирования систем лицевого распознавания:

1. Увеличивается чёткость датчиков — чем больше информации фиксируется видеокамерой/датчиками глубины, тем меньше риск ошибки;
2. Улучшаются нейросети — передовые архитектуры типа MobileNetV3 позволяют быстро обучаться свежим характеристикам облика обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Совершенствуются методы антиспуфинга — теперь смартфоны умеют отличать настоящие анимированные лица от фиксированных фотографий/масок по микроскопическим микродвижениям.
4. Интеграция со умными устройствами — интеллектуальные часы могут автоматически закрыть доступ к телефон, если пользователь отошёл далеко.
5. Появляются комбинированные механизмы — в частности комбинирующие голосовую опознание + физиономию + отпечаток пальца.

Вот, которые тенденции в особенности востребованы сейчас:

1) Уменьшение компонентов

Изготовители пытаются уменьшить величину выреза (“чёлки”) под датчики на дисплее за счёт интеграции компактных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на девайсе

Для улучшения личной безопасности всё больше расчётов осуществляется на месте без отправки данных во дополнительный облачный сервис.

3) Стандартизация норм

Гугл активно продвигает эталон BiometricPrompt API, чтобы подобные площадки, вроде cabura, и каждые Android-приложения могли работать с различными типами биометрии унифицированно.

Какое выбрать на сегодня?

В случае если тебе необходима наивысшая защита данных, выбирайте флагманские модели с вмонтированным ИК-проектором либо ToF-датчиком глубины.

• iPhone каждого последних версий
• Huawei Companion/Series P серии
• Mix Pro
• Vivo X серии
• Oppo Обнаружить Х линейки.

Если бюджет невелик – лучше отдавать предпочтение традиционным способам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в cabura, задействовать только как дополнительную опцию комфорта.

Каким способом улучшить удобство функционирования функции?

Есть пара советов для людей, кто уже пользуется разблокировку по лицу:

1. Регулярно обновляйте свою фото-шаблон, если сильно трансформируется внешний вид.
2. Не забывайте протирать линзу фронтальной камеры – пятна могут понизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам запускает фотоаппарат когда вы берёте его в руки.
4. В процессе регистрационного процесса старайтесь удерживать голову ровно впереди видеоустройства исключая сильного наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвели взгляд от экрана.

Возможности развития технологии

В скоро наступающие периоды можно предполагать появления полностью безконтактных способов опознания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + звучание + манера ходьбы + жесты рук!

Также вероятно возникновение современных методов защиты личной информации – к примеру, изменяющееся модификация цифрового шаблона после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее захватывающих технологий нашего эпохи! Она предоставляет общение со мобильным устройством комфортнее чем до этого, и такие программы, как кабура казино, могут в разы оптимизировать ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы знаете, как работает эта система в деталях, – будете в состоянии более осмысленно выбирать свой очередной гаджет!