Как функционирует определение лицевых образов в смартфонах

Почему мы предпочитаем разблокировку по фейсу

В недавние времена идентификация физиономий является одной из наиболее востребованных возможностей для открытия умных телефонов. Еще некоторые годков тому назад основная часть использующих обходились PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, например cabura, нам достаточно просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какая вещь превращает данную функцию такой востребованной? Прежде всего, это комфортно: не нужно запоминать замысловатые пароли или отыскивать правильный палец в мраке. Также, это оперативно: современные алгоритмы идентифицируют лицо практически за доли секунды. В-третьем пункте, это ощущение футуристичности — как будто в фильмах про кабура агентов.

Впрочем за данной видимой простотой скрывается полный мир трудных технологий и инженерных разработок. Попробуем исследовать, как именно функционирует распознавание лиц в новейших мобильных телефонах, какие существуют технологии, насколько они надёжны и что нас предстоит.

Краткая повествование эволюции техники

Распознавание лиц как технология имеется уже более пятидесяти годов. Изначальные пробы автоматизированного изучения облика были осуществлены еще в 1960-х годы в научных учреждениях США. Тогда компьютеры умели лишь выделять контуры лица и вычислять дистанции между очами и ртом на монохромных фотографиях.

Изначальные бизнес установки стали доступны в 90-х, но они были неидеальны: функционировали медленно и часто давали сбои. Только с развитием нейронных сетей и таких платформ, как кабура, мощных мобильных микросхем идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным идентификацией лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять личные разработки.

Основные стадии функционирования системы распознавания

Процесс определения лица можно условно сегментировать на несколько важных этапов:

1. Распознавание лиц — камера определяет существование людского образа в изображении.
2. Выделение характеристик — система изучает черты физиономии: очертания зрительных органов, носа, уст, положение бровей.
3. Построение модели — создаётся неповторимый виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с эталоном — полученный шаблон сопоставляется с зафиксированной при внесении биометрической сведениями владельца.
5. Принятие определения — если совпадение достаточно существенное, смартфон разблокируется.

Каждый из данных этапов требует особых методов и усовершенствований для быстрой работы непосредственно на девайсе.

Аппаратные составляющие: что скрыто внутри

Обычная фронтальная камера.

Самый легкий метод определения облика применяет лишь переднюю видеокамеру смартфона. Подобный метод внедрён во многочисленных бюджетных моделях Android-устройств.

Положительные стороны:

• Не нуждается в внешних датчиков.
• Быстро работает при качественном освещённости.

Минусы:

• Несложно обмануть изображением или видеозаписью.
• Неудачно действует при слабом освещённости или необычных углах обзора.

Инфракрасная фотокамера и точечный проектор

Более совершенные системы, такие как кабура, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология составляет базу Face ID от Apple.

Каким образом это функционирует:

• Точечный проектор проецирует на физиономию пользователя невидимую решетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
• ИК устройство записывает изменение формы данной решетки по плоскости физиономии.
• Создаётся 3D карта глубинности, что почти невозможна для подделки типичной снимком или маскировкой.

Выигрыши

• Надёжная деятельность даже в полной темноте.
• Большая защита к фальсификациям.
• Точность распознавания свыше 99%.

Дополнительные датчики

В отдельных аппаратах используются также вспомогательные датчики: ToF (Time-of-Flight), которые измеряют период распространения луча до цели и обратно; Цветные-датчики дальности; специальные световые лидары для построения более аккуратной 3D-модели физиономии.

Эти технологии применяются в основном во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: синтетический ум в работе

Нынешние системы идентификации лиц невозможны в отсутствие использования искусственного интеллекта и машинного обучения. Именно вследствие таким инновациям, как кабура, аппарат в состоянии распознавать пользователя даже при метаморфозах внешнего вида: новая причёска, щетина, очки или грим не становятся препятствием для разблокировки.

Распознавание физиономии

На стартовом этапе алгоритм необходимо быстро распознать ликовое изображение в пределах полного изображения с камеры. Для этого применяются последовательные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые натренированы идентифицировать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN в состоянии распознавать лицо даже в случае неполном перекрытии (например, шарфом или ладонью).

Идентификация основных моментов

После идентификации лица механизм, такая как кабура, устанавливает местоположение основных точек: края глаз, конец носа, края губ и так далее. Часто задействуется от 68 до 128 основных точек на лицевой области.

Данное необходимо для нормализации картинки: если человек держит телефон под наклоном, или склонил голову, программа “выпрямляет” картинку до обычного угла для дальнейшего анализа.

Создание биометрического модели

Далее нейросеть строит компактное цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Данный шаблон весьма затруднительно сфальсифицировать: он не удерживает само фото пользователя, а лишь исключительные характеристики его внешности, что делает его оптимальным для таких платформ, как кабура казино.

Сравнительный анализ и принятие заключения

Если юзер желает разблокировать телефон взглядом, система воспроизводит все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный границу (обычно выше 99%), телефон, как и платформа кабура казино, открывается; если нет — доступ блокируется.

Приспособление к изменениям внешности

Занимательная черта нынешних систем — способность самообучения. Если вы часто доступаете к телефон с обновленной прической или очками, программа постепенно модернизирует основной шаблон вашего облика для увеличения точности действия без снижения уровня безопасности.

Безопасность биометрических данных информации.

Многие юзеры опасаются держать свои биометрические идентификационные данные на телефоне из-за угрозы потери данных или хакерской атаки. Иные организации, такие как кабура казино, предлагают методы для увеличения безопасности данных юзеров.

• Локальное сохранение: Преимущественно аппаратов хранит биометрические модели исключительно внутри защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не покидают устройство и закрыты даже изготовителю.

• Шифрование: Все информация хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних девелоперов не имеют прямого возможности доступа к биометрическим; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Стоит подчеркнуть значимую деталь: в случае, если кто-либо получит физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие изготовители внедряют систему защиты от неосознанного разблокирования — к примеру, просят раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются категории распознавания лиц?

В настоящее время можно выделить выделить 3 основных метода к выполнению этой операции:

Программируемое 2D распознавание

Эксплуатируется только лицевая камера без дополнительных детекторов глубины. Такой подход встречается чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота осуществления; низкая затраты; оперативная деятельность при качественном свете.
Минусы: просто одурачить снимком; ненадежная работа ночью; низкая охрана.

Техническое трёхмерное сканирование

Применяет инфракрасную видеокамеру + проекционный модуль пикселей + датчики дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Преимущества: значительная достоверность; не получится подделать изображение/видеозапись; постоянная деятельность при любом освещении.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с интеграцией ИИ

Используют комбинацию программных методов + аппаратную обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например кабура и Google Pixel Face Unlock современных поколений, комбинируют фронтальную камеру c ИК датчиком движения Soli Radar для защиты от подделок руками/масками/видеодисплеями чужих устройств.

Образцы эксплуатации разнообразных техник

• iPhone модели X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз внедрил эквивалент Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное 2D определение по снимку фронталкой, так и сканер ириса глаза.
• Huawei Mate20 Pro использует комплекс из ИК-освещения + Dot Projector + ToF-сенсор

Вопросы охраны и ложные тревоги

Несмотря на поразительный успехи техники за прошедшие лет, безупречных систем пока не имеется:

1. Вероятность мошенничества: Бюджетные мобильники без труда доступны высококачественной изображением хозяина или видеозаписью с экрана другого устройства.
2. Идентичные близнецы: Даже самые безупречные устройства могут спутать между монозиготными близнецами либо родичами с очень схожей внешностью.
3. Метаморфозы внешности: Резкое похудение/набор веса, косметические процедуры или травмы иногда требуют перерегистрации биометрии.
4. Условия съёмки: Сильная освещённость солнечным светом или интенсивная затенение могут уменьшить верность распознавания признаков.

Здесь пара советов по надёжному эксплуатации:

• Для значимых операций всегда используйте двухэтапную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Систематически апгрейдите прошивку телефона для защиты от актуальных атак;
• Включайте настройку “Требовать раскрытых глаз” в тех местах, где она доступна.

В каких областях также применяется технологии кроме мобильных телефонов?

Пускай предмет этой статьи посвящена именно портативным гаджетам, стоит упомянуть о других сферах применения технологии:

• Мониторинг прохода в рабочих помещениях и резиденциях;
• Платёжные терминалы банков (“Face Pay”);
• Виртуальные паспорта нового образца;
• Системы видеоконтроля муниципальных подразделений;
• Механизация регистрации присутствия учебных заведений/институтов;
• Аутентификация пользователей ПК/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без карты или телефона! Аналогичные программы реализуются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как трансформируется техпроцесс сегодня?

Всякий год появляются современные идеи для улучшения уровня деятельности систем лицевого распознавания:

1. Увеличивается детализация сенсоров — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше риск неточности;
2. Совершенствуются нейросети — передовые конструкции вида MobileNetV3 позволяют оперативно адаптироваться к новым чертам вида пользователя напрямую на гаджете без пересылки информации в облачное хранилище.
3. Развиваются методы антиспуфинга — теперь мобильные устройства способны различать реальные анимированные лица от статичных снимков/масок по незаметным микродвижениям.
4. Синхронизация со умными устройствами — интеллектуальные часы могут автоматически закрыть доступ к мобильный телефон, если пользователь удалился на значительное расстояние.
5. Возникают гибридные механизмы — например объединяющие речевую опознание + физиономию + пальцевой отпечаток.

Здесь, те направления очень востребованы сейчас:

1) Миниатюризация элементов

Изготовители пытаются уменьшить размер прорези (“чёлки”) для сенсоры на экране за счёт встраивания миниатюрных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Переработка прямо на девайсе

Для повышения конфиденциальности всё больше вычислений осуществляется на месте без пересылки данных во сторонний облачный сервис.

3) Стандартизация норм

Гугл энергично продвигает эталон BiometricPrompt API, для того чтобы аналогичные платформы, например как cabura, и любые Android-приложения могли взаимодействовать с различными типами биометрии стандартизированно.

Какое решить сегодня?

Когда вам всем нужна наивысшая сохранность данных, остановите выбор на топовые аппараты с вмонтированным ИК-проектором либо ToF-сенсором глубины.

• iPhone всех последних версий
• Huawei Companion/P линейки
• Xiaomi Pro
• Vivo X линейки
• Оппо Обнаружить Икс серий.

Если средства невелик – лучше выбирать обычным способам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в cabura, применять только как второстепенную возможность удобства.

Как повысить практичность работы опции?

Есть пара хитростей для людей, кто уже пользуется разблокировку по лицу:

1. Периодически обновляйте свою изображение-шаблон, если сильно трансформируется внешность.
2. Не упускайте из виду чистить линзу передней камеры – разводы могут снизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам запускает фотоаппарат когда вы берёте его в руки.
4. Во время записи пытайтесь удерживать лицевую часть прямо напротив видеоустройства исключая сильного наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отвели взгляд от экрана.

Возможности эволюции инноваций

В скоро наступающие периоды можно предвкушать возникновения полностью бесконтактных способов идентификации индивидуума сразу по нескольким биометрическим параметрам одновременно: лицо + звучание + манера ходьбы + движения рук!

Также возможно развитие современных методов охраны конфиденциальности – скажем, изменяющееся модификация цифрового образца после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – единственная из наиболее захватывающих инноваций нашего периода! Она предоставляет взаимодействие со телефоном проще чем раньше, и такие программы, как кабура казино, могут существенно оптимизировать ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы понимаете, как устроена эта система изнутри, – сможете более осмысленно определять свой очередной устройство!