Каким образом работает распознавание лицевых образов в мобильных устройствах

Зачем мы останавливаемся на разблокирование по лицевому распознаванию

В недавние годы идентификация лиц превратилось в одной из самых распространённых возможностей для деблокировки смартфонов. Всего несколько годков тому назад большинство использующих обходились пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением подобных технологий, например Вулкан 24, нам достаточно лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь превращает эту конкретную особенность такой востребованной? Во-первых, это удобно: не нужно помнить сложные пароли или искать нужный палец в мраке. Также, это мгновенно: современные программы распознают лицо буквально за доли секунды. В-третьих, это ощущение будущего — словно в фильмах про вулкан 24 шпионов.

Впрочем за данной видимой простотой таится весь универсум комплексных техник и инженерных концепций. Позвольте нам разобраться, как конкретно работает распознавание лиц в актуальных гаджетах, какие существуют технологии, насколько они надёжны и что нас предстоит.

Сжатая хроника развития техники

Идентификация лиц как методика существует уже более 50 годов. Изначальные попытки машинного изучения облика были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры способны были лишь определять силуэты головы и определять промежутки между глазами и губами на ахроматических фотографиях.

Первые бизнес системы стали доступны в девяностых годах, но они были несовершенны: функционировали медленно и часто давали сбои. Только с прогрессом нейронных сетей и таких площадок, как Вулкан 24 Казино, сильных мобильных процессоров распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным идентификацией лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали внедрять свои разработки.

Ключевые шаги действия устройства определения

Процесс определения лица можно условно сегментировать на несколько ключевых этапов:

1. Обнаружение лица — аппарат распознает существование гуманного лица в кадре.
2. Выделение признаков — алгоритм исследует контуры физиономии: очертания зрительных органов, носа, губ, расположение надбровных дуг.
3. Построение шаблона — создаётся особенный цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с эталоном — созданный шаблон сопоставляется с зафиксированной при внесении биометрической данными владельца.
5. Принятие выбора — если соответствие достаточно существенное, смартфон деблокируется.

Любой из указанных этапов требует особых алгоритмов и улучшений для скорой работы непосредственно на девайсе.

Аппаратные компоненты: что скрыто внутри

Типичная селфи камера.

Наиболее несложный вариант идентификации лица применяет лишь лицевую видеокамеру мобильного устройства. Подобный способ осуществлён во различных бюджетных моделях Android-девайсов.

Плюсы:

• Не нуждается в нуждается в дополнительных сенсоров.
• Шустро работает при достаточном освещении.

Минусы:

• Несложно ввести в заблуждение изображением или видео.
• Неправильно функционирует при плохом свете или нестандартных ракурсах.

ИК камера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как Вулкан 24 Казино, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика составляет базу Face ID от Apple.

Каким образом это действует:

• Точечный устройство проекции отображает на физиономию пользователя невидимую решетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 пятен).
• ИК устройство фиксирует деформацию этой решетки по плоскости лица.
• Формируется 3D карта глубины глубины, что практически невозможна для подделки стандартной снимком или маской.

Преимущества

• Надёжная работа даже в полной неосвещённости.
• Высокая устойчивость к фальсификациям.
• Точность идентификации свыше 99%.

Дополнительные сенсоры

В отдельных устройствах применяются также дополнительные сенсоры: ToF (Time-of-Flight), которые измеряют время распространения света до объекта и обратно; RGB-датчики дальности; специальные оптические лидары для формирования более аккуратной 3D-модели физиономии.

Эти разработки применяются чаще всего во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искуственный интеллект на исполнении

Современные механизмы идентификации физиономий невозможны без применения artificial intelligence и машинного обучения. Именно вследствие таким технологиям, как Вулкан 24 Казино, гаджет в состоянии узнавать пользователя даже при изменениях внешнего вида: новая укладка, растительность на лице, очки или грим не становятся барьером для открытия.

Обнаружение лиц

В первом шаге алгоритм необходимо мгновенно распознать лицо внутри всего изображения камеры. Для данной цели используются последовательные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые подготовлены находить человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN в состоянии распознавать лицо даже при неполном перекрытии (например, шарфом или рукой).

Определение основных моментов

После распознавания лица механизм, такая как Вулкан 24 Казино, вычисляет расположение основных точек: края глаз, верхушка носа, контуры губ и так далее. Обычно используется от 68 до 128 главных точек на лице.

Это действие требуется для нормализации картинки: если человек находится с мобильник под углом, или повернул голову, программа « выпрямляет » картинку до нормального состояния для последующего изучения.

Построение биометрического образца

Далее нейросеть строит уплотненное числовое представление (« эмбеддинг ») лица пользователя — своеобразный цифровой « отпечаток » внешности длиной от 128 до 512 вещественных чисел.

Такой шаблон крайне трудно имитировать: он не удерживает само картинку юзера, а лишь особенные особенности его внешности, что делает его совершенным для таких систем, как Vulkan24.

Сравнительный анализ и осуществление решения

Если юзер намеревается открыть смартфон глазами, система осуществляет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый порог (обычно больше 99%), телефон, как и платформа Vulkan24, доступен; если нет — доступ не предоставляется.

Приспособление к трансформациям облика

Увлекательная особенность актуальных системы — способность самостоятельного обучения. Если вы регулярно доступаете к телефон с свежей прической или оптикой, алгоритм постепенно освежает основной шаблон вашего лица для увеличения точности действия без ухудшения безопасности.

Охрана биометрических информации.

Множество пользователи боятся держать свои биометрические данные на мобильном устройстве из-за вероятности утечки информации или взлома гаджета. Некоторые организации, например Vulkan24, предлагают варианты для улучшения защиты сведений юзеров.

• Локальное сбережение: Основная часть аппаратов сохраняет биометрические образцы исключительно внутрь защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из устройство и недоступны даже производителю.

• Шифрование: Все данные сохраняются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих разработчиков не имеют прямого доступа к биометрическим; они могут лишь требовать факт верификации личности через системный API.

Стоит подчеркнуть важную подробность: если кто-либо сможет получить физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании осуществляют меры безопасности от неосознанного разблокирования — в частности, заставляют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются категории определения лиц на изображениях?

Сегодня можно выделить определить 3 главных способа к выполнению этой операции:

Софтверное двухмерное определение

Используется только передняя видеокамера без вспомогательных детекторов дистанции. Такой метод встречается наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность осуществления; минимальная затраты; быстрая работа при достаточном свете.
Минусы: несложно ввести в заблуждение снимком; нестабильная функционирование ночью; недостаточная защищенность.

Аппаратное 3D оцифровка

Использует ИК камеру + проектор пикселей + датчики глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Достоинства: большая надёжность; не получится подделать изображение/видеозапись; стабильная деятельность в любых условиях освещения.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (« чёлка »)

Гибридные методы с интеграцией ИИ

Используют комбинацию программных методов + аппаратную обработку + постобработку нейросетями для увеличения устойчивости к атакам (« anti-spoofing »). Например, подобные продукты, как Вулкан 24 Казино и Google Pixel Face Unlock последних версий, комбинируют фронталку c ИК сенсором мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Образцы эксплуатации разнообразных методов

• iPhone линейки X/11/12/13/14 задействуют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз предложил эквивалент Face ID в ряду Android.
• Samsung Galaxy S10/S20 поддерживают как программное обеспечение двухмерное распознавание по фото фронтальной камерой, так и датчик ириса глаза.
• Huawei Mate20 Pro применяет комплекс из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Вопросы безопасности и неверные тревоги

Несмотря на впечатляющий успехи технологий за последние годы, безупречных системы пока не существует:

1. Возможность обмана: Бюджетные мобильники легко доступны качественной снимком хозяина либо видеозаписью с экрана другого устройства.
2. Идентичные двойняшки: Даже самые безупречные устройства могут перепутать между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
3. Метаморфозы внешнего вида: Резкое снижение веса/набор веса, хирургические вмешательства или травмы иногда требуют перерегистрации биометрических данных.
4. Условия записи: Яркая засветка солнечным светом или же глубокая тень могут понизить верность определения признаков.

Вот несколько подсказок для безопасному эксплуатации:

• Для критически важных операций всегда внедряйте дополнительную аутентификацию;
• Не активируйте возможность « Разблокировка по лицу » на бюджетных аппаратах без ИК-сенсоров;
• Регулярно обновляйте прошивку ПО смартфона для предотвращения угроз от современных угроз;
• Включайте функцию « Требовать распахнутых глаз » в тех местах, где она доступна.

В каких областях ещё используется технологии помимо мобильных телефонов?

Несмотря на то, что предмет нашей статьи сосредоточена на в частности мобильным устройствам, следует отметить прочих направлениях внедрения технологии:

• Мониторинг прохода в деловых центрах и резиденциях;
• Платёжные устройства финансовых учреждений (« Face Pay »);
• Виртуальные паспорта современного поколения;
• Системы видеонаблюдения муниципальных сервисов;
• Автоматизация регистрации посещаемости образовательных учреждений/институтов;
• Вход пользователей персональных компьютеров/ноутбуков.

Например: В столичном метро уже испытывается система оплаты проезда по фейсу (« Face Pay ») — достаточно пройти через барьер без карты или телефона! Похожие проекты развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом изменяется техпроцесс сегодня?

Всякий годочек появляются современные концепции для улучшения качества функционирования систем идентификации лиц:

1. Увеличивается чёткость датчиков — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше риск неточности;
2. Улучшаются нейронные сети — современные структуры вида MobileNetV3 обеспечивают возможность скоростно осваивать свежим характеристикам облика владельца напрямую на гаджете без пересылки информации в облачное хранилище.
3. Развиваются способы антиспуфинга — теперь смартфоны могут отличать настоящие живые лица от статичных фотографий/маскировок по мельчайшим микродвижениям.
4. Взаимодействие со смарт-гаджетами — интеллектуальные часы могут самостоятельно заблокировать мобильный телефон, если пользователь ушёл далеко.
5. Возникают гибридные системы — к примеру комбинирующие речевую идентификацию + облик + дактилоскопический след.

Здесь, какие тренды очень востребованы в данный момент:

1) Уменьшение элементов

Изготовители стараются уменьшить величину прорези (« чёлки ») под сенсоры на экране за счёт внедрения миниатюрных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для улучшения личной безопасности всё больше расчётов происходит локально без отправки информации во внешний облачный сервис.

3) Унификация регламентов

Google интенсивно пропагандирует стандарт BiometricPrompt API, чтобы такие платформы, например как Вулкан 24, и каждые Android-приложения могли работать с всеми формами биометрии стандартизированно.

Какое выбрать на сегодня?

Если вам важна максимальная безопасность информации, выбирайте флагманские устройства с интегрированным ИК-излучателем либо ToF-сенсором глубины.

• iPhone каждого актуальных моделей
• Huawei Partner/Series P серии
• Mi Professional
• Vivo X линейки
• Oppo Find Х линейки.

Если средства скромен – лучше выбирать классическим способам безопасности (PIN-код/сканер отпечатка), а возможность « разблокировка по лицу », такую как в Вулкан 24, применять только как опциональную опцию комфорта.

Каким способом повысить удобство использования возможности?

Есть несколько советов для пользователей, кто уже использует разблокировку через лицо:

1. Периодически меняйте свою изображение-шаблон, если кардинально изменяется внешний вид.
2. Не пренебрегайте чистить объектив фронтальной камеры – пятна могут понизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам активирует камеру когда вы берёте его в руки.
4. При записи пытайтесь сохранять лицо прямо впереди камеры без значительного наклона головы.
5. Используйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от дисплея.

Будущее прогресса инноваций

В скоро наступающие времена можно ожидать развития полностью дистанционных способов опознания человека сразу по нескольким биометрическим данным параметрам одновременно: физиономия + голос + шаги + манипуляции руками!

Также вероятно развитие новых подходов обеспечения личной информации – скажем, изменяющееся изменение электронного образца после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень увлекательных инноваций нашего эпохи! Она обеспечивает общение со смартфоном проще чем до этого, и такие приложения, как Vulkan24, могут существенно оптимизировать ваш пользовательский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы осведомлены, как работает эта методика изнутри, – сможете осознаннее определять свой будущий устройство!