Как функционирует определение лиц в телефонах

Зачем мы предпочитаем разблокировку по лицевому распознаванию

В недавние годы распознавание лиц стало одной из самых распространённых опций для деблокировки мобильных телефонов. Всего несколько годов назад основная масса юзеров довольствовались пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением подобных технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что превращает данную особенность такой востребованной? Прежде всего, это удобно: не нужно запоминать замысловатые пароли или искать верный палец в мраке. Во-вторых, это оперативно: современные системы распознают лицо фактически за мгновение. В-третьих, это ощущение футуризма — как будто в фильмах про vulkan russia шпионов.

Однако за этой видимой простотой скрывается полный универсум сложных технологий и инженерных решений. Позвольте нам разобраться, как конкретно работает распознавание лиц в современных смартфонах, какие существуют методы, насколько они надёжны и что нас предстоит.

Краткая история эволюции инноваций

Распознавание лиц как методика имеется уже более 50 годов. Первые пробы автоматизированного изучения облика были предприняты еще в 1960-х годы в лабораториях США. Тогда компьютеры могли лишь выделять контуры лица и определять дистанции между очами и губами на ахроматических снимках.

Начальные торговые платформы появились в девяностых годах, но они были далеки от совершенства: работали медленно и часто ошибались. Только с развитием искусственных сетей и таких площадок, как вулкан россии, сильных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным сканированием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать собственные разработки.

Основные стадии работы системы определения

Процесс идентификации лица можно ориентировочно разделить на несколько основных этапов:

1. Идентификация лиц — устройство определяет присутствие людского лица в кадре.
2. Выделение признаков — система анализирует черты облика: конфигурацию глаз, носа, уст, позицию бровей.
3. Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с стандартом — созданный образец сравнивается с записанной при внесении биометрической сведениями владельца.
5. Принятие решения — если совпадение достаточно значительное, смартфон деблокируется.

Каждый из данных шагов нуждается в особых методов и усовершенствований для оперативной работы прямо на устройстве.

Технические компоненты: что прячется в их недрах

Обычная фронтальная камера.

Простейший несложный метод определения физиономии задействует исключительно лицевую видеокамеру мобильного устройства. Подобный подход реализован во различных бюджетных версиях Android-устройств.

Положительные стороны:

• Не требует дополнительные датчиков.
• Оперативно работает при достаточном освещении.

Слабые стороны:

• Несложно одурачить фотографией или видео.
• Неправильно работает при слабом освещении или необычных точках зрения.

ИК камера и пунктирный проектор

Более продвинутые системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика является основой Face ID от Apple.

Каким способом это действует:

• Точечный устройство проекции показывает на облик юзера невидимую решетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 меток).
• Инфракрасная устройство фиксирует искривление этой сетки по поверхности лица.
• Создаётся трёхмерная глубинная карта глубинности, что почти невозможна для подделки типичной фотографией или маскировкой.

Плюсы

• Надёжная деятельность даже в полной неосвещённости.
• Высокая сопротивляемость к имитациям.
• Точность определения свыше 99%.

Добавочные сенсорные устройства

В определённых девайсах задействуются также экстра сенсоры: ToF (Time-of-Flight), которые измеряют период распространения света до цели и обратно; Трехцветные-датчики глубины; специальные лазерные дальномеры для создания более точной 3D-модели физиономии.

Эти разработки встречаются в основном во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искуственный разум в действии

Текущие механизмы опознания физиономий невозможны при отсутствии эксплуатации artificial intelligence и machine learning. Именно из-за таким инновациям, как вулкан россии, устройство может узнавать владельца даже при метаморфозах облика: новая причёска, борода, линзы или макияж не становятся препятствием для разблокировки.

Распознавание физиономии

На первом этапе алгоритм необходимо быстро распознать ликовое изображение среди полного снимка камеры. Для этого применяются каскадные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые подготовлены идентифицировать человеческие лица среди множества других объектов.

Пример: процесс MTCNN может обнаруживать лицо даже с частичном закрытии (например, платком или ладонью).

Идентификация основных аспектов

После идентификации лица система, такая как вулкан россии, вычисляет расположение ключевых точек: кончики глаз, конец носа, контуры губ и так далее. Обычно применяется от 68 до 128 главных точек на лицевой области.

Данное необходимо для выравнивания изображения: если пользователь держит телефон под наклоном, или наклонил голову, программа исправляет изображение до нормального состояния для последующего изучения.

Создание биометрического шаблона

Далее нейросеть строит компактное числовое представление (« эмбеддинг ») облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 чисел с плавающей запятой.

Этот формат крайне затруднительно сфальсифицировать: он не удерживает само изображение юзера, а лишь уникальные особенности его вида, что делает его идеальным для таких платформ, как vulkan russia.

Сопоставление и принятие заключения

Если юзер желает разлочить мобильник глазами, программа осуществляет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый порог (обычно превышает 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ запрещается.

Привыкание к трансформациям внешнего вида

Увлекательная характеристика современных системы — возможность самообучения. Если вы часто открываете мобильное устройство с свежей укладкой или оптикой, алгоритм постепенно обновляет эталонный шаблон вашего облика для увеличения точности действия без снижения уровня безопасности.

Охрана биометрии данных.

Множество пользователи беспокоятся хранить свои биометрические идентификационные данные на мобильном устройстве из-за угрозы утечки данных или хакерской атаки. Определенные компании, такие как vulkan russia, предлагают варианты для увеличения безопасности информации клиентов.

• Локальное хранение: Большинство девайсов хранит био-идентификационные образцы только внутри защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают аппарат и недоступны даже производителю.

• Шифрование: Все данные сохраняются только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения внешних девелоперов не обладают непосредственного доступа к биометрическим; они могут лишь запрашивать подтверждение подтверждения идентичности через системный API.

Стоит отметить значимую подробность: в случае, если какой-то человек получит физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие компании осуществляют защиту от « слепого » разблокирования — в частности, требуют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют категории идентификации лиц на изображениях?

На сегодняшний день можно выделить три ключевых метода к выполнению этой задачи:

Софтверное двухмерное распознавание

Используется только лицевая камера без дополнительных детекторов дистанции. Подобный подход встречается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность воплощения; низкая стоимость; оперативная функционирование при достаточном свете.
Минусы: легко одурачить фотографией; ненадежная работа ночью; слабая безопасность.

Оборудование для 3D сканирование

Использует ИК видеокамеру + проектор пикселей + датчики дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Преимущества: большая надёжность; невозможно исказить изображение/видеозапись; постоянная работа при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (« чёлка »)

Комбинированные способы с интеграцией ИИ

Используют комбинацию программных методов + аппаратную обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (« anti-spoofing »). Например, подобные изделия, как вулкан россии и Google Pixel Face Unlock последних версий, объединяют фронталку c ИК датчиком мобильности Soli Radar для предотвращения от подделок руками/масками/видеоэкранами посторонних устройств.

Образцы применения разнообразных техник

• iPhone модели X/11/12/13/14 применяют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition первый раз внедрил аналог Face ID среди Android.
• Samsung Galaxy S10/S20 поддерживают как программное обеспечение плоское определение по фото фронтальной камерой, так и сканер радужки глаза.
• Huawei Mate20 Pro использует набор из ИК-подсветки + Dot Projector + ToF-сенсор

Трудности охраны и неверные тревоги

Несмотря на впечатляющий прогресс инноваций за последние годы, безупречных механизмов пока не имеется:

1. Возможность мошенничества: Бюджетные телефоны легко доступны качественной фотографией пользователя или роликом с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные системы могут ошибиться между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
3. Метаморфозы внешнего вида: Резкое снижение веса/набор веса, пластические операции или травмы иногда требуют повторной регистрации биометрии.
4. Условия фотографирования: Интенсивная подсветка солнечным светом или интенсивная темнота могут уменьшить аккуратность распознавания признаков.

Здесь пара подсказок по защищённому применению:

• Для значимых операций всегда внедряйте двухфакторную аутентификацию;
• Не активируйте функцию « Разблокировка по лицу » на бюджетных моделях без ИК-сенсоров;
• Постоянно апгрейдите ПО мобильного устройства для обеспечения безопасности от новых видов атак;
• Включайте функцию « Требовать распахнутых глаз » везде, где она доступна.

Где также применяется технология помимо мобильных телефонов?

Хотя основная мысль нашей публикации сосредоточена на именно портативным гаджетам, следует отметить прочих направлениях внедрения технологии:

• Мониторинг доступа в рабочих помещениях и многоквартирных зданиях;
• Платёжные терминалы банков (« Face Pay »);
• Цифровые удостоверения личности нового типа;
• Системы видеонаблюдения городских сервисов;
• Автоматизирование регистрации явки образовательных учреждений/вузов;
• Авторизация пользователей компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по фейсу (« Face Pay ») — хватит пройти через турникет без карты или мобильника! Схожие программы развиваются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким образом изменяется техпроцесс сегодня?

Всякий годик появляются новые мысли для повышения стандарта деятельности систем распознавания лиц:

1. Увеличивается разрешение сенсорных устройств — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше шанс ошибки;
2. Улучшаются нейросети — передовые конструкции вида MobileNetV3 дают возможность быстро адаптироваться к свежим чертам внешности обладателя напрямую на гаджете без отправки данных в облако.
3. Улучшаются методы антиспуфинга — теперь мобильные устройства умеют различать настоящие движущиеся облики от статичных снимков/масок по микроскопическим движениям кожи.
4. Синхронизация со умными устройствами — умные часы могут авто блокировать смартфон, если владелец удалился на значительное расстояние.
5. Возникают комбинированные устройства — например совмещающие аудио опознание + лицо + дактилоскопический след.

Итак, которые тенденции очень популярны на сегодняшний день:

1) Уменьшение деталей

Компании стараются сократить габариты выреза (« чёлки ») под датчики на дисплее за счёт встраивания компактных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на аппарате

Для улучшения конфиденциальности всё больше расчётов происходит внутри устройства без пересылки данных во дополнительный облачный сервис.

3) Упорядочивание стандартов

Гугл интенсивно продвигает норму BiometricPrompt API, с целью чтобы подобные системы, например как вулкан россия, и каждые Android-аппы были совместимы с всеми формами биометрии унифицированно.

Что выбрать на сегодня?

Если тебе нужна максимальная безопасность данных, остановите выбор на передовые устройства с интегрированным ИК-проектором либо ToF-сенсором глубины.

• iPhone каждого актуальных поколений
• Huawei Companion/Series P серии
• Xiaomi Expert
• Vivo X модели
• Oppo Найти Х серии.

Если средства невелик – лучше предпочесть классическим способам безопасности (PIN-код/сканер отпечатка), а опцию « разблокировка по лицу », такую как в вулкан россия, задействовать только как дополнительную возможность комфорта.

Как повысить практичность использования функции?

Есть некоторые хитростей для людей, кто уже использует функцию распознавания лица:

1. Периодически обновляйте свою изображение-шаблон, если сильно изменяется облик.
2. Не упускайте из виду очищать линзу фронтальной камеры – разводы могут понизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам запускает фотоаппарат когда вы берёте его в руки.
4. При регистрационного процесса старайтесь держать голову ровно перед объектива не допуская значительного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отворачиваетесь от дисплея.

Перспективы эволюции технологии

В ближайшие периоды можно предвкушать появления полностью безконтактных способов идентификации индивидуума сразу по нескольким биометрическим данным параметрам одновременно: облик + речь + манера ходьбы + движения рук!

Также вероятно развитие свежих методов охраны приватности – скажем, динамическое корректировка диджитал образца после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – единственная из наиболее интересных инноваций нашего времени! Она обеспечивает интеракцию со мобильным устройством проще чем когда-либо прежде, и такие программы, как vulkan russia, могут существенно улучшить ваш пользовательский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы осведомлены, как работает эта методика внутри, – сможете вдумчиво выбирать свой будущий девайс!