Каким образом работает распознавание лиц в телефонах

Зачем мы останавливаемся на разлочивание по лицу

В прошлые годы определение лиц является одной из самых популярных возможностей для открытия смартфонов. Всего некоторые годков тому назад большинство пользователей довольствовались пин-кодами, паролями или датчиками отпечатков пальцев. Но с появлением подобных технологий, например Вулкан 24, нам достаточно просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь обуславливает данную функцию настолько популярной? Во-первых, это удобно: не нужно помнить трудные пароли или отыскивать нужный палец в темноте. Кроме того, это быстро: современные системы распознают лицо практически за доли секунды. В-третью очередь, это ощущение футуризма — как будто в фильмах про вулкан автомат разведчиков.

Тем не менее за этой кажущейся несложностью скрывается целый мир комплексных методов и инженерных решений. Давайте исследовать, как именно работает идентификация по лицу в новейших смартфонах, какие бывают методы, насколько они безопасны и что нас ждёт впереди.

Краткая хроника развития техники

Идентификация лиц как технология существует уже более пятидесяти годов. Начальные пробы машинного изучения облика были предприняты еще в 1960-х годах в научных учреждениях США. Тогда вычислительные машины могли лишь определять очертания головы и измерять промежутки между зрачками и устами на ахроматических снимках.

Начальные бизнес установки возникли в 90-х, но они были несовершенны: функционировали медленно и часто ошибались. Только с эволюцией искусственных сетей и таких платформ, как Вулкан 24 Казино, сильных мобильных чипов распознавание лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным идентификацией лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать личные разработки.

Главные этапы действия системы определения

Процесс определения лица можно примерно сегментировать на несколько важных этапов:

1. Идентификация лиц — камера распознает существование гуманного образа в кадре.
2. Извлечение характеристик — система анализирует особенности физиономии: очертания зрительных органов, обонятельного органа, уст, положение надбровных дуг.
3. Построение шаблона — создаётся неповторимый виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с стандартом — полученный модель сравнивается с записанной при внесении биометрической сведениями владельца.
5. Принятие выбора — если соответствие достаточно высокое, смартфон разблокируется.

Всякий из данных шагов нуждается в специальных процедур и усовершенствований для оперативной работы непосредственно на девайсе.

Железные компоненты: что находится в их недрах

Типичная передняя камера.

Самый простой легкий способ распознавания физиономии применяет исключительно переднюю камеру смартфона. Данный метод осуществлён во многих недорогих вариантах Android-девайсов.

Достоинства:

• Не потребляет внешних датчиков.
• Шустро действует при качественном свете.

Недостатки:

• Легко одурачить фотографией или видеозаписью.
• Неправильно действует при низком освещении или непривычных ракурсах.

ИК фотокамера и точечный проекционный аппарат

Более усовершенствованные системы, такие как Вулкан 24 Казино, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология является основой Face ID от Apple.

Каким образом это функционирует:

• Точечный проектор отображает на облик юзера невидимую сетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 точек).
• ИК устройство регистрирует искривление этой решетки по поверхности физиономии.
• Создаётся 3D карта глубинности, что почти что неподвластна для подделки обычной фотографией или маской.

Выигрыши

• Надёжная деятельность даже в полной неосвещённости.
• Высокая защита к фальсификациям.
• Точность определения свыше 99%.

Дополнительные сенсоры

В определённых девайсах применяются также вспомогательные датчики: ToF (Time-of-Flight), которые измеряют время распространения луча до предмета и обратно; Цветные-датчики глубины; специальные оптические дальномеры для построения более точной 3D-модели физиономии.

Эти инновации встречаются наиболее часто во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искуственный разум на работе

Современные механизмы опознания лиц неосуществимы без использования ИИ и machine learning. Именно из-за таким разработкам, как Вулкан 24 Казино, гаджет способно узнавать юзера даже при метаморфозах облика: новая укладка, борода, очки или грим не становятся помехой для открытия.

Распознавание лиц

На стартовом этапе система необходимо оперативно обнаружить образ лица внутри всего снимка камеры. Для данной цели используются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые “обучены” идентифицировать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN способен распознавать лицо даже в случае неполном перекрытии (например, шалью или рукой).

Выделение важных точек

После идентификации лица система, такая как Вулкан 24 Казино, устанавливает местоположение основных точек: кончики глаз, верхушка носа, края губ и так далее. Часто используется от 68 до 128 ключевых точек на лицевой области.

Это действие необходимо для нормализации визуала: если пользователь удерживает телефон под углом, или повернул головку, программа “выпрямляет” изображение до стандартного положения для последующего изучения.

Формирование биометрического модели

Далее нейросеть строит уплотненное математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 флоатов.

Данный образец весьма затруднительно сфальсифицировать: он не хранит непосредственно изображение пользователя, а лишь уникальные характеристики его внешности, что делает его оптимальным для таких платформ, как Vulkan24.

Сравнение и вынесение решения

В случае, когда юзер желает разлочить мобильник взором, система повторяет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно больше 99%), телефон, как и платформа Vulkan24, доступен; если нет — доступ блокируется.

Привыкание к метаморфозам внешнего вида

Занимательная особенность современных системы — возможность самообучения. Если вы постоянно разблокируете мобильное устройство с обновленной стрижкой или очками, система постепенно модернизирует основной образец вашего лица для повышения точности работы без ухудшения безопасности.

Безопасность биометрических данных.

Множество юзеры опасаются держать свои биометрические данные на телефоне из-за угрозы утечки информации или взлома гаджета. Иные фирмы, например Vulkan24, предлагают варианты для увеличения защиты данных клиентов.

• Локальное сбережение: Преимущественно девайсов сохраняет биометрические модели лишь в пределах безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из аппарат и закрыты даже производителю.

• Шифрование: Все информация хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы третьих разработчиков не имеют прямого возможности доступа к биометрическим; они могут лишь запрашивать подтверждение верификации личности через системный API.

Следует отметить существенную подробность: в случае, если кто-либо достанет доступ к вашему телефону физически (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители реализуют защиту от “слепого” разблокирования — к примеру, требуют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют категории распознавания лиц на изображениях?

В настоящее время можно выделить 3 основных способа к выполнению этой задачи:

Программируемое 2D определение

Используется только передняя камера без экстра датчиков глубины. Такой метод встречается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость воплощения; минимальная стоимость; быстрая функционирование при хорошем освещении.
Минусы: просто обмануть фотографией; ненадежная функционирование ночью; недостаточная охрана.

Аппаратное 3D сканирование

Применяет ИК камеру + проекционный модуль пикселей + датчики дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Преимущества: высокая надежность; невозможно обмануть изображение/видеозапись; устойчивая работа при любом освещении.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные способы с ИИ-дополнением

Задействуют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как Вулкан 24 Казино и Google Pixel Face Unlock новейших версий, сочетают фронталку c инфракрасным датчиком движения Soli Radar для предотвращения от подделок жестами/масками/видеоэкранами чужих устройств.

Примеры использования разных способов

• iPhone модели X/11/12/13/14 задействуют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition первый раз представил эквивалент Face ID в числе Android.
• Samsung Galaxy S10/S20 обеспечивают как программное обеспечение плоское распознавание по снимку селфи-камерой, так и сенсор ириса глаза.
• Huawei Mate20 Pro использует комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Проблемы защиты и ложные сигналы

Несмотря на впечатляющий развитие инноваций за прошедшие годы, идеальных механизмов пока не существует:

1. Шанс подвоха: Недорогие смартфоны легко открываются четкой снимком хозяина либо роликом с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные механизмы могут перепутать между однояйцевыми близнецами либо родственниками с очень аналогичной внешностью.
3. Метаморфозы внешности: Резкое снижение веса/увеличение массы тела, пластические операции либо повреждения в некоторых случаях требуют перерегистрации биометрии.
4. Условия фотографирования: Сильная подсветка солнцем или глубокая тень могут понизить аккуратность распознавания признаков.

Вот пара советов по надёжному применению:

• Для важных операций всегда внедряйте дополнительную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
• Систематически апгрейдите программное обеспечение смартфона для обеспечения безопасности от актуальных атак;
• Включайте функцию “Требовать открытых глаз” там, где она имеется.

В каких областях также используется технологии за исключением смартфонов?

Пускай тема этой статьи посвящена конкретно мобильным устройствам, следует отметить других сферах применения технологии:

• Контроль входа в деловых центрах и многоквартирных зданиях;
• Платёжные устройства банков (“Face Pay”);
• Виртуальные паспорта последнего образца;
• Комплексы видеоконтроля городских подразделений;
• Автоматизация учёта посещаемости учебных заведений/институтов;
• Вход участников ПК/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без пластика или мобильника! Похожие проекты развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как меняется технология сегодня?

Всякий годочек проявляются современные мысли для усовершенствования уровня функционирования систем лицевого распознавания:

1. Увеличивается чёткость сенсоров — чем больше информации фиксируется видеокамерой/датчиками глубины, тем меньше шанс ошибки;
2. Улучшаются нейронные сети — передовые архитектуры модели MobileNetV3 обеспечивают возможность быстро адаптироваться к свежим характеристикам облика пользователя непосредственно на девайсе без отправки данных в облако.
3. Совершенствуются методы антиспуфинга — теперь телефоны могут различать реальные движущиеся лица от неподвижных фото/маскировок по незаметным микродвижениям.
4. Синхронизация со умными устройствами — умные часы могут авто заблокировать телефон, если обладатель удалился на значительное расстояние.
5. Возникают гибридные устройства — в частности совмещающие голосовую опознание + лицо + пальцевой отпечаток.

Здесь, какие направления очень востребованы на сегодняшний день:

1) Уменьшение компонентов

Изготовители пытаются уменьшить величину выреза (“чёлки”) под датчики на экране за счёт встраивания маленьких ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на девайсе

Для повышения конфиденциальности всё больше вычислений осуществляется внутри устройства без пересылки информации во сторонний облачный сервис.

3) Упорядочивание стандартов

Гугл интенсивно продвигает эталон BiometricPrompt API, с целью чтобы такие платформы, вроде Вулкан 24, и все Android-программы были совместимы с любыми видами биометрии стандартизированно.

Что подобрать на сегодня?

Если тебе важна предельная сохранность данных, остановите выбор на топовые модели со встроенным ИК-излучателем либо ToF-сенсором глубины.

• iPhone всех последних поколений
• Huawei Mate/Series P ряда
• Mix Professional
• Vivo X модели
• Oppo Find X серии.

Если финансы ограничен – лучше отдавать предпочтение традиционным средствам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в Вулкан 24, использовать только как опциональную возможность удобства.

Каким образом увеличить удобство использования возможности?

Есть некоторые хитростей для тех, кто уже применяет функцию распознавания лица:

1. Периодически меняйте свою изображение-шаблон, если кардинально трансформируется облик.
2. Не упускайте из виду очищать линзу передней камеры – загрязнения могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам включает фотоаппарат когда вы берёте его в руки.
4. Во время регистрационного процесса старайтесь сохранять лицо прямо напротив видеоустройства без значительного наклона головы.
5. Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отворачиваетесь от дисплея.

Будущее прогресса технологии

В предстоящие периоды можно предвкушать появления полностью безконтактных способов распознавания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + манера ходьбы + жесты рук!

Также предполагается появление современных подходов обеспечения приватности – скажем, переменное изменение диджитал образца после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых интересных техник нашего периода! Она обеспечивает взаимодействие со мобильным устройством удобнее чем до этого, и такие аппы, как Vulkan24, могут существенно оптимизировать ваш пользовательский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы знаете, как работает эта система в деталях, – будете в состоянии осознаннее выбирать свой очередной устройство!