Как работает идентификация лиц в смартфонах

Зачем мы останавливаемся на разблокировку по лицевому распознаванию

В недавние годы распознавание лиц является одной из самых распространённых опций для деблокировки мобильных телефонов. Еще пару годков тому назад большинство использующих обходились PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением подобных технологий, как Вулкан 24, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Что обуславливает эту конкретную функцию очень нужной? Во-первых, это комфортно: не нужно помнить трудные пароли или отыскивать верный палец в мраке. Во-вторых, это оперативно: современные алгоритмы узнают лицо фактически за мгновение. В-третьем пункте, это чувство футуристичности — будто в фильмах про вулкан казино агентов.

Тем не менее за этой видимой простотой прячется целый вселенная сложных техник и инженерных концепций. Попробуем разобраться, как конкретно работает фейсканирование в новейших смартфонах, какие бывают методы, насколько они надёжны и что нас ожидает в будущем.

Сжатая хроника эволюции инноваций

Распознавание лиц как технология присутствует уже более 50 лет. Начальные пробы автоматизированного анализа лица были предприняты еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ способны были лишь обозначать силуэты черепа и определять расстояния между зрачками и устами на монохромных снимках.

Начальные коммерческие системы появились в 90-х, но они были неидеальны: действовали неспешно и нередко ошибались. Только с прогрессом синтетических сетей и таких систем, как Вулкан 24 Казино, мощных мобильных процессоров идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным распознаванием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные решения.

Основные этапы действия устройства идентификации

Процесс идентификации лица можно ориентировочно сегментировать на несколько ключевых этапов:

1. Идентификация лиц — устройство определяет присутствие гуманного образа в изображении.
2. Извлечение особенностей — механизм изучает особенности физиономии: конфигурацию зрительных органов, носа, губ, расположение надбровных дуг.
3. Построение структуры — создаётся неповторимый цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с стандартом — полученный модель сопоставляется с сохранённой при регистрации биометрической сведениями владельца.
5. Принятие решения — если соответствие достаточно существенное, смартфон открывается.

Всякий из указанных стадий требует индивидуальных методов и оптимизаций для оперативной работы прямо на устройстве.

Железные составляющие: что скрыто внутри них

Типичная фронтальная камера.

Простейший легкий метод распознавания облика задействует только лицевую камеру смартфона смартфона. Такой метод внедрён во многих недорогих вариантах Android-устройств.

Плюсы:

• Необходимо потребляет внешних датчиков.
• Шустро работает при хорошем освещении.

Отрицательные стороны:

• Просто обмануть снимком или видео.
• Неправильно функционирует при плохом освещении или необычных точках зрения.

ИК фотокамера и точечный проекционный аппарат

Более совершенные системы, такие как Вулкан 24 Казино, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс лежит в основе Face ID от Apple.

Каким способом это функционирует:

• Точечный проекционный прибор показывает на облик использующего невидимую решетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 меток).
• ИК камера записывает искривление этой решетки по поверхности физиономии.
• Получается трехмерная карта глубины глубинности, которая практически неосуществима для фальсификации стандартной фото или маскировкой.

Выигрыши

• Надёжная функционирование даже в полной неосвещённости.
• Высокая сопротивляемость к подделкам.
• Точность распознавания более 99%.

Добавочные сенсорные устройства

В отдельных девайсах применяются также дополнительные датчики: ToF (Time-of-Flight), которые измеряют время движения луча до предмета и обратно; RGB-датчики дальности; специальные лазерные измерители расстояния для построения более аккуратной 3D-модели физиономии.

Эти разработки встречаются чаще всего во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искуственный ум в действии

Текущие системы распознавания физиономий невозможны в отсутствие применения ИИ и машинного обучения. Именно благодаря таким разработкам, как Вулкан 24 Казино, устройство может идентифицировать владельца даже при метаморфозах внешности: новая укладка, растительность на лице, очки или косметика не становятся помехой для разблокировки.

Распознавание лица

При первом этапе программа необходимо оперативно найти ликовое изображение среди целого изображения с камеры. Для этой задачи задействуются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые « обучены » находить человеческие лица среди множества других объектов.

Пример: процесс MTCNN способен обнаруживать физиономию даже в случае частичном закрытии (например, платком или рукой).

Выделение ключевых точек

После идентификации лица система, такая как Вулкан 24 Казино, определяет местоположение основных точек: края глаз, кончик носа, контуры губ и так далее. Часто задействуется от 68 до 128 ключевых маркеров на лицевой поверхности.

Это действие требуется для стабилизации картинки: если пользователь находится с смартфон под наклоненным, или склонил голову, программа корректирует картинку до нормального состояния для последующего изучения.

Построение биометрического образца

Далее нейронная сеть строит компактное математическое представление (« эмбеддинг ») облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Данный формат крайне затруднительно сфальсифицировать: он не хранит непосредственно картинку юзера, а лишь исключительные черты его вида, что делает его оптимальным для таких систем, как Vulkan24.

Сопоставление и принятие решения

Если человек хочет разблокировать телефон взором, система повторяет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный порог (обычно выше 99%), телефон, как и платформа Vulkan24, разблокируется; если нет — доступ не предоставляется.

Привыкание к трансформациям облика

Занимательная черта нынешних системы — возможность самообучения. Если вы регулярно разблокируете телефон с новой прической или очками, алгоритм постепенно освежает основной образец вашего внешности для улучшения точности функционирования без ухудшения безопасности.

Охрана биометрических информации.

Многие клиенты боятся хранить свои биометрические данные на мобильном устройстве из-за угрозы утечки информации или взлома гаджета. Определенные компании, например Vulkan24, предоставляют методы для повышения сохранности информации пользователей.

• Локальное хранение: Большинство девайсов хранит био-идентификационные шаблоны исключительно внутри защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не оставляют аппарат и не доступны включая производителю.

• Шифрование: Все сведения сберегаются только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих девелоперов не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать подтверждение подтверждения идентичности через системный API.

Необходимо подчеркнуть существенную деталь: в случае, если кто-либо достанет доступ к вашему телефону физически (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие изготовители реализуют систему защиты от автоматического разблокирования — например, требуют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют типы распознавания лиц?

В настоящее время можно определить различить три главных метода к осуществлению этой задачи:

Софтверное двухмерное идентификация

Применяется только лицевая видеокамера без вспомогательных детекторов дистанции. Этот метод используется чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность осуществления; минимальная стоимость; быстрая деятельность при достаточном свете.
Минусы: легко обмануть снимком; нестабильная деятельность ночью; низкая безопасность.

Аппаратное трёхмерное сканирование

Задействует ИК камеру + проекционный модуль точек + датчики дистанции (Face ID от Apple; подобные решения у Huawei Mate).
Преимущества: высокая надёжность; не получится обмануть фото/видео; устойчивая работа при любом освещении.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (« чёлка »)

Гибридные методы с интеграцией ИИ

Задействуют комбинацию софтверных методов + техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (« anti-spoofing »). Например, подобные изделия, например Вулкан 24 Казино и Google Pixel Face Unlock новейших поколений, комбинируют фронталку c ИК сенсором мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Иллюстрации применения разных методов

• iPhone линейки X/11/12/13/14 используют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил аналог Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 имеют как софтверное двухмерное определение по снимку селфи-камерой, так и датчик ириса глаза.
• Huawei Mate20 Pro использует комплекс из ИК-подсветки + Dot Projector + ToF-сенсор

Проблемы безопасности и ложные срабатывания

Несмотря на впечатляющий успехи инноваций за прошедшие годы, безупречных систем пока не наблюдается:

1. Вероятность подвоха: Доступные мобильники просто « разблокируются » качественной фотографией хозяина или же видеозаписью с экрана другого устройства.
2. Идентичные двойняшки: Даже самые совершенные системы могут ошибиться между монозиготными близнецами либо семьями с очень похожей внешностью.
3. Трансформации облика: Стремительное утрата веса/набор веса, пластические операции или повреждения иногда необходимы для повторной регистрации биометрии.
4. Условия съёмки: Сильная освещённость солнечным светом или интенсивная затенение могут снизить аккуратность распознавания признаков.

Вот несколько советов по защищённому эксплуатации:

• Для критически важных операций всегда применяйте дополнительную аутентификацию;
• Не активируйте функцию « Разблокировка по лицу » на дешёвых устройствах без ИК-сенсоров;
• Систематически обновляйте прошивку прошивку телефона для обеспечения безопасности от актуальных атак;
• Включайте настройку « Требовать открытых глаз » везде, где она имеется.

В каких местах также используется технологии за исключением смартфонов?

Несмотря на то, что тема нашей работы сосредоточена на в частности портативным гаджетам, стоит упомянуть о других сферах применения технологии:

• Управление доступа в офисах и резиденциях;
• Платёжные терминалы банков (« Face Pay »);
• Цифровые идентификационные документы последнего образца;
• Установки видеоконтроля городских сервисов;
• Автоматизирование регистрации посещаемости образовательных учреждений/университетов;
• Аутентификация юзеров компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система платежа проезда по фейсу (« Face Pay ») — нужно лишь пройти через барьер без карты или мобильника! Аналогичные проекты реализуются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как изменяется технический процесс сегодня?

Каждый год проявляются современные идеи для повышения качества функционирования систем распознавания лиц:

1. Увеличивается разрешение сенсорных устройств — чем больше деталей фиксируется камерой/датчиками глубины, тем меньше вероятность неточности;
2. Улучшаются искусственные интеллекты — передовые структуры вида MobileNetV3 дают возможность оперативно осваивать свежим чертам вида обладателя прямо на устройстве без отправки данных в облако.
3. Совершенствуются методы антиспуфинга — теперь телефоны умеют отличать настоящие живые облики от неподвижных снимков/масок по микроскопическим движениям кожи.
4. Интеграция со интеллектуальными приборами — смарт-часы могут самостоятельно заблокировать смартфон, если владелец ушёл далеко.
5. Проявляются комбинированные устройства — к примеру комбинирующие голосовую опознание + лицо + пальцевой отпечаток.

Здесь, те тенденции в особенности востребованы на сегодняшний день:

1) Сокращение деталей

Производители стараются сократить размер выреза (« чёлки ») под датчики на дисплее за счёт внедрения компактных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для повышения личной безопасности всё больше обработки данных осуществляется локально без передачи информации во сторонний облачный сервис.

3) Упорядочивание регламентов

Google активно продвигает норму BiometricPrompt API, чтобы такие площадки, например как Вулкан 24, и любые Android-аппы были совместимы с различными типами биометрии единообразно.

Какое выбрать на сегодня?

В случае если тебе нужна наивысшая сохранность данных, подбирайте флагманские модели с интегрированным ИК-проектором либо ToF-датчиком глубины.

• iPhone всех существующих актуальных версий
• Huawei Partner/P серии
• Mi Professional
• Vivo X линейки
• Oppo Обнаружить Икс серии.

Если бюджет невелик – лучше выбирать обычным способам защиты (PIN-код/сканер пальца), а опцию « разблокировка по лицу », такую как в Вулкан 24, применять только как второстепенную возможность удобства.

Каким способом улучшить практичность работы функции?

Есть некоторые советов для тех, кто уже использует разблокировку по лицу:

1. Периодически меняйте свою изображение-шаблон, если значительно изменяется облик.
2. Не упускайте из виду чистить линзу передней камеры – пятна могут понизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам запускает камеру если вы берёте его в руки.
4. При регистрационного процесса постарайтесь удерживать голову ровно напротив камеры без сильного наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отворачиваетесь от экрана.

Перспективы развития технологии

В предстоящие периоды можно предвкушать развития полностью бесконтактных способов распознавания персоны сразу по нескольким биометрическим параметрам одновременно: лицо + речь + походка + жесты рук!

Также вероятно появление новых способов обеспечения конфиденциальности – например, изменяющееся корректировка электронного образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – единственная из самых интересных техник нашего периода! Она обеспечивает интеракцию со телефоном удобнее чем до этого, и такие приложения, как Vulkan24, могут в разы улучшить ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как функционирует эта технология изнутри, – сможете осознаннее подбирать свой будущий девайс!