Каким способом функционирует идентификация лиц в смартфонах

Зачем мы предпочитаем разблокировку по лицевому распознаванию

В недавние времена распознавание физиономий является одной из самых популярных возможностей для разблокировки умных телефонов. Еще несколько годков ранее большинство юзеров довольствовались PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением подобных технологий, например Вулкан Платинум, нам достаточно лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какой аспект превращает эту конкретную возможность такой востребованной? Для начала, это комфортно: не нужно помнить замысловатые пароли или находить нужный палец в темноте. Кроме того, это быстро: современные системы распознают лицо фактически за мгновение. В-третьем пункте, это ощущение будущего — как будто в кинолентах про вулкан платинум зеркало агентов.

Впрочем за такой на первый взгляд простотой прячется целый вселенная сложных методов и инженерных решений. Давайте разобраться, как точно функционирует фейсканирование в новейших мобильных телефонах, какие существуют методы, насколько они надёжны и что нас ждёт впереди.

Сжатая история прогресса техники

Идентификация лиц как методика присутствует уже более пятидесяти годов. Первые пробы машинного исследования облика были осуществлены еще в 1960-х годах в лабораториях США. Тогда ЭВМ могли лишь выделять очертания головы и определять промежутки между глазами и ртом на ахроматических изображениях.

Первые коммерческие системы появились в девяностых годах, но они были неидеальны: функционировали медленно и часто давали сбои. Только с развитием нейронных сетей и таких систем, как Vulkan Platinum, высокопроизводительных мобильных процессоров идентификация лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным сканированием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные решения.

Ключевые стадии действия механизма идентификации

Процесс определения лица можно ориентировочно сегментировать на несколько важных этапов:

1. Распознавание лиц — устройство распознает наличие человеческого образа в снимке.
2. Определение признаков — система изучает черты облика: очертания зрительных органов, носа, губ, расположение надбровных дуг.
3. Построение шаблона — создаётся уникальный виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с эталоном — полученный модель сравнивается со сохранённой при внесении биометрической данными владельца.
5. Принятие решения — если сходство достаточно существенное, смартфон деблокируется.

Всякий из этих шагов запрашивает специальных методов и усовершенствований для быстрой работы непосредственно на девайсе.

Технические составляющие: что находится внутри

Стандартная селфи камера.

Самый несложный способ определения лица задействует только лицевую камеру смартфона смартфона. Данный способ внедрён во многих недорогих моделях Android-устройств.

Сильные стороны:

• Не нуждается в требует дополнительных датчиков.
• Шустро действует при хорошем освещении.

Недостатки:

• Просто обмануть изображением или видеозаписью.
• Плохо функционирует при плохом освещённости или нестандартных точках зрения.

Инфракрасная камера и точечный проектор

Более продвинутые системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика является основой Face ID от Apple.

Каким способом это работает:

• Точечный устройство проекции отображает на физиономию пользователя невидимую структуру из тысяч инфракрасных меток (например, Face ID применяет около 30 000 меток).
• Инфракрасная камера фиксирует изменение формы этой решетки по поверхности физиономии.
• Формируется трёхмерная карта глубины глубинности, которая почти неподвластна для подделки стандартной фотографией или маской.

Преимущества

• Надёжная работа даже в полной темноте.
• Большая сопротивляемость к фальсификациям.
• Точность идентификации свыше 99%.

Добавочные датчики

В отдельных аппаратах используются также экстра сенсоры: ToF (Time-of-Flight), которые определяют время прохождения луча до объекта и обратно; Цветные-датчики дальности; специальные лазерные дальномеры для построения более детализированной 3D-модели лица.

Эти разработки используются чаще всего во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: синтетический ум на работе

Текущие устройства распознавания лиц неосуществимы при отсутствии применения искусственного интеллекта и машинного обучения. Именно из-за таким технологиям, как Vulkan Platinum, гаджет способно распознавать юзера даже при метаморфозах внешнего вида: новая укладка, щетина, оптика или грим не становятся помехой для разблокировки.

Детектирование физиономии

На начальном шаге алгоритм должна мгновенно распознать образ лица в пределах всего кадра камеры. Для данной цели применяются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые „обучены“ находить человеческие лица среди множества других объектов.

Пример: процесс MTCNN может распознавать физиономию даже с частичном закрытии (например, шарфом или ладонью).

Определение ключевых моментов

После обнаружения лица система, такая как Vulkan Platinum, вычисляет положение основных точек: уголки глаз, конец носа, края губ и так далее. Как правило применяется от 68 до 128 ключевых меток на лицевой поверхности.

Это действие требуется для нормализации визуала: если юзер держит смартфон под наклоненным, или повернул головку, программа „выпрямляет“ изображение до стандартного положения для дальнейшего анализа.

Создание биометрического идентификатора шаблона

Далее искусственная сеть строит компактное числовое представление („эмбеддинг“) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Данный шаблон весьма сложно подделать: он не сохраняет непосредственно изображение юзера, а лишь уникальные характеристики его внешности, что делает его идеальным для таких систем, как Вулкан Казино Платинум.

Сопоставление и осуществление решения

В случае, когда человек хочет разблокировать мобильник взглядом, механизм осуществляет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный границу (обычно превышает 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ запрещается.

Приспособление к изменениям внешности

Занимательная особенность современных систем — возможность самостоятельного обучения. Если вы регулярно разблокируете смартфон с новой укладкой или очками, алгоритм постепенно освежает эталонный шаблон вашего внешности для улучшения точности функционирования без снижения уровня безопасности.

Защита биометрии информации.

Многие юзеры беспокоятся сохранять свои биометрические данные на мобильном устройстве из-за угрозы утечки информации или хакерской атаки. Определенные фирмы, вроде Вулкан Казино Платинум, предлагают методы для повышения безопасности данных юзеров.

• Локальное хранение: Преимущественно аппаратов хранит биометричные шаблоны только внутри защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не выходят из гаджет и не доступны в том числе изготовителю.

• Шифрование: Все информация сохраняются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Программы внешних девелоперов не имеют непосредственного доступа к биометрическим; они могут лишь требовать подтверждение подтверждения личности через системный API.

Следует упомянуть существенную подробность: в случае, если какой-то человек достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании осуществляют систему защиты от „слепого“ разблокирования — в частности, заставляют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие бывают виды распознавания лиц на изображениях?

В настоящее время можно выделить определить 3 основных подхода к реализации этой функции:

Программируемое 2D определение

Применяется только фронтальная камера без дополнительных датчиков дистанции. Подобный подход наблюдается чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; низкая стоимость; скоростная деятельность при достаточном свете.
Минусы: легко ввести в заблуждение фотографией; ненадежная функционирование ночью; низкая безопасность.

Техническое 3D оцифровка

Применяет ИК камеру + проектор пикселей + сенсоры дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Достоинства: высокая достоверность; нельзя исказить изображение/видеозапись; стабильная деятельность при любом освещении.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана („чёлка“)

Смешанные подходы с интеграцией ИИ

Применяют комбинацию программируемых методов + аппаратную обработку + постобработку нейросетями для увеличения устойчивости к атакам („anti-spoofing“). Например, подобные продукты, например Vulkan Platinum и Google Pixel Face Unlock новейших поколений, объединяют фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями посторонних устройств.

Образцы использования разных способов

• iPhone модели X/11/12/13/14 применяют только физическое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил подобие Face ID среди Android.
• Samsung Galaxy S10/S20 обеспечивают как софтверное двухмерное определение по фото селфи-камерой, так и сенсор ириса глаза.
• Huawei Mate20 Pro применяет систему из ИК-подсветки + Dot Projector + ToF-датчик

Трудности охраны и ложные срабатывания

Несмотря на поразительный прогресс технологий за недавние лет, безупречных систем пока не наблюдается:

1. Возможность подвоха: Бюджетные мобильники просто открываются высококачественной изображением пользователя либо видеозаписью с экрана другого устройства.
2. Идентичные близнецы: Даже самые безупречные системы могут ошибиться между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
3. Трансформации внешности: Внезапное похудение/набор веса, косметические процедуры либо травмы иногда требуют обновления данных биометрии.
4. Условия съёмки: Яркая подсветка солнечным светом или же глубокая тень могут снизить точность определения признаков.

Ниже некоторые советов по защищённому эксплуатации:

• Для значимых операций всегда внедряйте двухфакторную аутентификацию;
• Не активируйте возможность „Разблокировка по лицу“ на бюджетных аппаратах без ИК-сенсоров;
• Систематически обновляйте прошивку смартфона для предотвращения угроз от новых видов атак;
• Включайте настройку „Требовать открытых глаз“ везде, где она доступна.

Где также находится применение технология за исключением смартфонов?

Хотя тема этой публикации посвящена в частности смартфонам и планшетам, стоит упомянуть о других сферах применения технологии:

• Контроль прохода в деловых центрах и резиденциях;
• Платёжные терминалы банков („Face Pay“);
• Цифровые паспорта нового поколения;
• Комплексы видеомониторинга городских сервисов;
• Автоматизация учёта посещаемости школ/вузов;
• Вход юзеров компьютеров/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по фейсу („Face Pay“) — хватит пройти через барьер без пластика или телефона! Аналогичные инициативы осуществляются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом изменяется техпроцесс в наше время?

Всякий годик появляются свежие концепции для усовершенствования стандарта работы систем идентификации лиц:

1. Увеличивается разрешение сенсорных устройств — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше шанс неточности;
2. Развиваются нейронные сети — новейшие архитектуры модели MobileNetV3 обеспечивают возможность быстро осваивать дополнительным характеристикам внешности обладателя прямо на устройстве без пересылки информации в облачное хранилище.
3. Развиваются технологии антиспуфинга — теперь смартфоны могут отличать подлинные анимированные лица от фиксированных снимков/масок по мельчайшим движениям кожи.
4. Интеграция со умными устройствами — умные часы могут автоматически блокировать мобильный телефон, если обладатель удалился на значительное расстояние.
5. Возникают гибридные механизмы — в частности совмещающие голосовую аутентификацию + лицо + дактилоскопический след.

Вот, которые направления особенно востребованы на сегодняшний день:

1) Сокращение элементов

Производители стараются минимизировать размер прорези („чёлки“) под датчики на дисплее за счёт внедрения компактных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для улучшения приватности всё более обработки данных выполняется на месте без передачи данных во сторонний облачный услугу.

3) Упорядочивание норм

Гугл интенсивно продвигает эталон BiometricPrompt API, чтобы такие площадки, например как Вулкан Платинум, и каждые Android-программы были совместимы с различными типами биометрии унифицированно.

Какое подобрать на сегодня?

Если вам всем необходима предельная безопасность данных, остановите выбор на флагманские устройства с интегрированным ИК-излучателем или ToF-сенсором глубины.

• iPhone всех существующих актуальных версий
• Huawei Mate/Series P ряда
• Mix Professional
• Vivo X серии
• Oppo Обнаружить Х линейки.

Если финансы невелик – лучше выбирать традиционным методам безопасности (PIN-код/сканер отпечатка), а опцию „разблокировка по лицу“, такую как в Вулкан Платинум, использовать только как опциональную возможность комфорта.

Как улучшить практичность работы функции?

Есть пара хитростей для людей, кто уже пользуется разблокировку через лицо:

1. Регулярно обновляйте свою изображение-шаблон, если сильно трансформируется облик.
2. Не пренебрегайте протирать объектив фронтальной камеры – загрязнения могут уменьшить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам активирует камеру как только вы поднимаете его.
4. При регистрации постарайтесь сохранять голову неподвижно напротив камеры без значительного наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвернулись от дисплея.

Будущее прогресса технологии

В скоро наступающие времена можно предвкушать появления полностью безконтактных способов опознания персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + звучание + шаги + манипуляции руками!

Также возможно возникновение свежих способов обеспечения конфиденциальности – скажем, динамическое корректировка диджитал паттерна после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из очень увлекательных техник нашего периода! Она делает взаимодействие со смартфоном комфортнее чем до этого, и такие аппы, как Вулкан Казино Платинум, могут в разы оптимизировать ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как работает эта технология изнутри, – сможете более осмысленно подбирать свой будущий гаджет!