Каким способом действует идентификация лиц в смартфонах

Почему мы выбираем разблокирование по фейсу

В недавние времена распознавание физиономий стало одной из самых распространённых функций для деблокировки мобильных телефонов. Еще некоторые годков назад большинство использующих обходились PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением таких технологий, как admiral x, нам вполне лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект превращает эту конкретную особенность настолько популярной? Прежде всего, это комфортно: не нужно помнить сложные пароли или находить нужный палец в тьме. Кроме того, это оперативно: современные алгоритмы узнают лицо фактически за мгновения ока. В-третьем пункте, это чувство футуризма — словно в фильмах про admiral x официальный сайт разведчиков.

Впрочем за такой на первый взгляд легкостью скрывается весь универсум сложных методов и инженерных разработок. Попробуем разобраться, как точно функционирует идентификация по лицу в новейших гаджетах, какие существуют методы, насколько они надёжны и что нас ожидает в будущем.

Короткая хроника эволюции технологии

Распознавание лиц как техника присутствует уже более 50 лет. Начальные пробы автоматического анализа лица были сделаны еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины умели лишь определять контуры черепа и определять дистанции между зрачками и ртом на монохромных снимках.

Изначальные бизнес установки появились в девяностых годах, но они были неидеальны: действовали неспешно и часто давали сбои. Только с развитием синтетических сетей и таких платформ, как адмирал х, мощных мобильных микросхем распознавание лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным распознаванием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие стали интегрировать собственные разработки.

Ключевые этапы действия системы идентификации

Процесс определения лица можно ориентировочно разделить на несколько основных этапов:

Идентификация лиц — устройство выявляет наличие людского образа в кадре.
Извлечение характеристик — механизм анализирует особенности лица: конфигурацию глаз, обонятельного органа, уст, положение надбровных дуг.
Построение структуры — создаётся неповторимый цифровой отпечаток (faceprint) на основе выделенных признаков.
Сравнение со образцом — созданный образец сверяется со записанной при регистрации биометрической данными владельца.
Принятие решения — если сходство достаточно существенное, смартфон разблокируется.

Каждый из этих шагов нуждается в специальных алгоритмов и усовершенствований для оперативной работы прямо на устройстве.

Аппаратные составляющие: что скрыто внутри них

Обычная фронтальная камера.

Самый несложный метод идентификации физиономии задействует лишь фронтальную камеру мобильного устройства. Такой метод осуществлён во многочисленных доступных версиях Android-устройств.

Преимущества:

Необходимо потребляет дополнительных датчиков.
Быстро работает при хорошем свете.

Отрицательные стороны:

Несложно одурачить фотографией или роликом.
Неудачно функционирует при плохом свете или непривычных углах обзора.

Инфракрасная камера и пунктирный проекционный аппарат

Более продвинутые системы, такие как адмирал х, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс является основой Face ID от Apple.

Каким образом это действует:

Точечный проекционный прибор проецирует на облик использующего невидимую сетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 меток).
Инфракрасная камера регистрирует искривление данной сетки по поверхности лица.
Формируется 3D карта глубинности, что практически неосуществима для имитации обычной фотографией или маской.

Преимущества

Надёжная функционирование даже в полной неосвещённости.
Высокая устойчивость к фальсификациям.
Точность распознавания более 99%.

Дополнительные сенсорные устройства

В отдельных устройствах используются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют время прохождения света до цели и обратно; Трехцветные-датчики дальности; специальные оптические измерители расстояния для формирования более точной 3D-модели лица.

Эти технологии используются в основном во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: синтетический ум на исполнении

Современные механизмы опознания физиономий немыслимы при отсутствии эксплуатации ИИ и машинного обучения. Именно из-за таким инновациям, как адмирал х, устройство может идентифицировать пользователя даже при трансформациях внешности: новая стрижка, борода, линзы или макияж не становятся барьером для деблокировки.

Обнаружение физиономии

В начальном шаге система обязана быстро распознать образ лица в пределах полного кадра с камеры. Для этого используются каскадные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые подготовлены распознавать лица людей среди множества других объектов.

Пример: алгоритм MTCNN может обнаруживать физиономию даже при частичном закрытии (например, платком или ладонью).

Выделение важных моментов

После распознавания лица механизм, такая как адмирал х, устанавливает расположение главных точек: кончики глаз, конец носа, края губ и так далее. Как правило применяется от 68 до 128 ключевых точек на лицевой поверхности.

Данное нужно для нормализации картинки: если юзер держит смартфон под углом, или склонил голову, программа “выпрямляет” изображение до стандартного положения для последующего изучения.

Построение биометрического шаблона

Далее нейросеть строит сжатое математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 флоатов.

Такой шаблон крайне затруднительно подделать: он не удерживает само картинку юзера, а лишь исключительные черты его внешности, что делает его совершенным для таких площадок, как admiral-x.

Сравнение и вынесение заключения

Если пользователь хочет разлочить смартфон глазами, механизм повторяет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный порог (обычно больше 99%), телефон, как и платформа admiral-x, доступен; если нет — доступ блокируется.

Адаптация к изменениям внешности

Увлекательная черта нынешних систем — способность самообучения. Если вы постоянно разблокируете мобильное устройство с обновленной прической или очками, программа постепенно модернизирует основной шаблон вашего внешности для увеличения точности действия без снижения уровня безопасности.

Безопасность биометрии данных.

Множество клиенты беспокоятся сохранять свои биометрические данные на мобильном устройстве из-за риска утечки информации или взлома устройства. Некоторые фирмы, такие как admiral-x, предлагают решения для повышения защиты сведений клиентов.

Локальное сбережение: Основная часть аппаратов записывает биометрические модели только внутри защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не выходят из аппарат и недоступны даже производителю.
Шифрование: Все данные хранятся только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Приложения внешних девелоперов не обладают непосредственного возможности доступа к биометрическим; они могут лишь запрашивать факт верификации идентичности через системный API.

Необходимо подчеркнуть существенную подробность: в случае, если кто-то получит доступ к вашему телефону физически (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество изготовители осуществляют систему защиты от неосознанного разблокирования — например, требуют разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют типы распознавания лиц на изображениях?

На сегодняшний день можно различить три главных способа к осуществлению этой операции:

Программируемое двухмерное распознавание

Эксплуатируется только передняя видеокамера без дополнительных датчиков дистанции. Этот метод используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота реализации; низкая цена; оперативная деятельность при достаточном свете.
Минусы: просто одурачить снимком; ненадежная работа ночью; слабая защищенность.

Техническое трёхмерное оцифровка

Задействует инфракрасную камеру + проекционный модуль точек + сенсоры дистанции (Face ID от Apple; аналогичные решения у Huawei Mate).
Преимущества: большая надежность; нельзя исказить фото/видео; устойчивая работа при любом освещении.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные подходы с ИИ-дополнением

Используют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, как адмирал х и Google Pixel Face Unlock последних поколений, объединяют фронталку c ИК датчиком движения Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами посторонних устройств.

Образцы применения разнообразных способов

iPhone модели X/11/12/13/14 задействуют только физическое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition впервые представил аналог Face ID в ряду Android.
Samsung Galaxy S10 модель/S20 обеспечивают как программное двухмерное распознавание по снимку фронтальной камерой, так и датчик глазного ириса.
Huawei Mate20 Pro задействует систему из ИК-освещения + Dot Projector + ToF-сенсор

Трудности защиты и ложные срабатывания

Несмотря на поразительный прогресс инноваций за последние годы, безупречных системы пока не наблюдается:

Вероятность обмана: Недорогие мобильники без труда открываются высококачественной изображением пользователя или же видео с экрана другого устройства.
Идентичные близняшки: Даже самые безупречные системы могут ошибиться между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
Трансформации внешнего вида: Резкое снижение веса/набор веса, пластические операции либо повреждения порой необходимы для обновления данных биометрических данных.
Условия фотографирования: Интенсивная засветка солнцем либо плотная затенение могут понизить аккуратность распознавания признаков.

Ниже некоторые подсказок для надёжному применению:

Для критически важных операций всегда применяйте двухэтапную аутентификацию;
Не активируйте опцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
Систематически апгрейдите ПО мобильного устройства для защиты от актуальных атак;
Включайте функцию “Требовать открытых глаз” в тех местах, где она имеется.

В каких местах также находится применение технология кроме смартфонов?

Несмотря на то, что тема данной публикации посвящена конкретно портативным гаджетам, следует отметить прочих направлениях внедрения технологии:

Контроль прохода в рабочих помещениях и жилых домах;
Платёжные устройства финансовых учреждений (“Face Pay”);
Цифровые идентификационные документы последнего поколения;
Комплексы видеомониторинга городских служб;
Автоматизация отслеживания присутствия образовательных учреждений/вузов;
Авторизация пользователей компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — хватит пройти через турникет без карты или мобильника! Аналогичные инициативы реализуются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как изменяется технология сегодня?

Каждый год появляются свежие концепции для улучшения стандарта функционирования систем идентификации лиц:

Увеличивается детализация сенсорных устройств — чем больше деталей фиксируется камерой/датчиками глубины, тем меньше вероятность погрешности;
Улучшаются нейросети — передовые конструкции типа MobileNetV3 позволяют скоростно осваивать дополнительным характеристикам облика пользователя напрямую на гаджете без отправки данных в облако.
Улучшаются технологии антиспуфинга — теперь смартфоны умеют отличать настоящие анимированные облики от статичных снимков/маскировок по микроскопическим микродвижениям.
Взаимодействие со смарт-гаджетами — интеллектуальные часы могут самостоятельно заблокировать мобильный телефон, если обладатель ушёл далеко.
Проявляются смешанные механизмы — к примеру комбинирующие голосовую идентификацию + лицо + дактилоскопический след.

Вот, те тренды особенно популярны сейчас:

1) Миниатюризация компонентов

Производители намереваются сократить габариты прорези (“чёлки”) под сенсоры на дисплее за счёт встраивания маленьких ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на девайсе

Для улучшения приватности всё больше обработки данных выполняется локально без пересылки информации во дополнительный облачный услугу.

3) Унификация стандартов

Google интенсивно пропагандирует эталон BiometricPrompt API, для того чтобы аналогичные платформы, как admiral x, и все Android-программы могли взаимодействовать с любыми видами биометрии единообразно.

Что подобрать сегодня?

Когда вам всем важна наивысшая сохранность данных, подбирайте флагманские модели со встроенным ИК-излучателем или ToF-сенсором глубины.

iPhone каждого актуальных поколений
Huawei Mate/Series P серии
Mix Expert
Vivo X серии
Oppo Обнаружить X линейки.

Если финансы невелик – лучше выбирать классическим способам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в admiral x, применять только как дополнительную возможность удобства.

Каким образом увеличить удобство использования опции?

Есть пара советов для людей, кто уже использует разблокировку через лицо:

Регулярно меняйте свою фотографию-шаблон, если значительно меняется внешний вид.
Не забывайте чистить линзу фронтальной камеры – пятна могут понизить четкость!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам включает фотоаппарат как только вы поднимаете его.
Во время регистрации пытайтесь сохранять голову ровно напротив видеоустройства без резкого наклона головы.
Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отворачиваетесь от экрана.

Перспективы развития техники

В предстоящие периоды можно предполагать развития полностью бесконтактных способов идентификации человека сразу по нескольким биометрическим параметрам одновременно: облик + звучание + манера ходьбы + жесты рук!

Также предполагается развитие свежих подходов защиты личной информации – к примеру, изменяющееся модификация электронного шаблона после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – единственная из очень захватывающих техник нашего эпохи! Она делает взаимодействие со смартфоном комфортнее чем до этого, и такие аппы, как admiral-x, могут существенно повысить ваш опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы понимаете, как работает эта методика в деталях, – будете в состоянии более осмысленно подбирать свой будущий девайс!