Каким образом работает определение лицевых образов в смартфонах

Для чего мы предпочитаем разблокирование по фейсу

В последние годы распознавание лиц стало одной из наиболее востребованных функций для деблокировки умных телефонов. Лишь пару годков назад большинство использующих довольствовались пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением подобных технологий, например Вулкан Платинум, нам вполне лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что превращает эту функцию такой востребованной? Во-первых, это практично: не нужно помнить сложные пароли или находить правильный палец в темноте. Также, это мгновенно: современные алгоритмы распознают лицо практически за мгновения ока. В-третьем пункте, это впечатление будущего — словно в фильмах про вулкан платинум зеркало разведчиков.

Впрочем за данной на первый взгляд легкостью скрывается полный мир сложных техник и инженерных концепций. Давайте понять, как точно функционирует фейсканирование в актуальных смартфонах, какие существуют технологии, насколько они безопасны и что нас предстоит.

Краткая история развития техники

Распознавание лиц как технология присутствует уже более пятидесяти лет. Начальные пробы автоматизированного анализа облика были сделаны еще в 1960-х годах в лабораториях США. Тогда компьютеры могли лишь обозначать контуры головы и вычислять дистанции между глазами и устами на черно-белых фотографиях.

Первые коммерческие установки возникли в 90-х, но они были далеки от совершенства: функционировали медленно и часто ошибались. Только с развитием синтетических сетей и таких площадок, как Vulkan Platinum, высокопроизводительных мобильных процессоров распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным идентификацией лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять личные решения.

Главные шаги функционирования механизма распознавания

Процесс идентификации лица можно ориентировочно поделить на несколько ключевых этапов:

1. Идентификация лиц — устройство определяет существование гуманного образа в изображении.
2. Определение особенностей — система анализирует контуры лица: конфигурацию глаз, носа, губ, позицию бровей.
3. Построение структуры — создаётся неповторимый цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со образцом — созданный шаблон сверяется со зафиксированной при регистрации биометрической сведениями владельца.
5. Принятие определения — если соответствие достаточно значительное, смартфон деблокируется.

Всякий из данных стадий нуждается в специальных процедур и улучшений для быстрой работы прямо на устройстве.

Технические компоненты: что прячется в их недрах

Стандартная передняя камера.

Простейший несложный способ определения облика задействует исключительно лицевую камеру смартфона мобильного устройства. Такой подход внедрён во многочисленных бюджетных вариантах Android-устройств.

Преимущества:

• Необходимо требует дополнительных датчиков.
• Шустро работает при качественном освещённости.

Отрицательные стороны:

• Легко одурачить фотографией или видео.
• Неправильно действует при плохом свете или непривычных точках зрения.

ИК фотокамера и пунктирный проектор

Более совершенные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика является основой Face ID от Apple.

Как это работает:

• Точечный проекционный прибор проецирует на физиономию юзера невидимую сетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 меток).
• Инфракрасная устройство записывает деформацию этой сетки по плоскости физиономии.
• Создаётся трехмерная карта глубинности, которая почти неосуществима для фальсификации стандартной фотографией или маскировкой.

Достоинства

• Надёжная работа даже в полной темноте.
• Сильная защита к имитациям.
• Точность идентификации выше 99%.

Добавочные датчики

В определённых девайсах используются также вспомогательные датчики: ToF (Time-of-Flight), которые определяют период распространения света до предмета и обратно; RGB-датчики глубины; специальные световые лидары для построения более детализированной 3D-модели лица.

Эти инновации применяются чаще всего во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искусственный ум на исполнении

Нынешние устройства опознания лиц неосуществимы при отсутствии применения ИИ и машинного обучения. Именно из-за таким разработкам, как Vulkan Platinum, гаджет в состоянии идентифицировать пользователя даже при метаморфозах облика: новая укладка, щетина, линзы или косметика не становятся препятствием для разблокировки.

Обнаружение физиономии

На первом этапе система необходимо оперативно обнаружить образ лица в пределах всего изображения камеры. Для данной цели используются многоуровневые классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые натренированы находить лиц человека среди множества других объектов.

Пример: алгоритм MTCNN в состоянии находить лицо даже при частичном закрытии (например, шалью или ладонью).

Идентификация ключевых аспектов

После обнаружения лица система, такая как Vulkan Platinum, вычисляет расположение основных точек: края глаз, кончик носа, края губ и так далее. Как правило применяется от 68 до 128 ключевых маркеров на лице.

Это действие нужно для нормализации визуала: если юзер находится с мобильник под углом, или повернул головку, программа исправляет изображение до стандартного положения для последующего изучения.

Построение биометрии образца

Далее нейронная сеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 флоатов.

Этот шаблон очень сложно имитировать: он не хранит непосредственно картинку пользователя, а лишь особенные черты его облика, что делает его оптимальным для таких площадок, как Вулкан Казино Платинум.

Сравнительный анализ и вынесение заключения

Если человек намеревается разблокировать мобильник взором, система осуществляет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый порог (обычно превышает 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ блокируется.

Адаптация к трансформациям облика

Интересная характеристика нынешних систем — способность самостоятельного обучения. Если вы регулярно доступаете к мобильное устройство с новой прической или оптикой, алгоритм постепенно модернизирует базовый шаблон вашего облика для увеличения точности действия без ухудшения безопасности.

Охрана биометрии данных.

Многие пользователи боятся держать свои био-идентификационные данные на смартфоне из-за угрозы потери данных или взлома гаджета. Определенные организации, такие как Вулкан Казино Платинум, предоставляют варианты для улучшения защиты данных клиентов.

• Локальное хранение: Преимущественно девайсов сохраняет биометрические образцы только внутри защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают устройство и закрыты даже изготовителю.

• Шифрование: Все данные сберегаются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Программы сторонних девелоперов не обладают прямого доступа к биометрическим данным; они могут лишь запрашивать факт верификации идентичности через системный API.

Следует подчеркнуть важную деталь: если кто-либо получит физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие компании осуществляют меры безопасности от автоматического разблокирования — в частности, просят раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются виды определения лиц на изображениях?

Сегодня можно выделить различить три ключевых подхода к выполнению этой операции:

Программируемое двухмерное распознавание

Используется только лицевая камера без экстра сенсоров глубины. Подобный метод встречается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость реализации; минимальная цена; быстрая деятельность при качественном освещении.
Минусы: просто одурачить снимком; ненадежная деятельность ночью; низкая безопасность.

Аппаратное трёхмерное сканирование

Задействует ИК камеру + проекционный модуль пикселей + датчики дистанции (Face ID от Apple; подобные решения у Huawei Mate).
Преимущества: высокая достоверность; невозможно подделать изображение/видеозапись; стабильная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с ИИ-дополнением

Используют комбинацию программируемых методов + аппаратную обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, например Vulkan Platinum и Google Pixel Face Unlock современных поколений, объединяют фронталку c инфракрасным датчиком мобильности Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами посторонних устройств.

Образцы применения разнообразных техник

• iPhone модели X/11/12/13/14 применяют только аппаратное трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз предложил аналог Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 имеют как программное обеспечение 2D идентификацию по изображению фронталкой, так и сканер глазного ириса.
• Huawei Mate20 Pro использует набор из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Вопросы безопасности и ложные сигналы

Несмотря на поразительный развитие техники за последние лет, совершенных системы пока не существует:

1. Возможность мошенничества: Доступные смартфоны просто “разблокируются” качественной изображением хозяина или роликом с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые безупречные механизмы могут спутать между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
3. Метаморфозы облика: Внезапное утрата веса/набор веса, хирургические вмешательства либо повреждения в некоторых случаях необходимы для повторной регистрации биометрических данных.
4. Условия записи: Яркая освещённость солнцем либо глубокая темнота могут понизить верность идентификации признаков.

Вот пара подсказок по защищённому использованию:

• Для критически важных операций всегда внедряйте двухфакторную аутентификацию;
• Не запускайте возможность “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Систематически апгрейдите ПО мобильного устройства для обеспечения безопасности от новых видов атак;
• Включайте функцию “Требовать раскрытых глаз” в тех местах, где она имеется.

В каких местах также находится применение технологии за исключением мобильных телефонов?

Несмотря на то, что основная мысль этой публикации касается в частности мобильным устройствам, следует отметить прочих направлениях внедрения технологии:

• Контроль входа в деловых центрах и жилых домах;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Электронные идентификационные документы последнего поколения;
• Системы видеоконтроля городских сервисов;
• Механизация регистрации посещаемости школ/университетов;
• Авторизация пользователей компьютеров/ноутбуков.

Например: В городском метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через барьер без карты или телефона! Аналогичные программы реализуются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как меняется технология в нынешнее время?

Каждый год появляются свежие мысли для усовершенствования уровня деятельности систем идентификации лиц:

1. Увеличивается детализация датчиков — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше вероятность погрешности;
2. Улучшаются искусственные интеллекты — передовые архитектуры модели MobileNetV3 обеспечивают возможность скоростно адаптироваться к дополнительным чертам облика владельца прямо на устройстве без пересылки информации в облачное хранилище.
3. Улучшаются способы антиспуфинга — теперь смартфоны умеют различать настоящие движущиеся лица от статичных фото/маскировок по незаметным микродвижениям.
4. Синхронизация со умными устройствами — интеллектуальные часы могут автоматически закрыть доступ к телефон, если пользователь отошёл далеко.
5. Проявляются гибридные механизмы — например комбинирующие речевую опознание + лицо + пальцевой отпечаток.

Здесь, которые тренды в особенности актуальны в данный момент:

1) Уменьшение компонентов

Производители стараются минимизировать величину отверстия (“чёлки”) для сенсоры на экране за счёт интеграции компактных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на устройстве

Для увеличения личной безопасности всё более вычислений выполняется локально без передачи информации во дополнительный облачный сервис.

3) Унификация стандартов

Гугл энергично продвигает эталон BiometricPrompt API, с целью чтобы такие платформы, как Вулкан Платинум, и каждые Android-программы были совместимы с любыми видами биометрии стандартизированно.

Что выбрать сегодня?

В случае если тебе нужна наивысшая безопасность данных, подбирайте флагманские устройства со встроенным ИК-проектором либо ToF-датчиком глубины.

• iPhone всех актуальных моделей
• Huawei Companion/Series P ряда
• Mi Professional
• Vivo X линейки
• Oppo Обнаружить Икс серий.

Если финансы скромен – лучше отдавать предпочтение традиционным средствам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как опциональную возможность удобства.

Каким способом повысить удобство использования функции?

Есть некоторые хитростей для пользователей, кто уже использует функцию распознавания лица:

1. Регулярно обновляйте свою изображение-шаблон, если кардинально меняется внешний вид.
2. Не пренебрегайте протирать объектив передней камеры – пятна могут уменьшить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам активирует фотоаппарат как только вы поднимаете его.
4. В процессе регистрационного процесса пытайтесь сохранять лицевую часть ровно перед видеоустройства без значительного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отворачиваетесь от дисплея.

Возможности развития технологии

В предстоящие времена можно предвкушать появления полностью дистанционных способов опознания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: облик + речь + манера ходьбы + жесты рук!

Также предполагается развитие современных подходов защиты личной информации – скажем, переменное модификация цифрового паттерна после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из очень увлекательных технологий нашего эпохи! Она предоставляет интеракцию со смартфоном удобнее чем когда-либо прежде, и такие программы, как Вулкан Казино Платинум, могут значительно улучшить ваш опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы знаете, как устроена эта технология внутри, – сможете вдумчиво подбирать свой будущий гаджет!