Каким способом действует идентификация лиц в мобильных устройствах

Для чего мы останавливаемся на разблокировку по лицу

В прошлые годы распознавание физиономий превратилось в одной из самых распространённых возможностей для деблокировки смартфонов. Всего пару лет ранее большинство пользователей удовлетворялись пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, например вулкан россия, нам достаточно просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект делает эту конкретную особенность очень нужной? Во-первых, это удобно: не нужно удерживать в памяти замысловатые пароли или искать нужный палец в мраке. Кроме того, это оперативно: современные программы идентифицируют лицо практически за мгновение. В-третьем пункте, это ощущение будущего — словно в фильмах про вулкан россия агентов.

Однако за такой на первый взгляд несложностью таится целый мир сложных технологий и инженерных разработок. Попробуем исследовать, как именно действует распознавание лиц в актуальных мобильных телефонах, какие применяются технологии, насколько они безопасны и что нас ожидает в будущем.

Краткая повествование развития инноваций

Распознавание лиц как методика существует уже более пятидесяти годов. Начальные попытки автоматического анализа лиц были сделаны еще в 1960-х годы в лабораториях США. Тогда компьютеры способны были лишь выделять силуэты черепа и вычислять дистанции между глазами и губами на монохромных изображениях.

Начальные бизнес установки возникли в девяностых годах, но они были неидеальны: работали медленно и часто ошибались. Только с эволюцией искусственных сетей и таких площадок, как вулкан россии, мощных мобильных чипов определение лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали внедрять личные решения.

Ключевые шаги функционирования механизма распознавания

Процесс определения лица можно ориентировочно поделить на несколько основных этапов:

Обнаружение лиц — устройство распознает наличие людского лица в изображении.
Выделение характеристик — механизм изучает черты физиономии: очертания глаз, носа, губ, позицию бровей.
Построение структуры — создаётся особенный цифровой отпечаток (faceprint) на основе выделенных признаков.
Сравнение с эталоном — созданный модель сопоставляется со зафиксированной при учёте биометрической сведениями владельца.
Принятие решения — если совпадение достаточно значительное, смартфон деблокируется.

Любой из указанных стадий нуждается в индивидуальных методов и улучшений для скорой работы непосредственно на девайсе.

Технические составляющие: что скрыто в их недрах

Типичная селфи камера.

Самый несложный метод распознавания облика применяет только лицевую камеру мобильного устройства. Такой способ реализован во многочисленных бюджетных вариантах Android-девайсов.

Достоинства:

Не требует дополнительные сенсоров.
Быстро действует при хорошем свете.

Отрицательные стороны:

Несложно обмануть снимком или видеозаписью.
Неправильно функционирует при плохом освещённости или нестандартных углах обзора.

Инфракрасная камера и пунктирный проекционный аппарат

Более продвинутые системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика лежит в основе Face ID от Apple.

Каким способом это работает:

Точечный устройство проекции показывает на лицо использующего невидимую структуру из тысяч инфракрасных меток (например, Face ID использует около 30 000 меток).
ИК камера регистрирует изменение формы данной сетки по плоскости лица.
Создаётся трехмерная карта глубины, которая практически невозможна для имитации типичной снимком или маскировкой.

Достоинства

Надёжная деятельность даже в полной темноте.
Большая устойчивость к подделкам.
Точность идентификации более 99%.

Добавочные сенсоры

В некоторых аппаратах задействуются также вспомогательные датчики: ToF (Time-of-Flight), которые определяют период движения света до предмета и обратно; Цветные-датчики глубины; специальные световые лидары для построения более детализированной 3D-модели физиономии.

Эти разработки применяются чаще всего во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: синтетический разум в исполнении

Нынешние механизмы опознания лиц немыслимы без использования artificial intelligence и machine learning. Именно из-за таким разработкам, как вулкан россии, гаджет способно узнавать пользователя даже при трансформациях внешности: новая укладка, борода, линзы или макияж не становятся препятствием для деблокировки.

Детектирование лиц

На начальном шаге программа должна быстро распознать ликовое изображение среди полного снимка камеры. Для данной цели используются последовательные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые подготовлены находить лица людей среди множества других объектов.

Пример: алгоритм MTCNN может распознавать физиономию даже с неполном перекрытии (например, шалью или рукой).

Определение основных аспектов

После обнаружения лица устройство, такая как вулкан россии, устанавливает положение основных точек: уголки глаз, кончик носа, границы губ и так далее. Обычно задействуется от 68 до 128 ключевых маркеров на лице.

Данное необходимо для стабилизации картинки: если пользователь держит смартфон под наклоном, или склонил головку, программа исправляет картинку до стандартного положения для дальнейшего анализа.

Построение биометрии образца

Далее нейросеть строит уплотненное цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Такой формат весьма сложно сфальсифицировать: он не хранит непосредственно фото пользователя, а лишь исключительные черты его вида, что делает его оптимальным для таких площадок, как vulkan russia.

Сравнительный анализ и вынесение решения

В случае, когда человек желает разлочить мобильник взглядом, программа осуществляет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый границу (обычно больше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ блокируется.

Приспособление к трансформациям внешнего вида

Интересная черта нынешних систем — способность самообучения. Если ты постоянно открываете мобильное устройство с свежей стрижкой или очками, алгоритм постепенно обновляет базовый образец вашего облика для улучшения точности функционирования без ухудшения безопасности.

Безопасность биометрии данных.

Множество юзеры беспокоятся сохранять свои био-идентификационные данные на телефоне из-за вероятности утечки информации или взлома устройства. Некоторые компании, вроде vulkan russia, предлагают решения для повышения безопасности сведений клиентов.

Локальное сохранение: Основная часть аппаратов сохраняет биометричные образцы лишь в пределах защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не покидают устройство и недоступны включая производителю.
Шифрование: Все данные хранятся только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция программ: Приложения третьих девелоперов не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь требовать подтверждение верификации идентичности через системный API.

Следует упомянуть существенную особенность: если какой-то человек сможет получить доступ к вашему телефону физически (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители реализуют меры безопасности от автоматического разблокирования — например, требуют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют типы определения лиц на изображениях?

В настоящее время можно определить 3 ключевых метода к осуществлению этой функции:

Программное двухмерное распознавание

Эксплуатируется только передняя видеокамера без экстра сенсоров дистанции. Такой метод используется обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота осуществления; минимальная цена; оперативная функционирование при качественном освещении.
Минусы: легко ввести в заблуждение снимком; нестабильная деятельность ночью; недостаточная защищенность.

Оборудование для объёмное сканирование

Применяет инфракрасную видеокамеру + проекционный модуль пикселей + сенсоры дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Достоинства: большая достоверность; невозможно исказить изображение/видеозапись; постоянная функционирование при любом освещении.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Гибридные способы с интеграцией ИИ

Задействуют комбинацию программных методов + аппаратно-техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например вулкан россии и Google Pixel Face Unlock последних поколений, сочетают фронтальную камеру c ИК датчиком мобильности Soli Radar для защиты от подделок жестами/масками/видеодисплеями чужих устройств.

Примеры эксплуатации различных способов

iPhone серии X/11/12/13/14 применяют только физическое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition впервые представил подобие Face ID в ряду Android.
Samsung Galaxy S10/S20 обеспечивают как софтверное 2D определение по изображению фронтальной камерой, так и сканер радужки глаза.
Huawei Mate20 Pro задействует комплекс из ИК-освещения + Dot Projector + ToF-датчик

Трудности безопасности и ошибочные срабатывания

Несмотря на замечательный успехи технологий за прошедшие лет, совершенных системы пока не наблюдается:

Шанс подвоха: Бюджетные телефоны без труда “разблокируются” высококачественной фотографией пользователя или видеозаписью с дисплея иного гаджета.
Идентичные близнецы: Даже самые идеальные устройства могут ошибиться между монозиготными близнецами либо семьями с очень схожей внешностью.
Метаморфозы внешнего вида: Резкое утрата веса/увеличение массы тела, пластические операции или травмы иногда необходимы для повторной регистрации биометрии.
Условия съёмки: Яркая освещённость солнечным светом либо глубокая тень могут уменьшить верность распознавания признаков.

Вот несколько советов по защищённому использованию:

Для значимых операций всегда применяйте двухфакторную аутентификацию;
Не запускайте опцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
Регулярно обновляйте прошивку ПО смартфона для защиты от актуальных атак;
Включайте функцию “Требовать раскрытых глаз” там, где она имеется.

В каких областях ещё находится применение технология кроме смартфонов?

Хотя тема этой статьи посвящена в частности смартфонам и планшетам, стоит упомянуть о альтернативных областях использования технологии:

Мониторинг входа в деловых центрах и жилых домах;
Платёжные устройства банков (“Face Pay”);
Цифровые идентификационные документы современного типа;
Комплексы видеонаблюдения муниципальных сервисов;
Автоматизирование учёта явки учебных заведений/институтов;
Авторизация юзеров компьютеров/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по лицу (“Face Pay”) — хватит пройти через турникет без карты или телефона! Похожие инициативы осуществляются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким образом изменяется техпроцесс в наше время?

Всякий годик появляются свежие концепции для повышения стандарта работы систем лицевого распознавания:

Увеличивается детализация датчиков — чем больше информации фиксируется камерой/глубинными сенсорами, тем меньше риск ошибки;
Совершенствуются нейросети — новейшие конструкции модели MobileNetV3 позволяют скоростно осваивать свежим чертам облика обладателя прямо на устройстве без отправки данных в облако.
Совершенствуются способы антиспуфинга — теперь смартфоны способны различать подлинные движущиеся лица от статичных снимков/масок по незаметным движениям кожи.
Интеграция со умными устройствами — интеллектуальные часы могут автоматически заблокировать телефон, если пользователь отошёл далеко.
Возникают гибридные устройства — в частности объединяющие аудио опознание + облик + дактилоскопический след.

Вот, те тенденции очень популярны сейчас:

1) Миниатюризация деталей

Компании стараются минимизировать величину выреза (“чёлки”) под сенсоры на экране за счёт внедрения маленьких ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на девайсе

Для повышения личной безопасности всё более обработки данных происходит на месте без отправки информации во внешний облачный сервис.

3) Стандартизация регламентов

Google интенсивно пропагандирует стандарт BiometricPrompt API, чтобы аналогичные площадки, как вулкан россия, и любые Android-программы могли взаимодействовать с любыми видами биометрии стандартизированно.

Какое решить сегодня?

Если вам необходима максимальная защита данных, остановите выбор на передовые устройства с интегрированным ИК-излучателем или же ToF-сенсором глубины.

iPhone всех существующих актуальных поколений
Huawei Mate/Series P серии
Mi Pro
Vivo X линейки
Оппо Найти Икс серии.

Если средства скромен – лучше предпочесть классическим методам безопасности (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в вулкан россия, применять только как дополнительную опцию удобства.

Каким способом увеличить практичность работы функции?

Есть пара хитростей для людей, кто уже пользуется разблокировку через лицо:

Периодически обновляйте свою изображение-шаблон, если значительно трансформируется внешность.
Не упускайте из виду чистить линзу передней камеры – пятна могут уменьшить точность!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам активирует камеру если вы берёте его в руки.
В процессе записи старайтесь держать лицевую часть ровно перед камеры не допуская резкого наклона головы.
Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвели взгляд от экрана.

Возможности развития технологии

В предстоящие времена можно ожидать развития полностью дистанционных способов идентификации человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + походка + манипуляции руками!

Также вероятно появление современных подходов защиты личной информации – например, изменяющееся корректировка электронного шаблона после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из самых интересных техник нашего периода! Она обеспечивает интеракцию со мобильным устройством проще чем раньше, и такие программы, как vulkan russia, могут в разы улучшить ваш пользовательский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы осведомлены, как устроена эта технология в деталях, – будете в состоянии осознаннее определять свой будущий девайс!