Каким образом работает распознавание лицевых образов в телефонах

Почему мы предпочитаем разблокировку по лицу

В прошлые времена определение физиономий является одной из самых популярных возможностей для открытия смартфонов. Еще некоторые годков тому назад основная масса использующих обходились пин-кодами, паролями или сканерами отпечатков пальцев. Но с появлением таких технологий, как вулкан россия, нам достаточно просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какая вещь превращает эту возможность настолько популярной? Для начала, это комфортно: не нужно запоминать замысловатые пароли или находить правильный палец в мраке. Кроме того, это быстро: современные программы узнают лицо буквально за мгновение. В-третьих, это чувство будущего — словно в кинолентах про vulkan casino разведчиков.

Впрочем за этой кажущейся несложностью прячется целый вселенная трудных технологий и инженерных разработок. Давайте разобраться, как точно действует распознавание лиц в современных мобильных телефонах, какие существуют технологии, насколько они защищены и что нас ожидает в будущем.

Короткая хроника эволюции технологии

Идентификация лиц как техника существует уже более пятидесяти лет. Первые эксперименты автоматического анализа облика были сделаны еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины умели лишь обозначать контуры головы и определять расстояния между глазами и устами на черно-белых изображениях.

Первые торговые установки возникли в девяностых годах, но они были далеки от совершенства: работали медленно и нередко ошибались. Только с эволюцией нейронных сетей и таких платформ, как вулкан россии, мощных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным идентификацией лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять свои разработки.

Главные шаги работы устройства распознавания

Процесс идентификации лица можно ориентировочно разделить на несколько ключевых этапов:

Идентификация лица — устройство распознает существование гуманного лица в кадре.
Определение признаков — алгоритм исследует особенности облика: очертания глаз, носа, уст, позицию надбровных дуг.
Построение структуры — создаётся неповторимый виртуальный отпечаток (faceprint) на основе определённых признаков.
Сравнение с стандартом — созданный шаблон сравнивается с записанной при учёте биометрической информацией владельца.
Принятие решения — если сходство достаточно высокое, смартфон деблокируется.

Каждый из указанных стадий запрашивает особых методов и улучшений для скорой работы прямо на устройстве.

Технические составляющие: что прячется в их недрах

Обычная передняя камера.

Самый простой простой метод идентификации лица применяет исключительно лицевую камеру смартфона мобильного устройства. Подобный подход внедрён во различных бюджетных вариантах Android-девайсов.

Сильные стороны:

Не требует внешних сенсоров.
Оперативно функционирует при качественном свете.

Отрицательные стороны:

Несложно ввести в заблуждение снимком или роликом.
Неудачно функционирует при плохом освещённости или непривычных ракурсах.

ИК фотокамера и точечный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс является основой Face ID от Apple.

Как это работает:

Точечный проекционный прибор отображает на лицо пользователя невидимую структуру из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 точек).
Инфракрасная камера регистрирует искривление данной сетки по плоскости лица.
Создаётся трёхмерная карта глубины, что практически неосуществима для подделки типичной фотографией или маской.

Плюсы

Надёжная деятельность даже в полной неосвещённости.
Большая устойчивость к подделкам.
Точность идентификации выше 99%.

Дополнительные датчики

В отдельных устройствах используются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют период прохождения луча до цели и обратно; Трехцветные-датчики глубины; специальные лазерные измерители расстояния для построения более детализированной 3D-модели лица.

Эти разработки применяются чаще всего во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искусственный ум в действии

Современные механизмы распознавания лиц немыслимы без эксплуатации искусственного интеллекта и машинного обучения. Именно из-за таким разработкам, как вулкан россии, устройство в состоянии идентифицировать пользователя даже при трансформациях облика: новая причёска, щетина, оптика или грим не становятся помехой для деблокировки.

Детектирование лиц

В стартовом стадии программа должна мгновенно найти образ лица внутри всего кадра с камеры. Для этой задачи применяются каскадные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые натренированы находить человеческие лица среди множества других объектов.

Пример: метод MTCNN может находить физиономию даже в случае частичном закрытии (например, шалью или ладонью).

Выделение основных точек

После обнаружения лица система, такая как вулкан россии, устанавливает расположение главных точек: кончики глаз, конец носа, контуры губ и так далее. Обычно применяется от 68 до 128 основных точек на лице.

Данное требуется для выравнивания визуала: если юзер находится с смартфон под наклоненным, или склонил головку, программа корректирует картинку до обычного угла для последующего изучения.

Построение биометрического модели

Далее искусственная сеть строит сжатое числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Такой образец крайне трудно имитировать: он не хранит само картинку юзера, а лишь исключительные особенности его внешности, что делает его оптимальным для таких систем, как vulkan russia.

Сопоставление и принятие выбора

Когда пользователь хочет разблокировать мобильник глазами, механизм осуществляет все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный границу (обычно превышает 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ не предоставляется.

Привыкание к изменениям внешнего вида

Интересная черта актуальных системы — возможность самообучения. Если вы постоянно доступаете к мобильное устройство с обновленной прической или очками, алгоритм постепенно обновляет эталонный образец вашего облика для повышения точности работы без снижения уровня безопасности.

Охрана биометрических данных информации.

Множество юзеры беспокоятся хранить свои био-идентификационные данные на мобильном устройстве из-за вероятности потери данных или хакерской атаки. Определенные организации, такие как vulkan russia, предлагают варианты для улучшения безопасности информации пользователей.

Локальное хранение: Преимущественно устройств сохраняет биометрические образцы исключительно внутри безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не покидают гаджет и закрыты даже изготовителю.
Шифрование: Все данные сберегаются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция программ: Программы третьих разработчиков не обладают непосредственного доступа к биометрическим; они могут лишь запрашивать подтверждение подтверждения идентичности через системный API.

Следует отметить важную деталь: если кто-то сможет получить физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство изготовители внедряют меры безопасности от “слепого” разблокирования — к примеру, просят открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют виды распознавания лиц на изображениях?

В настоящее время можно различить три главных подхода к осуществлению этой задачи:

Софтверное двухмерное идентификация

Применяется только лицевая камера без вспомогательных детекторов глубины. Такой метод встречается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость осуществления; низкая затраты; быстрая работа при качественном свете.
Минусы: просто обмануть снимком; нестабильная функционирование ночью; слабая защищенность.

Оборудование для объёмное сканирование

Использует инфракрасную видеокамеру + проектор пикселей + сенсоры глубины (Face ID у Apple; подобные решения у Huawei Mate).
Достоинства: большая достоверность; невозможно обмануть фото/видео; постоянная функционирование при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные способы с дополнением ИИ

Используют комбинацию программных методов + техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как вулкан россии и Google Pixel Face Unlock современных поколений, сочетают фронтальную камеру c инфракрасным сенсором движения Soli Radar для предотвращения от подделок жестами/масками/видеоэкранами посторонних устройств.

Примеры эксплуатации разных техник

iPhone линейки X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование
Xiaomi Mi8 Explorer Edition в первый раз представил аналог Face ID в числе Android.
Samsung Galaxy S10/S20 обеспечивают как софтверное плоское распознавание по снимку фронталкой, так и сканер глазного ириса.
Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Вопросы защиты и неверные сигналы

Несмотря на замечательный развитие технологий за прошедшие лет, совершенных механизмов пока не имеется:

Возможность подвоха: Доступные мобильники легко “разблокируются” качественной фотографией хозяина либо видеозаписью с дисплея иного гаджета.
Идентичные близнецы: Даже самые совершенные механизмы могут спутать между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
Изменения облика: Резкое похудение/увеличение массы тела, хирургические вмешательства либо повреждения иногда требуют повторной регистрации биометрических данных.
Условия записи: Яркая освещённость солнечным светом либо глубокая тень могут понизить точность определения признаков.

Вот некоторые советов для безопасному эксплуатации:

Для важных операций всегда применяйте дополнительную аутентификацию;
Не включайте опцию “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
Постоянно обновляйте прошивку ПО мобильного устройства для предотвращения угроз от актуальных атак;
Включайте функцию “Требовать открытых глаз” в тех местах, где она есть.

Где ещё используется технологии кроме мобильных телефонов?

Пускай тема нашей публикации касается в частности мобильным устройствам, необходимо сказать о альтернативных областях использования технологии:

Контроль доступа в рабочих помещениях и резиденциях;
Платёжные аппараты банков (“Face Pay”);
Цифровые идентификационные документы современного образца;
Комплексы видеоконтроля муниципальных сервисов;
Автоматизирование регистрации присутствия образовательных учреждений/институтов;
Авторизация участников компьютеров/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — хватит пройти через турникет без карты или мобильника! Аналогичные инициативы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом меняется технология сегодня?

Всякий годочек появляются современные идеи для повышения уровня работы систем лицевого распознавания:

Увеличивается чёткость сенсорных устройств — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше шанс ошибки;
Улучшаются искусственные интеллекты — передовые структуры типа MobileNetV3 обеспечивают возможность скоростно обучаться дополнительным чертам облика пользователя прямо на устройстве без отправки данных в облако.
Развиваются способы антиспуфинга — теперь телефоны умеют различать реальные движущиеся лица от неподвижных фото/масок по незаметным движениям кожи.
Взаимодействие со интеллектуальными приборами — интеллектуальные часы могут автоматически заблокировать мобильный телефон, если пользователь отошёл далеко.
Возникают смешанные системы — в частности комбинирующие голосовую идентификацию + лицо + отпечаток пальца.

Итак, какие тенденции особенно востребованы на сегодняшний день:

1) Миниатюризация деталей

Компании пытаются сократить габариты прорези (“чёлки”) под сенсоры на экране за счёт внедрения маленьких ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для увеличения приватности всё больше расчётов осуществляется на месте без отправки информации во внешний облачный сервис.

3) Упорядочивание норм

Google активно пропагандирует эталон BiometricPrompt API, с целью чтобы подобные платформы, например как вулкан россия, и все Android-приложения были совместимы с различными типами биометрии унифицированно.

Что подобрать сегодня?

Если вам всем важна максимальная защита информации, выбирайте флагманские аппараты с интегрированным ИК-излучателем или же ToF-датчиком глубины.

iPhone каждого новейших версий
Huawei Mate/P Series линейки
Xiaomi Professional
Vivo X линейки
Оппо Find Икс серий.

Если финансы ограничен – лучше предпочесть обычным средствам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в вулкан россия, применять только как дополнительную опцию удобства.

Как улучшить комфорт работы возможности?

Есть пара лайфхаков для тех, кто уже применяет разблокировку через лицо:

Регулярно обновляйте свою изображение-шаблон, если сильно изменяется облик.
Не пренебрегайте протирать объектив передней камеры – разводы могут уменьшить четкость!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам активирует фотоаппарат как только вы поднимаете его.
При записи пытайтесь сохранять лицо неподвижно напротив объектива не допуская сильного наклона головы.
Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвернулись от дисплея.

Возможности эволюции инноваций

В ближайшие годы можно предвкушать появления полностью дистанционных способов распознавания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + речь + манера ходьбы + жесты рук!

Также предполагается появление новых методов защиты приватности – скажем, изменяющееся модификация цифрового образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых захватывающих техник нашего периода! Она обеспечивает интеракцию со мобильным устройством комфортнее чем до этого, и такие программы, как vulkan russia, могут существенно улучшить ваш опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы понимаете, как работает эта система внутри, – будете в состоянии осознаннее выбирать свой очередной девайс!