Каким образом работает определение лиц в телефонах

Зачем мы предпочитаем разблокировку по фейсу

В недавние годы распознавание физиономий стало одной из наиболее востребованных опций для деблокировки мобильных телефонов. Еще некоторые годков тому назад большинство использующих довольствовались пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением подобных технологий, как Вулкан Платинум, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Какой аспект обуславливает эту особенность настолько популярной? Прежде всего, это практично: не нужно запоминать замысловатые пароли или отыскивать верный палец в мраке. Кроме того, это быстро: современные системы идентифицируют лицо буквально за мгновение. В-третьем пункте, это ощущение футуристичности — словно в кинолентах про вулкан платинум шпионов.

Однако за такой на первый взгляд легкостью прячется весь вселенная сложных методов и инженерных решений. Попробуем исследовать, как конкретно действует идентификация по лицу в актуальных мобильных телефонах, какие бывают способы, насколько они безопасны и что нас ждёт впереди.

Короткая хроника эволюции техники

Идентификация лиц как техника существует уже более пятидесяти годов. Начальные пробы автоматического анализа лица были осуществлены еще в 1960-х годах в научных учреждениях США. Тогда компьютеры могли лишь обозначать силуэты головы и определять дистанции между очами и губами на черно-белых изображениях.

Начальные коммерческие системы стали доступны в 90-х, но они были далеки от совершенства: действовали неспешно и часто давали сбои. Только с эволюцией искусственных сетей и таких платформ, как Vulkan Platinum, сильных мобильных микросхем распознавание лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным идентификацией лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали интегрировать личные решения.

Ключевые шаги функционирования системы распознавания

Процесс распознавания лица можно ориентировочно сегментировать на несколько ключевых этапов:

1. Идентификация лица — аппарат определяет существование людского образа в кадре.
2. Извлечение признаков — алгоритм изучает черты лица: форму глаз, обонятельного органа, губ, расположение бровей.
3. Построение шаблона — создаётся уникальный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со эталоном — созданный модель сопоставляется с зафиксированной при регистрации биометрической сведениями владельца.
5. Принятие определения — если сходство достаточно значительное, смартфон разблокируется.

Всякий из данных этапов нуждается в специальных алгоритмов и улучшений для оперативной работы непосредственно на девайсе.

Железные компоненты: что находится внутри

Типичная селфи камера.

Наиболее легкий метод идентификации лица задействует лишь переднюю видеокамеру смартфона. Подобный подход осуществлён во многочисленных доступных версиях Android-девайсов.

Плюсы:

• Не потребляет внешних сенсоров.
• Шустро действует при достаточном освещении.

Минусы:

• Просто одурачить изображением или видео.
• Плохо функционирует при низком освещении или нестандартных точках зрения.

ИК камера и точечный проектор

Более совершенные системы, такие как Vulkan Platinum, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс лежит в основе Face ID от Apple.

Как это работает:

• Точечный проектор показывает на облик пользователя невидимую сетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 пятен).
• Инфракрасная устройство регистрирует искривление этой решетки по поверхности физиономии.
• Получается 3D карта глубины глубинности, что почти невозможна для имитации обычной фото или маской.

Плюсы

• Надёжная деятельность даже в полной темноте.
• Сильная сопротивляемость к имитациям.
• Точность распознавания более 99%.

Дополнительные сенсорные устройства

В отдельных девайсах применяются также экстра сенсоры: ToF (Time-of-Flight), которые фиксируют период движения света до цели и обратно; Трехцветные-датчики глубины; специальные световые лидары для формирования более точной 3D-модели физиономии.

Эти технологии используются наиболее часто во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искуственный разум в работе

Нынешние механизмы опознания лиц невозможны в отсутствие применения artificial intelligence и машинного обучения. Именно из-за таким технологиям, как Vulkan Platinum, аппарат способно распознавать юзера даже при трансформациях внешнего вида: новая причёска, растительность на лице, оптика или грим не становятся барьером для разблокировки.

Детектирование физиономии

На начальном этапе алгоритм должна мгновенно распознать образ лица среди целого кадра камеры. Для данной цели задействуются многоуровневые классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые натренированы распознавать лиц человека среди множества других объектов.

Пример: алгоритм MTCNN в состоянии распознавать лицо даже при частичном перекрытии (например, шалью или ладонью).

Выделение основных аспектов

После распознавания лица устройство, такая как Vulkan Platinum, устанавливает расположение основных точек: кончики глаз, кончик носа, границы губ и так далее. Обычно применяется от 68 до 128 основных маркеров на лицевой поверхности.

Это действие необходимо для стабилизации изображения: если пользователь держит мобильник под углом, или повернул голову, программа корректирует изображение до стандартного положения для последующего изучения.

Создание биометрии шаблона

Далее искусственная сеть строит компактное цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 вещественных чисел.

Такой образец очень трудно подделать: он не удерживает само изображение юзера, а лишь уникальные особенности его облика, что делает его идеальным для таких платформ, как Вулкан Казино Платинум.

Сравнение и вынесение заключения

Когда пользователь желает разблокировать телефон взором, механизм воспроизводит все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый уровень (обычно превышает 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ блокируется.

Адаптация к метаморфозам внешности

Увлекательная черта современных систем — возможность самостоятельного обучения. Если ты часто открываете телефон с свежей прической или очками, алгоритм постепенно модернизирует основной модель вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Безопасность биометрических данных.

Многие клиенты опасаются держать свои биометрические данные на телефоне из-за угрозы утечки информации или взлома гаджета. Иные фирмы, такие как Вулкан Казино Платинум, предлагают методы для повышения безопасности информации пользователей.

• Локальное сохранение: Большинство устройств записывает биометрические модели лишь внутри защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают устройство и закрыты в том числе производителю.

• Шифрование: Все сведения сохраняются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения сторонних разработчиков не имеют непосредственного доступа к биометрическим данным; они могут лишь запрашивать факт верификации личности через системный API.

Следует отметить значимую деталь: если кто-то достанет физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие компании реализуют меры безопасности от автоматического разблокирования — к примеру, требуют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются виды идентификации лиц на изображениях?

Сегодня можно выделить определить 3 главных метода к осуществлению этой функции:

Программируемое двухмерное идентификация

Эксплуатируется только передняя камера без дополнительных сенсоров глубины. Подобный метод наблюдается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота осуществления; умеренная стоимость; быстрая деятельность при достаточном освещении.
Минусы: несложно обмануть снимком; ненадежная функционирование ночью; слабая безопасность.

Аппаратное объёмное сканирование

Использует инфракрасную камеру + проектор точек + сенсоры глубины (Face ID у Apple; подобные решения у Huawei Mate).
Преимущества: большая достоверность; не получится исказить изображение/видеозапись; стабильная работа в любых условиях освещения.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные способы с ИИ-дополнением

Используют комбинацию программируемых методов + техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, как Vulkan Platinum и Google Pixel Face Unlock последних поколений, комбинируют фронталку c ИК датчиком движения Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Иллюстрации применения разных методов

• iPhone серии X/11/12/13/14 используют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз предложил аналог Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное двухмерное определение по снимку селфи-камерой, так и сканер радужки глаза.
• Huawei Mate20 Pro использует комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Проблемы защиты и ошибочные срабатывания

Несмотря на замечательный успехи инноваций за недавние лет, безупречных механизмов пока не имеется:

1. Вероятность мошенничества: Доступные смартфоны просто открываются качественной снимком пользователя или роликом с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные системы могут ошибиться между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
3. Трансформации внешности: Внезапное похудение/набор веса, косметические процедуры либо травмы порой требуют повторной регистрации биометрических данных.
4. Условия фотографирования: Сильная засветка солнцем или же глубокая затенение могут уменьшить аккуратность идентификации признаков.

Вот некоторые подсказок по защищённому применению:

• Для критически важных операций всегда используйте дополнительную аутентификацию;
• Не запускайте возможность “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
• Постоянно апгрейдите прошивку телефона для защиты от актуальных атак;
• Включайте функцию “Требовать распахнутых глаз” везде, где она есть.

Где дополнительно используется технологии помимо мобильных телефонов?

Несмотря на то, что предмет данной публикации касается конкретно мобильным устройствам, следует отметить других сферах применения технологии:

• Контроль доступа в рабочих помещениях и многоквартирных зданиях;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Виртуальные идентификационные документы последнего поколения;
• Системы видеоконтроля муниципальных сервисов;
• Автоматизирование отслеживания присутствия учебных заведений/университетов;
• Вход пользователей компьютеров/ноутбуков.

Например: В столичном метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — достаточно пройти через барьер без пластика или мобильника! Аналогичные инициативы осуществляются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как изменяется техпроцесс в наше время?

Любой годик проявляются свежие идеи для улучшения качества функционирования систем лицевого распознавания:

1. Увеличивается детализация сенсоров — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше шанс ошибки;
2. Совершенствуются нейронные сети — современные конструкции типа MobileNetV3 дают возможность быстро обучаться дополнительным чертам облика владельца прямо на устройстве без пересылки информации в облачное хранилище.
3. Развиваются способы антиспуфинга — теперь смартфоны способны отличать настоящие живые лица от статичных снимков/маскировок по мельчайшим микродвижениям.
4. Интеграция со умными устройствами — смарт-часы могут авто закрыть доступ к мобильный телефон, если пользователь отошёл далеко.
5. Проявляются комбинированные системы — к примеру совмещающие аудио аутентификацию + физиономию + отпечаток пальца.

Вот, какие тренды особенно популярны сейчас:

1) Сокращение деталей

Компании пытаются уменьшить величину выреза (“чёлки”) под сенсоры на экране за счёт внедрения компактных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для увеличения конфиденциальности всё больше обработки данных осуществляется локально без пересылки информации во сторонний облачный услугу.

3) Унификация стандартов

Гугл энергично продвигает норму BiometricPrompt API, чтобы такие платформы, например как Вулкан Платинум, и любые Android-программы могли взаимодействовать с различными типами биометрии единообразно.

Что выбрать сегодня?

В случае если тебе необходима наивысшая безопасность информации, подбирайте передовые модели с интегрированным ИК-проектором или ToF-датчиком глубины.

• iPhone каждого последних моделей
• Huawei Partner/P Series серии
• Mi Pro
• Vivo X серии
• Oppo Найти X серий.

Если финансы невелик – лучше предпочесть обычным средствам безопасности (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как второстепенную возможность комфорта.

Как увеличить комфорт использования функции?

Есть пара хитростей для тех, кто уже использует разблокировку по лицу:

1. Часто обновляйте свою фото-шаблон, если значительно трансформируется облик.
2. Не упускайте из виду чистить линзу фронтальной камеры – разводы могут уменьшить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам включает камеру как только вы берёте его в руки.
4. В процессе регистрации постарайтесь удерживать лицевую часть неподвижно перед видеоустройства исключая значительного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отворачиваетесь от дисплея.

Возможности эволюции техники

В предстоящие времена можно предвкушать появления полностью дистанционных способов распознавания человека сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + походка + движения рук!

Также вероятно возникновение новых подходов обеспечения конфиденциальности – к примеру, изменяющееся изменение цифрового паттерна после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из наиболее захватывающих инноваций нашего времени! Она обеспечивает общение со телефоном комфортнее чем до этого, и такие аппы, как Вулкан Казино Платинум, могут существенно улучшить ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы осведомлены, как функционирует эта методика внутри, – сможете вдумчиво выбирать свой будущий устройство!