Как работает распознавание лиц в телефонах

Зачем мы выбираем разлочивание по лицевому распознаванию

В недавние времена идентификация физиономий является одной из самых распространённых возможностей для открытия умных телефонов. Еще некоторые годов тому назад основная часть юзеров удовлетворялись PIN-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением таких технологий, например Вулкан 24, нам вполне лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какой аспект обуславливает данную возможность настолько популярной? Во-первых, это удобно: не нужно запоминать сложные пароли или искать нужный палец в темноте. Также, это мгновенно: современные программы идентифицируют лицо буквально за доли секунды. В-третьем пункте, это впечатление будущего — словно в фильмах про вулкан 24 шпионов.

Впрочем за этой на первый взгляд простотой таится весь универсум сложных техник и инженерных разработок. Попробуем исследовать, как конкретно функционирует фейсканирование в актуальных смартфонах, какие существуют методы, насколько они надёжны и что нас предстоит.

Короткая хроника развития техники

Идентификация лиц как методика существует уже более пятидесяти лет. Начальные попытки автоматизированного исследования облика были предприняты еще в 1960-х годы в лабораториях США. Тогда ЭВМ могли лишь выделять контуры черепа и вычислять дистанции между зрачками и устами на монохромных изображениях.

Первые бизнес установки стали доступны в 1990-х годах, но они были неидеальны: функционировали медленно и нередко ошибались. Только с эволюцией нейронных сетей и таких систем, как Вулкан 24 Казино, сильных мобильных чипов идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным распознаванием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали интегрировать свои решения.

Главные шаги функционирования механизма определения

Процесс определения лица можно ориентировочно разделить на несколько основных этапов:

1. Распознавание лиц — аппарат выявляет присутствие гуманного образа в кадре.
2. Выделение характеристик — система изучает контуры облика: форму глаз, обонятельного органа, уст, расположение надбровных дуг.
3. Построение структуры — создаётся особенный цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со стандартом — полученный образец сверяется с зафиксированной при внесении биометрической данными владельца.
5. Принятие решения — если сходство достаточно высокое, смартфон открывается.

Любой из данных шагов нуждается в особых методов и оптимизаций для быстрой работы прямо на устройстве.

Железные элементы: что прячется внутри

Типичная фронтальная камера.

Простейший несложный вариант распознавания облика использует исключительно переднюю видеокамеру смартфона. Подобный подход реализован во многочисленных доступных моделях Android-устройств.

Достоинства:

• Не нуждается в дополнительных сенсоров.
• Оперативно функционирует при качественном освещении.

Отрицательные стороны:

• Несложно ввести в заблуждение изображением или роликом.
• Плохо действует при плохом освещённости или нестандартных ракурсах.

ИК фотокамера и точечный проектор

Более совершенные системы, такие как Вулкан 24 Казино, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика является основой Face ID от Apple.

Каким способом это работает:

• Точечный проекционный прибор отображает на физиономию использующего невидимую сетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 меток).
• Инфракрасная камера записывает изменение формы данной решетки по поверхности физиономии.
• Создаётся 3D карта глубины, которая практически неосуществима для фальсификации стандартной фотографией или маскировкой.

Выигрыши

• Надёжная функционирование даже в полной тьме.
• Большая устойчивость к подделкам.
• Точность распознавания выше 99%.

Дополнительные сенсоры

В некоторых устройствах используются также дополнительные сенсоры: ToF (Time-of-Flight), которые определяют период распространения света до объекта и обратно; Цветные-датчики дальности; специальные оптические лидары для формирования более точной 3D-модели лица.

Эти технологии встречаются в основном во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искуственный разум на действии

Нынешние системы опознания лиц невозможны без эксплуатации искусственного интеллекта и машинного обучения. Именно благодаря таким инновациям, как Вулкан 24 Казино, устройство в состоянии идентифицировать владельца даже при метаморфозах внешности: новая стрижка, щетина, очки или макияж не становятся помехой для открытия.

Детектирование лиц

При стартовом шаге алгоритм должна быстро распознать образ лица в пределах полного кадра камеры. Для данной цели применяются последовательные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые натренированы идентифицировать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN в состоянии распознавать облик даже при неполном перекрытии (например, шарфом или рукой).

Определение важных аспектов

После идентификации лица система, такая как Вулкан 24 Казино, определяет положение основных точек: уголки глаз, кончик носа, края губ и так далее. Обычно применяется от 68 до 128 главных меток на лицевой области.

Это требуется для выравнивания визуала: если юзер удерживает мобильник под наклоненным, или склонил головку, программа корректирует картинку до нормального состояния для дальнейшего анализа.

Формирование биометрического идентификатора модели

Далее нейросеть строит уплотненное цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 вещественных чисел.

Такой формат крайне трудно подделать: он не хранит непосредственно фото юзера, а лишь уникальные особенности его вида, что делает его оптимальным для таких платформ, как Vulkan24.

Сравнение и принятие решения

В случае, когда юзер желает открыть смартфон взором, механизм воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный уровень (обычно превышает 99%), телефон, как и платформа Vulkan24, открывается; если нет — доступ не предоставляется.

Привыкание к метаморфозам внешности

Занимательная характеристика современных систем — возможность самостоятельного обучения. Если вы регулярно доступаете к телефон с обновленной прической или оптикой, программа постепенно модернизирует основной модель вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Защита биометрии данных.

Множество клиенты опасаются сохранять свои биометрические данные на мобильном устройстве из-за угрозы утечки информации или взлома устройства. Иные фирмы, вроде Vulkan24, предлагают решения для улучшения безопасности информации клиентов.

• Локальное сохранение: Большинство аппаратов хранит биометричные образцы лишь в пределах защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из аппарат и не доступны включая изготовителю.

• Шифрование: Все данные хранятся только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих девелоперов не обладают непосредственного возможности доступа к биометрическим; они могут лишь запрашивать подтверждение подтверждения личности через системный API.

Стоит упомянуть существенную подробность: в случае, если кто-то достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители осуществляют защиту от “слепого” разблокирования — к примеру, требуют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются категории идентификации лиц на изображениях?

На сегодняшний день можно выделить 3 основных подхода к осуществлению этой задачи:

Софтверное 2D распознавание

Эксплуатируется только лицевая видеокамера без экстра детекторов дистанции. Этот метод встречается наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; минимальная цена; оперативная деятельность при достаточном свете.
Минусы: просто ввести в заблуждение снимком; ненадежная деятельность ночью; низкая защищенность.

Техническое трёхмерное сканирование

Использует ИК видеокамеру + проектор точек + датчики дистанции (Face ID от Apple; аналогичные решения у Huawei Mate).
Преимущества: высокая надежность; не получится подделать фото/видео; стабильная работа при любом освещении.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные способы с интеграцией ИИ

Задействуют комбинацию программируемых методов + техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие товары, как Вулкан 24 Казино и Google Pixel Face Unlock новейших версий, комбинируют фронтальную камеру c инфракрасным датчиком движения Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.

Иллюстрации использования различных методов

• iPhone линейки X/11/12/13/14 применяют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition первый раз представил аналог Face ID среди Android.
• Samsung Galaxy S10 модель/S20 имеют как программное обеспечение двухмерное распознавание по фото фронтальной камерой, так и сканер глазного ириса.
• Huawei Mate20 Pro задействует систему из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Трудности защиты и неверные тревоги

Несмотря на замечательный развитие технологий за прошедшие годы, идеальных системы пока не наблюдается:

1. Шанс мошенничества: Недорогие смартфоны просто “разблокируются” высококачественной изображением владельца либо видео с экрана другого устройства.
2. Идентичные близняшки: Даже самые идеальные механизмы могут спутать между однояйцевыми близнецами либо родичами с очень схожей внешностью.
3. Трансформации облика: Внезапное снижение веса/увеличение массы тела, хирургические вмешательства либо травмы в некоторых случаях необходимы для перерегистрации биометрии.
4. Условия фотографирования: Сильная освещённость солнечным светом либо плотная затенение могут снизить точность идентификации признаков.

Здесь некоторые рекомендаций для защищённому эксплуатации:

• Для важных операций всегда используйте двухэтапную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Регулярно обновляйте прошивку ПО мобильного устройства для предотвращения угроз от современных угроз;
• Включайте настройку “Требовать открытых глаз” везде, где она есть.

В каких местах ещё находится применение технологии за исключением мобильных телефонов?

Несмотря на то, что основная мысль нашей работы касается конкретно портативным гаджетам, стоит упомянуть о альтернативных областях использования технологии:

• Контроль прохода в рабочих помещениях и резиденциях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Виртуальные идентификационные документы современного поколения;
• Системы видеоконтроля городских подразделений;
• Механизация регистрации явки учебных заведений/институтов;
• Вход участников компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или мобильника! Похожие инициативы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом меняется техпроцесс в нынешнее время?

Любой год возникают новые идеи для улучшения уровня функционирования систем распознавания лиц:

1. Увеличивается разрешение сенсорных устройств — чем больше элементов фиксируется видеокамерой/глубинными сенсорами, тем меньше риск неточности;
2. Улучшаются искусственные интеллекты — новейшие конструкции вида MobileNetV3 обеспечивают возможность быстро обучаться свежим особенностям внешности обладателя прямо на устройстве без отправки данных в облако.
3. Развиваются способы антиспуфинга — теперь смартфоны умеют различать настоящие движущиеся лица от неподвижных фото/маскировок по незаметным движениям кожи.
4. Интеграция со интеллектуальными приборами — интеллектуальные часы могут автоматически заблокировать смартфон, если обладатель отошёл далеко.
5. Появляются смешанные устройства — например комбинирующие аудио идентификацию + облик + дактилоскопический след.

Итак, те тренды особенно востребованы в данный момент:

1) Уменьшение компонентов

Производители стараются сократить размер выреза (“чёлки”) под датчики на экране за счёт интеграции компактных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на аппарате

Для увеличения приватности всё более расчётов осуществляется локально без отправки информации во внешний облачный услугу.

3) Унификация норм

Google интенсивно продвигает эталон BiometricPrompt API, для того чтобы такие платформы, как Вулкан 24, и каждые Android-аппы могли взаимодействовать с различными типами биометрии унифицированно.

Какое подобрать сегодня?

В случае если вам всем нужна предельная сохранность данных, подбирайте передовые устройства со встроенным ИК-проектором или ToF-сенсором глубины.

• iPhone всех последних версий
• Huawei Mate/Series P линейки
• Mix Expert
• Vivo X линейки
• Oppo Find X линейки.

Если бюджет ограничен – лучше предпочесть классическим методам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в Вулкан 24, применять только как дополнительную возможность удобства.

Каким способом улучшить удобство работы возможности?

Есть некоторые советов для людей, кто уже применяет функцию распознавания лица:

1. Регулярно обновляйте свою фото-шаблон, если сильно трансформируется облик.
2. Не упускайте из виду чистить объектив передней камеры – загрязнения могут снизить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам запускает фотоаппарат когда вы поднимаете его.
4. При регистрации постарайтесь сохранять лицо неподвижно впереди камеры исключая значительного наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвернулись от экрана.

Возможности развития техники

В ближайшие периоды можно предвкушать появления полностью безконтактных способов опознания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: физиономия + голос + шаги + жесты рук!

Также предполагается появление новых методов охраны приватности – скажем, изменяющееся корректировка диджитал шаблона после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из очень захватывающих технологий нашего времени! Она предоставляет интеракцию со телефоном проще чем до этого, и такие программы, как Vulkan24, могут существенно повысить ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы понимаете, как работает эта система в деталях, – сможете осознаннее выбирать свой очередной девайс!