Каким образом функционирует распознавание лицевых образов в телефонах

Почему мы останавливаемся на разлочивание по лицевому распознаванию

В прошлые времена распознавание физиономий стало одной из наиболее востребованных опций для разблокировки умных телефонов. Всего пару годов ранее основная масса использующих обходились пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением подобных технологий, например Вулкан Платинум, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что обуславливает данную функцию очень нужной? Во-первых, это удобно: не нужно запоминать замысловатые пароли или находить правильный палец в темноте. Кроме того, это быстро: современные программы распознают лицо буквально за доли секунды. В-третьих, это ощущение футуристичности — как будто в кинофильмах про казино Вулкан разведчиков.

Однако за этой видимой простотой прячется полный мир трудных техник и инженерных решений. Позвольте нам разобраться, как точно действует идентификация по лицу в актуальных мобильных телефонах, какие существуют способы, насколько они надёжны и что нас предстоит.

Краткая повествование эволюции технологии

Идентификация лиц как техника имеется уже более 50 лет. Первые попытки автоматического изучения лица были предприняты еще в 1960-х годах в лабораториях США. Тогда вычислительные машины способны были лишь определять контуры черепа и определять промежутки между очами и губами на ахроматических фотографиях.

Начальные бизнес системы стали доступны в 90-х, но они были несовершенны: функционировали медленно и нередко ошибались. Только с развитием нейронных сетей и таких площадок, как Vulkan Platinum, высокопроизводительных мобильных чипов распознавание лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным сканированием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать личные решения.

Главные шаги работы механизма определения

Процесс определения лица можно примерно разделить на несколько важных этапов:

Идентификация лица — устройство выявляет присутствие людского лица в изображении.
Выделение особенностей — механизм изучает особенности физиономии: очертания зрительных органов, обонятельного органа, губ, положение бровей.
Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе определённых признаков.
Сравнение с образцом — полученный образец сопоставляется с сохранённой при регистрации биометрической информацией владельца.
Принятие решения — если сходство достаточно значительное, смартфон деблокируется.

Любой из указанных шагов требует специальных методов и улучшений для оперативной работы непосредственно на девайсе.

Железные элементы: что скрыто внутри них

Типичная передняя камера.

Простейший простой метод определения физиономии применяет только лицевую видеокамеру мобильного устройства. Подобный метод осуществлён во многих бюджетных вариантах Android-девайсов.

Преимущества:

Не требует дополнительные датчиков.
Оперативно функционирует при достаточном свете.

Отрицательные стороны:

Несложно обмануть изображением или видео.
Неудачно действует при низком освещённости или непривычных углах обзора.

ИК фотокамера и точечный проектор

Более усовершенствованные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс является основой Face ID от Apple.

Каким образом это работает:

Точечный проектор отображает на облик использующего невидимую сетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
Инфракрасная устройство фиксирует деформацию этой решетки по плоскости лица.
Получается 3D глубинная карта глубины, что почти что неосуществима для фальсификации типичной фотографией или маской.

Преимущества

Надёжная функционирование даже в полной темноте.
Большая сопротивляемость к подделкам.
Точность определения более 99%.

Дополнительные сенсорные устройства

В отдельных аппаратах задействуются также экстра сенсорные устройства: ToF (Time-of-Flight), которые фиксируют время прохождения луча до предмета и обратно; Цветные-датчики глубины; специальные световые лидары для построения более точной 3D-модели физиономии.

Эти разработки применяются чаще всего во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: синтетический интеллект в работе

Нынешние устройства идентификации физиономий неосуществимы при отсутствии использования ИИ и машинного обучения. Именно благодаря таким разработкам, как Vulkan Platinum, устройство может узнавать владельца даже при изменениях внешнего вида: новая укладка, растительность на лице, оптика или грим не становятся помехой для деблокировки.

Распознавание лиц

На первом этапе программа обязана мгновенно найти образ лица среди всего снимка камеры. Для этой задачи применяются последовательные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены находить лиц человека среди множества других объектов.

Пример: алгоритм MTCNN способен распознавать физиономию даже при частичном перекрытии (например, шарфом или рукой).

Определение ключевых аспектов

После обнаружения лица механизм, такая как Vulkan Platinum, устанавливает положение ключевых точек: края глаз, конец носа, границы губ и так далее. Как правило задействуется от 68 до 128 основных точек на лице.

Данное необходимо для выравнивания картинки: если юзер удерживает смартфон под наклоном, или наклонил голову, программа корректирует изображение до стандартного положения для последующего изучения.

Создание биометрического идентификатора шаблона

Далее нейронная сеть строит сжатое числовое представление ("эмбеддинг") облика пользователя — своеобразный цифровой "отпечаток" внешности длиной от 128 до 512 вещественных чисел.

Данный образец очень затруднительно имитировать: он не удерживает непосредственно фото юзера, а лишь особенные черты его облика, что делает его оптимальным для таких площадок, как Вулкан Казино Платинум.

Сравнительный анализ и принятие решения

Когда человек намеревается разблокировать телефон взглядом, механизм воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный уровень (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, открывается; если нет — доступ запрещается.

Адаптация к трансформациям внешнего вида

Занимательная черта нынешних систем — возможность самообучения. Если ты постоянно разблокируете мобильное устройство с свежей стрижкой или оптикой, программа постепенно освежает базовый модель вашего внешности для повышения точности работы без снижения уровня безопасности.

Охрана биометрии данных.

Большинство юзеры беспокоятся держать свои био-идентификационные данные на мобильном устройстве из-за угрозы потери данных или хакерской атаки. Определенные компании, такие как Вулкан Казино Платинум, предоставляют методы для улучшения сохранности информации клиентов.

Локальное хранение: Большинство устройств хранит биометричные шаблоны лишь в пределах защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из аппарат и не доступны даже производителю.
Шифрование: Все информация сохраняются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция приложений: Приложения внешних девелоперов не имеют прямого доступа к биометрическим данным; они могут лишь требовать факт верификации идентичности через системный API.

Следует подчеркнуть существенную деталь: если кто-либо получит физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители осуществляют меры безопасности от автоматического разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют типы распознавания лиц?

На сегодняшний день можно различить 3 главных подхода к осуществлению этой задачи:

Софтверное 2D определение

Эксплуатируется только лицевая видеокамера без вспомогательных детекторов дистанции. Этот метод встречается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость воплощения; умеренная стоимость; быстрая деятельность при достаточном освещении.
Минусы: легко ввести в заблуждение фотографией; неустойчивая деятельность ночью; низкая охрана.

Техническое 3D сканирование

Применяет инфракрасную камеру + проектор пикселей + сенсоры глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Достоинства: большая надежность; нельзя исказить фото/видео; стабильная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана ("чёлка")

Гибридные подходы с дополнением ИИ

Задействуют комбинацию софтверных методов + техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам ("anti-spoofing"). Например, подобные изделия, как Vulkan Platinum и Google Pixel Face Unlock последних версий, комбинируют фронтальную камеру c ИК датчиком мобильности Soli Radar для защиты от подделок жестами/масками/видеоэкранами посторонних устройств.

Примеры использования различных способов

iPhone серии X/11/12/13/14 применяют только аппаратное трёхмерное сканирование
Xiaomi Mi8 Explorer Edition первый раз представил эквивалент Face ID в ряду Android.
Samsung Galaxy S10 модель/S20 имеют как программное двухмерное идентификацию по снимку фронтальной камерой, так и датчик глазного ириса.
Huawei Mate20 Pro задействует систему из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Вопросы безопасности и ошибочные тревоги

Несмотря на впечатляющий успехи технологий за прошедшие годы, безупречных механизмов пока не имеется:

Шанс мошенничества: Недорогие смартфоны легко доступны высококачественной изображением хозяина или же видеозаписью с дисплея иного гаджета.
Идентичные двойняшки: Даже самые совершенные механизмы могут перепутать между монозиготными близнецами либо родичами с очень аналогичной внешностью.
Изменения внешнего вида: Внезапное похудение/набор веса, хирургические вмешательства или повреждения порой необходимы для повторной регистрации биометрических данных.
Условия фотографирования: Интенсивная подсветка солнечным светом или же интенсивная тень могут понизить верность определения признаков.

Вот некоторые советов для надёжному использованию:

Для важных операций всегда применяйте двухэтапную аутентификацию;
Не включайте возможность "Разблокировка по лицу" на недорогих моделях без ИК-сенсоров;
Постоянно апгрейдите программное обеспечение телефона для предотвращения угроз от актуальных атак;
Включайте функцию "Требовать распахнутых глаз" в тех местах, где она есть.

В каких местах ещё находится применение технологии за исключением смартфонов?

Пускай основная мысль нашей публикации посвящена в частности мобильным устройствам, следует отметить других сферах применения технологии:

Контроль входа в рабочих помещениях и жилых домах;
Платёжные терминалы банков ("Face Pay");
Электронные паспорта нового поколения;
Системы видеонаблюдения городских подразделений;
Механизация регистрации присутствия образовательных учреждений/университетов;
Авторизация пользователей ПК/ноутбуков.

Например: В московском метро уже проверяется система платежа проезда по фейсу ("Face Pay") — нужно лишь пройти через турникет без карты или телефона! Похожие инициативы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом трансформируется технический процесс в нынешнее время?

Любой годик возникают современные идеи для улучшения качества деятельности систем идентификации лиц:

Увеличивается детализация сенсорных устройств — чем больше элементов фиксируется камерой/датчиками глубины, тем меньше шанс неточности;
Улучшаются искусственные интеллекты — новейшие конструкции вида MobileNetV3 позволяют оперативно осваивать новым характеристикам вида обладателя напрямую на гаджете без отправки данных в облако.
Улучшаются способы антиспуфинга — теперь телефоны могут отличать реальные движущиеся облики от статичных фото/масок по микроскопическим микродвижениям.
Синхронизация со смарт-гаджетами — интеллектуальные часы могут автоматически заблокировать смартфон, если владелец удалился на значительное расстояние.
Появляются комбинированные устройства — например объединяющие аудио идентификацию + физиономию + пальцевой отпечаток.

Вот, какие тренды особенно популярны сейчас:

1) Миниатюризация элементов

Изготовители пытаются сократить габариты прорези ("чёлки") для сенсоры на экране за счёт интеграции компактных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на аппарате

Для увеличения приватности всё больше обработки данных происходит на месте без передачи данных во внешний облачный услугу.

3) Упорядочивание регламентов

Гугл интенсивно продвигает стандарт BiometricPrompt API, чтобы аналогичные системы, например как Вулкан Платинум, и все Android-аппы могли работать с всеми формами биометрии унифицированно.

Какое решить сегодня?

В случае если тебе нужна наивысшая безопасность информации, подбирайте флагманские модели со встроенным ИК-излучателем либо ToF-сенсором глубины.

iPhone каждого последних моделей
Huawei Mate/P Series ряда
Mi Expert
Vivo X серии
Оппо Find Х серии.

Если средства ограничен – лучше предпочесть традиционным средствам защиты (PIN-код/сканер отпечатка), а функцию "разблокировка по лицу", такую как в Вулкан Платинум, задействовать только как опциональную возможность удобства.

Каким способом увеличить практичность функционирования возможности?

Есть некоторые лайфхаков для людей, кто уже использует разблокировку по лицу:

Регулярно обновляйте свою изображение-шаблон, если значительно трансформируется внешний вид.
Не пренебрегайте протирать линзу фронтальной камеры – пятна могут снизить четкость!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам запускает фотоаппарат если вы берёте его в руки.
В процессе регистрации старайтесь держать лицо неподвижно напротив камеры не допуская резкого наклона головы.
Используйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от дисплея.

Перспективы прогресса технологии

В ближайшие периоды можно предвкушать появления полностью безконтактных способов опознания человека сразу по нескольким биометрическим данным параметрам одновременно: облик + звучание + походка + жесты рук!

Также возможно развитие новых методов обеспечения приватности – например, динамическое модификация диджитал шаблона после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из самых увлекательных инноваций нашего времени! Она предоставляет интеракцию со мобильным устройством удобнее чем до этого, и такие программы, как Вулкан Казино Платинум, могут значительно повысить ваш опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы понимаете, как работает эта методика в деталях, – сумеете осознаннее подбирать свой очередной девайс!