Каким способом работает определение лиц в телефонах

Почему мы предпочитаем разблокирование по фейсу

В прошлые годы распознавание лиц превратилось в одной из самых распространённых функций для разблокировки мобильных телефонов. Лишь пару лет ранее большинство пользователей обходились пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением подобных технологий, как Вулкан Платинум, нам вполне просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект обуславливает данную возможность настолько популярной? Во-первых, это практично: не нужно помнить сложные пароли или находить правильный палец в мраке. Во-вторых, это мгновенно: современные алгоритмы распознают лицо фактически за доли секунды. В-третьих, это ощущение футуризма — будто в кинолентах про vulkan platinum агентов.

Тем не менее за данной видимой несложностью скрывается полный мир сложных технологий и инженерных решений. Попробуем разобраться, как конкретно работает фейсканирование в современных гаджетах, какие существуют методы, насколько они надёжны и что нас ждёт впереди.

Краткая хроника развития технологии

Идентификация лиц как техника существует уже более 50 годов. Начальные попытки автоматического исследования лиц были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры умели лишь выделять силуэты лица и измерять расстояния между очами и устами на ахроматических изображениях.

Изначальные торговые установки возникли в 1990-х годах, но они были далеки от совершенства: работали медленно и часто давали сбои. Только с эволюцией нейронных сетей и таких площадок, как Vulkan Platinum, сильных мобильных микросхем распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным идентификацией лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать свои решения.

Главные шаги функционирования устройства распознавания

Процесс идентификации лица можно условно разделить на несколько важных этапов:

1. Обнаружение лица — аппарат выявляет существование гуманного лица в снимке.
2. Определение характеристик — механизм изучает черты лица: конфигурацию зрительных органов, обонятельного органа, губ, расположение бровей.
3. Построение структуры — создаётся неповторимый цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с стандартом — созданный шаблон сверяется со сохранённой при учёте биометрической данными владельца.
5. Принятие определения — если соответствие достаточно высокое, смартфон открывается.

Всякий из этих стадий требует индивидуальных алгоритмов и усовершенствований для скорой работы прямо на устройстве.

Технические составляющие: что прячется внутри них

Типичная селфи камера.

Самый простой простой способ определения физиономии использует только лицевую видеокамеру мобильного устройства. Подобный метод реализован во различных доступных моделях Android-устройств.

Преимущества:

• Не потребляет внешних сенсоров.
• Оперативно функционирует при достаточном освещённости.

Слабые стороны:

• Просто одурачить снимком или видео.
• Плохо работает при плохом свете или необычных точках зрения.

ИК фотокамера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс является основой Face ID от Apple.

Как это действует:

• Точечный устройство проекции проецирует на физиономию пользователя невидимую структуру из тысяч инфракрасных точек (например, Face ID применяет около 30 000 пятен).
• ИК камера записывает изменение формы этой сетки по плоскости физиономии.
• Формируется 3D глубинная карта глубинности, которая почти что неосуществима для подделки обычной фотографией или маской.

Преимущества

• Надёжная работа даже в полной тьме.
• Высокая сопротивляемость к фальсификациям.
• Точность определения более 99%.

Дополнительные сенсоры

В некоторых девайсах используются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые измеряют время распространения луча до цели и обратно; RGB-датчики дальности; специальные оптические измерители расстояния для формирования более точной 3D-модели лица.

Эти технологии встречаются в основном во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искусственный разум на действии

Текущие устройства распознавания физиономий немыслимы без эксплуатации ИИ и машинного обучения. Именно из-за таким разработкам, как Vulkan Platinum, устройство в состоянии распознавать юзера даже при метаморфозах внешности: новая укладка, борода, очки или грим не становятся помехой для деблокировки.

Обнаружение физиономии

На начальном стадии алгоритм необходимо оперативно распознать ликовое изображение в пределах всего изображения камеры. Для этого используются каскадные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены распознавать лиц человека среди множества других объектов.

Пример: процесс MTCNN способен обнаруживать лицо даже в случае частичном закрытии (например, шалью или рукой).

Выделение ключевых аспектов

После распознавания лица система, такая как Vulkan Platinum, вычисляет положение основных точек: уголки глаз, конец носа, контуры губ и так далее. Часто используется от 68 до 128 основных маркеров на лицевой области.

Данное нужно для выравнивания изображения: если юзер находится с смартфон под наклоненным, или повернул голову, программа исправляет изображение до обычного угла для дальнейшего анализа.

Создание биометрического модели

Далее искусственная сеть строит сжатое цифровое представление („эмбеддинг”) внешности пользователя — своеобразный цифровой „отпечаток” лица длиной от 128 до 512 флоатов.

Этот формат очень трудно подделать: он не сохраняет непосредственно изображение пользователя, а лишь исключительные характеристики его облика, что делает его идеальным для таких платформ, как Вулкан Казино Платинум.

Сравнение и осуществление заключения

В случае, когда пользователь хочет разблокировать мобильник взглядом, программа осуществляет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый уровень (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, открывается; если нет — доступ запрещается.

Приспособление к метаморфозам внешности

Интересная черта актуальных систем — способность самостоятельного обучения. Если ты регулярно разблокируете смартфон с новой укладкой или оптикой, алгоритм постепенно модернизирует базовый образец вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Безопасность биометрических данных данных.

Большинство пользователи боятся сохранять свои биометрические данные на мобильном устройстве из-за вероятности потери данных или взлома устройства. Иные организации, такие как Вулкан Казино Платинум, предлагают методы для увеличения безопасности данных пользователей.

• Локальное сохранение: Большинство устройств сохраняет биометрические шаблоны только в пределах защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не выходят из гаджет и не доступны в том числе производителю.

• Шифрование: Все сведения сберегаются только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Программы третьих девелоперов не обладают прямого возможности доступа к биометрическим; они могут лишь запрашивать факт верификации личности через системный API.

Необходимо подчеркнуть значимую особенность: если какой-то человек достанет доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие изготовители внедряют меры безопасности от неосознанного разблокирования — в частности, заставляют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются виды определения лиц?

На сегодняшний день можно определить выделить 3 ключевых подхода к осуществлению этой функции:

Программное 2D определение

Применяется только фронтальная видеокамера без вспомогательных датчиков глубины. Такой подход наблюдается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота воплощения; минимальная стоимость; скоростная функционирование при хорошем свете.
Минусы: несложно одурачить фотографией; неустойчивая деятельность ночью; низкая безопасность.

Аппаратное 3D оцифровка

Задействует ИК камеру + проектор пикселей + сенсоры глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Достоинства: высокая надежность; нельзя исказить фото/видео; устойчивая работа при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана („чёлка”)

Смешанные методы с ИИ-дополнением

Задействуют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для усиления устойчивости к атакам („anti-spoofing”). Например, такие изделия, например Vulkan Platinum и Google Pixel Face Unlock новейших версий, сочетают фронтальную камеру c инфракрасным сенсором движения Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Образцы применения разнообразных способов

• iPhone серии X/11/12/13/14 задействуют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз представил аналог Face ID в ряду Android.
• Samsung Galaxy S10/S20 обеспечивают как софтверное плоское идентификацию по изображению фронтальной камерой, так и сенсор глазного ириса.
• Huawei Mate20 Pro задействует систему из ИК-освещения + Dot Projector + ToF-сенсор

Трудности защиты и неверные срабатывания

Несмотря на впечатляющий прогресс техники за прошедшие годы, идеальных механизмов пока не существует:

1. Возможность мошенничества: Бюджетные телефоны легко открываются качественной снимком пользователя или видео с экрана другого устройства.
2. Идентичные двойняшки: Даже самые совершенные устройства могут ошибиться между однояйцевыми близнецами либо родичами с очень похожей внешностью.
3. Трансформации облика: Внезапное снижение веса/набор веса, косметические процедуры или травмы в некоторых случаях требуют обновления данных биометрических данных.
4. Условия съёмки: Интенсивная засветка солнечным светом или глубокая затенение могут понизить точность идентификации признаков.

Здесь пара рекомендаций для безопасному применению:

• Для значимых операций всегда используйте дополнительную аутентификацию;
• Не запускайте опцию „Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Регулярно обновляйте ПО смартфона для защиты от современных угроз;
• Включайте настройку „Требовать открытых глаз” в тех местах, где она есть.

В каких областях ещё используется технологии кроме смартфонов?

Хотя основная мысль данной статьи касается конкретно мобильным устройствам, следует отметить альтернативных областях использования технологии:

• Мониторинг входа в рабочих помещениях и многоквартирных зданиях;
• Платёжные устройства банков („Face Pay”);
• Электронные идентификационные документы современного поколения;
• Комплексы видеоконтроля муниципальных сервисов;
• Механизация отслеживания явки школ/университетов;
• Аутентификация юзеров ПК/ноутбуков.

Например: В московском метро уже проверяется система платежа проезда по лицу („Face Pay”) — нужно лишь пройти через барьер без карты или мобильника! Похожие программы осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом трансформируется техпроцесс сегодня?

Всякий годик появляются свежие идеи для улучшения качества деятельности систем распознавания лиц:

1. Увеличивается разрешение сенсоров — чем больше деталей фиксируется камерой/глубинными сенсорами, тем меньше вероятность ошибки;
2. Развиваются нейронные сети — новейшие архитектуры типа MobileNetV3 дают возможность оперативно обучаться свежим особенностям внешности владельца напрямую на гаджете без отправки данных в облако.
3. Развиваются технологии антиспуфинга — теперь смартфоны способны отличать подлинные живые облики от неподвижных фотографий/масок по микроскопическим движениям кожи.
4. Взаимодействие со интеллектуальными приборами — смарт-часы могут самостоятельно блокировать телефон, если пользователь ушёл далеко.
5. Появляются гибридные механизмы — в частности совмещающие аудио идентификацию + облик + отпечаток пальца.

Здесь, которые направления очень популярны сейчас:

1) Уменьшение компонентов

Компании пытаются минимизировать размер выреза („чёлки”) для сенсоры на дисплее за счёт внедрения миниатюрных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения конфиденциальности всё больше обработки данных выполняется локально без передачи данных во сторонний облачный сервис.

3) Стандартизация стандартов

Гугл активно продвигает стандарт BiometricPrompt API, с целью чтобы подобные системы, как Вулкан Платинум, и каждые Android-программы были совместимы с всеми формами биометрии стандартизированно.

Какое выбрать на сегодня?

В случае если тебе важна предельная безопасность данных, выбирайте топовые устройства с интегрированным ИК-проектором либо ToF-датчиком глубины.

• iPhone всех существующих новейших моделей
• Huawei Mate/P серии
• Mi Expert
• Vivo X серии
• Оппо Find X серий.

Если средства невелик – лучше предпочесть традиционным средствам защиты (PIN-код/сканер пальца), а возможность „разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как второстепенную возможность удобства.

Каким способом улучшить практичность функционирования опции?

Есть некоторые лайфхаков для пользователей, кто уже использует разблокировку по лицу:

1. Регулярно обновляйте свою фото-шаблон, если сильно изменяется облик.
2. Не упускайте из виду очищать линзу фронтальной камеры – загрязнения могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам запускает камеру когда вы берёте его в руки.
4. При регистрации пытайтесь сохранять лицевую часть ровно впереди камеры без значительного наклона головы.
5. Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отвернулись от экрана.

Перспективы прогресса инноваций

В ближайшие годы можно предвкушать возникновения полностью дистанционных способов опознания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + звучание + походка + манипуляции руками!

Также предполагается появление современных способов защиты личной информации – скажем, переменное модификация цифрового паттерна после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – единственная из самых увлекательных инноваций нашего времени! Она предоставляет взаимодействие со телефоном удобнее чем когда-либо прежде, и такие программы, как Вулкан Казино Платинум, могут существенно оптимизировать ваш опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы понимаете, как функционирует эта методика в деталях, – сможете вдумчиво выбирать свой будущий девайс!