Каким образом работает определение лиц в смартфонах

Зачем мы предпочитаем разблокирование по лицевому распознаванию

В прошлые годы распознавание физиономий является одной из самых популярных функций для деблокировки смартфонов. Лишь некоторые годков ранее основная часть пользователей удовлетворялись пин-кодами, паролями или датчиками отпечатков пальцев. Но при появлением подобных технологий, например Вулкан Платинум, нам достаточно просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект превращает эту возможность очень нужной? Во-первых, это комфортно: не нужно помнить сложные пароли или искать правильный палец в мраке. Также, это оперативно: современные программы распознают лицо буквально за мгновения ока. В-третьем пункте, это ощущение футуристичности — словно в кинолентах про vulkan platinum разведчиков.

Тем не менее за этой кажущейся легкостью таится полный вселенная трудных технологий и инженерных решений. Позвольте нам понять, как точно действует распознавание лиц в современных смартфонах, какие применяются способы, насколько они безопасны и что нас ждёт впереди.

Короткая хроника прогресса технологии

Распознавание лиц как технология существует уже более 50 годов. Изначальные пробы автоматического изучения лица были предприняты еще в 1960-х годах в лабораториях США. Тогда ЭВМ умели лишь выделять контуры лица и измерять расстояния между зрачками и ртом на черно-белых снимках.

Первые бизнес платформы стали доступны в 1990-х годах, но они были неидеальны: действовали неспешно и часто давали сбои. Только с развитием нейронных сетей и таких платформ, как Vulkan Platinum, высокопроизводительных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные разработки.

Главные шаги действия устройства идентификации

Процесс определения лица можно условно поделить на несколько ключевых этапов:

1. Распознавание лиц — устройство выявляет присутствие гуманного лица в изображении.
2. Извлечение признаков — механизм анализирует контуры физиономии: очертания зрительных органов, носа, уст, позицию бровей.
3. Построение шаблона — создаётся особенный электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со эталоном — полученный шаблон сверяется со записанной при внесении биометрической сведениями владельца.
5. Принятие выбора — если сходство достаточно высокое, смартфон деблокируется.

Всякий из указанных этапов нуждается в специальных алгоритмов и усовершенствований для скорой работы непосредственно на девайсе.

Железные составляющие: что находится внутри

Обычная селфи камера.

Наиболее несложный способ определения физиономии использует исключительно лицевую видеокамеру смартфона. Такой способ осуществлён во многих доступных вариантах Android-устройств.

Сильные стороны:

• Не нуждается в потребляет дополнительных датчиков.
• Оперативно работает при качественном освещённости.

Отрицательные стороны:

• Несложно ввести в заблуждение изображением или видео.
• Неудачно работает при плохом освещённости или непривычных точках зрения.

ИК фотокамера и точечный проекционный аппарат

Более усовершенствованные системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс лежит в основе Face ID от Apple.

Каким образом это действует:

• Точечный проекционный прибор показывает на лицо юзера невидимую сетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 точек).
• ИК устройство фиксирует деформацию данной сетки по плоскости лица.
• Создаётся трёхмерная глубинная карта глубины, которая почти что неосуществима для подделки типичной фото или маской.

Преимущества

• Надёжная работа даже в полной темноте.
• Сильная сопротивляемость к имитациям.
• Точность определения более 99%.

Дополнительные датчики

В определённых аппаратах применяются также вспомогательные сенсоры: ToF (Time-of-Flight), которые определяют период движения света до цели и обратно; Трехцветные-датчики глубины; специальные световые измерители расстояния для формирования более точной 3D-модели физиономии.

Эти разработки встречаются наиболее часто во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: синтетический интеллект на действии

Нынешние системы идентификации физиономий немыслимы в отсутствие использования искусственного интеллекта и machine learning. Именно из-за таким разработкам, как Vulkan Platinum, аппарат может распознавать владельца даже при изменениях внешнего вида: новая укладка, борода, линзы или макияж не становятся барьером для деблокировки.

Распознавание лица

При начальном шаге программа необходимо быстро найти образ лица среди всего снимка с камеры. Для этого применяются последовательные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые натренированы находить человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN способен обнаруживать облик даже в случае неполном перекрытии (например, шарфом или рукой).

Идентификация важных моментов

После распознавания лица устройство, такая как Vulkan Platinum, вычисляет расположение ключевых точек: кончики глаз, верхушка носа, края губ и так далее. Как правило задействуется от 68 до 128 основных меток на лице.

Данное нужно для выравнивания картинки: если юзер находится с мобильник под углом, или склонил голову, программа исправляет картинку до нормального состояния для дальнейшего анализа.

Создание биометрического идентификатора модели

Далее нейросеть строит уплотненное математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Такой формат крайне трудно сфальсифицировать: он не сохраняет само изображение пользователя, а лишь исключительные характеристики его внешности, что делает его оптимальным для таких площадок, как Вулкан Казино Платинум.

Сопоставление и принятие решения

Если пользователь желает разблокировать мобильник взором, механизм воспроизводит все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный порог (обычно превышает 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ запрещается.

Привыкание к изменениям внешности

Занимательная характеристика нынешних систем — возможность самообучения. Если ты постоянно разблокируете телефон с обновленной укладкой или оптикой, алгоритм постепенно освежает эталонный образец вашего внешности для повышения точности работы без снижения уровня безопасности.

Защита биометрических данных данных.

Большинство клиенты беспокоятся сохранять свои биометрические данные на смартфоне из-за риска утечки информации или взлома устройства. Некоторые фирмы, например Вулкан Казино Платинум, предоставляют решения для повышения сохранности данных юзеров.

• Локальное сбережение: Большинство девайсов сохраняет биометричные модели исключительно в пределах защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не выходят из устройство и недоступны даже изготовителю.

• Шифрование: Все сведения хранятся только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Программы третьих разработчиков не имеют прямого возможности доступа к биометрическим; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Стоит отметить важную деталь: если кто-либо достанет физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие компании реализуют систему защиты от автоматического разблокирования — например, требуют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие имеются виды идентификации лиц?

На сегодняшний день можно выделить различить 3 главных метода к реализации этой задачи:

Софтверное двухмерное распознавание

Используется только фронтальная камера без вспомогательных датчиков глубины. Такой метод используется наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота реализации; минимальная затраты; скоростная деятельность при качественном свете.
Минусы: просто ввести в заблуждение фотографией; нестабильная деятельность ночью; слабая охрана.

Оборудование для объёмное оцифровка

Применяет инфракрасную камеру + проекционный модуль точек + сенсоры дистанции (Face ID у Apple; подобные технологии у Huawei Mate).
Преимущества: высокая надёжность; нельзя обмануть фото/видео; постоянная функционирование в любых условиях освещения.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные методы с дополнением ИИ

Используют комбинацию программируемых методов + техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие товары, например Vulkan Platinum и Google Pixel Face Unlock новейших поколений, объединяют фронталку c ИК датчиком мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеоэкранами чужих устройств.

Образцы эксплуатации различных способов

• iPhone серии X/11/12/13/14 применяют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз представил эквивалент Face ID среди Android.
• Samsung Galaxy S10/S20 обеспечивают как программное обеспечение плоское определение по изображению селфи-камерой, так и сканер радужки глаза.
• Huawei Mate20 Pro задействует набор из ИК-инфракрасного света + Dot Projector + ToF-датчик

Трудности безопасности и неверные срабатывания

Несмотря на впечатляющий развитие техники за прошедшие годы, безупречных системы пока не наблюдается:

1. Вероятность обмана: Недорогие смартфоны легко “разблокируются” четкой изображением хозяина или же роликом с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые совершенные системы могут перепутать между монозиготными близнецами либо семьями с очень похожей внешностью.
3. Метаморфозы облика: Внезапное утрата веса/увеличение массы тела, хирургические вмешательства либо травмы иногда требуют перерегистрации биометрии.
4. Условия записи: Интенсивная освещённость солнечным светом или же плотная темнота могут снизить точность распознавания признаков.

Вот пара рекомендаций по надёжному эксплуатации:

• Для важных операций всегда используйте двухэтапную аутентификацию;
• Не запускайте функцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
• Систематически обновляйте программное обеспечение телефона для обеспечения безопасности от современных угроз;
• Включайте опцию “Требовать раскрытых глаз” в тех местах, где она доступна.

В каких областях дополнительно применяется технологии помимо мобильных телефонов?

Несмотря на то, что тема данной статьи касается в частности мобильным устройствам, следует отметить альтернативных областях использования технологии:

• Мониторинг входа в деловых центрах и многоквартирных зданиях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Виртуальные удостоверения личности современного образца;
• Установки видеоконтроля городских служб;
• Автоматизирование учёта посещаемости образовательных учреждений/институтов;
• Авторизация пользователей персональных компьютеров/ноутбуков.

Например: В городском метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — хватит пройти через барьер без карты или телефона! Похожие программы реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как трансформируется техпроцесс в наше время?

Каждый годочек проявляются современные идеи для усовершенствования стандарта функционирования систем распознавания лиц:

1. Увеличивается разрешение сенсорных устройств — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность неточности;
2. Улучшаются нейронные сети — новейшие структуры модели MobileNetV3 обеспечивают возможность быстро обучаться новым особенностям внешности пользователя прямо на устройстве без отправки данных в облако.
3. Развиваются технологии антиспуфинга — теперь телефоны способны распознавать подлинные живые лица от неподвижных фотографий/маскировок по микроскопическим микродвижениям.
4. Синхронизация со интеллектуальными приборами — интеллектуальные часы могут самостоятельно закрыть доступ к мобильный телефон, если пользователь ушёл далеко.
5. Проявляются гибридные системы — к примеру объединяющие речевую опознание + лицо + отпечаток пальца.

Вот, те тренды очень популярны на сегодняшний день:

1) Уменьшение элементов

Изготовители намереваются уменьшить величину прорези (“чёлки”) для датчики на дисплее за счёт внедрения миниатюрных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения конфиденциальности всё более расчётов осуществляется локально без отправки данных во сторонний облачный сервис.

3) Стандартизация норм

Гугл интенсивно продвигает норму BiometricPrompt API, с целью чтобы подобные платформы, например как Вулкан Платинум, и любые Android-программы были совместимы с любыми видами биометрии стандартизированно.

Что решить сегодня?

Когда вам необходима предельная сохранность данных, подбирайте топовые модели с вмонтированным ИК-излучателем либо ToF-сенсором глубины.

• iPhone каждого последних версий
• Huawei Companion/P ряда
• Mix Professional
• Vivo X серии
• Oppo Обнаружить Икс линейки.

Если бюджет невелик – лучше отдавать предпочтение классическим методам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как дополнительную опцию комфорта.

Как повысить комфорт работы опции?

Есть несколько советов для тех, кто уже пользуется функцию распознавания лица:

1. Часто обновляйте свою фото-шаблон, если кардинально меняется внешний вид.
2. Не пренебрегайте чистить линзу фронтальной камеры – загрязнения могут уменьшить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам активирует фотоаппарат когда вы берёте его в руки.
4. Во время регистрационного процесса постарайтесь сохранять лицевую часть прямо впереди объектива без значительного наклона головы.
5. Используйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отвернулись от дисплея.

Возможности прогресса инноваций

В скоро наступающие годы можно предвкушать появления полностью дистанционных способов распознавания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + голос + шаги + жесты рук!

Также предполагается появление свежих подходов обеспечения личной информации – к примеру, переменное изменение диджитал паттерна после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее интересных технологий нашего времени! Она делает интеракцию со мобильным устройством комфортнее чем до этого, и такие программы, как Вулкан Казино Платинум, могут в разы повысить ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как функционирует эта методика внутри, – будете в состоянии более осмысленно подбирать свой следующий девайс!