Каким образом функционирует определение лиц в телефонах

Почему мы выбираем разлочивание по лицевому распознаванию

В недавние времена определение лиц является одной из самых популярных функций для открытия смартфонов. Лишь пару годов тому назад большинство пользователей удовлетворялись PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением подобных технологий, как Вулкан Платинум, нам достаточно просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект превращает данную функцию очень нужной? Для начала, это удобно: не нужно удерживать в памяти сложные пароли или отыскивать правильный палец в мраке. Во-вторых, это оперативно: современные системы распознают лицо практически за мгновение. В-третью очередь, это чувство футуризма — будто в фильмах про казино Вулкан шпионов.

Впрочем за данной видимой простотой таится весь универсум комплексных методов и инженерных концепций. Попробуем понять, как точно функционирует идентификация по лицу в новейших мобильных телефонах, какие бывают способы, насколько они защищены и что нас предстоит.

Краткая повествование развития технологии

Идентификация лиц как технология присутствует уже более 50 лет. Начальные попытки машинного изучения облика были осуществлены еще в 1960-х годах в лабораториях США. Тогда компьютеры могли лишь определять контуры головы и вычислять расстояния между очами и губами на монохромных изображениях.

Изначальные торговые платформы возникли в девяностых годах, но они были неидеальны: работали медленно и часто давали сбои. Только с развитием нейронных сетей и таких платформ, как Vulkan Platinum, мощных мобильных микросхем определение лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным сканированием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять собственные решения.

Главные стадии действия системы определения

Процесс идентификации лица можно условно разделить на несколько ключевых этапов:

1. Распознавание лиц — аппарат выявляет присутствие человеческого лица в кадре.
2. Извлечение признаков — система исследует контуры облика: очертания зрительных органов, обонятельного органа, губ, расположение бровей.
3. Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с эталоном — созданный образец сопоставляется с сохранённой при учёте биометрической информацией владельца.
5. Принятие решения — если совпадение достаточно высокое, смартфон деблокируется.

Всякий из этих шагов требует особых процедур и оптимизаций для быстрой работы непосредственно на девайсе.

Аппаратные составляющие: что прячется внутри них

Стандартная фронтальная камера.

Самый простой вариант распознавания физиономии использует только фронтальную камеру смартфона. Данный способ реализован во многих бюджетных вариантах Android-девайсов.

Положительные стороны:

• Не требует внешних сенсоров.
• Оперативно работает при достаточном освещённости.

Слабые стороны:

• Просто ввести в заблуждение фотографией или роликом.
• Плохо функционирует при слабом освещённости или непривычных ракурсах.

ИК камера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как Vulkan Platinum, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология составляет базу Face ID от Apple.

Каким способом это функционирует:

• Точечный проекционный прибор отображает на физиономию юзера невидимую решетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 точек).
• ИК камера фиксирует изменение формы этой сетки по поверхности лица.
• Формируется 3D глубинная карта глубины, которая почти неподвластна для имитации типичной фото или маскировкой.

Выигрыши

• Надёжная деятельность даже в полной тьме.
• Сильная сопротивляемость к имитациям.
• Точность распознавания выше 99%.

Дополнительные сенсорные устройства

В отдельных устройствах используются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые определяют время движения света до цели и обратно; RGB-датчики дальности; специальные оптические измерители расстояния для создания более точной 3D-модели лица.

Эти инновации встречаются наиболее часто во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: синтетический интеллект в исполнении

Нынешние системы опознания физиономий неосуществимы при отсутствии использования ИИ и machine learning. Именно вследствие таким технологиям, как Vulkan Platinum, устройство может идентифицировать владельца даже при трансформациях облика: новая причёска, борода, линзы или грим не становятся барьером для открытия.

Обнаружение лиц

В начальном шаге программа обязана мгновенно распознать ликовое изображение внутри целого изображения камеры. Для этого задействуются многоуровневые классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые натренированы идентифицировать человеческие лица среди множества других объектов.

Пример: процесс MTCNN в состоянии обнаруживать лицо даже с неполном перекрытии (например, шарфом или ладонью).

Идентификация важных моментов

После распознавания лица механизм, такая как Vulkan Platinum, вычисляет расположение основных точек: кончики глаз, кончик носа, контуры губ и так далее. Часто используется от 68 до 128 основных меток на лице.

Данное необходимо для выравнивания картинки: если пользователь удерживает телефон под наклоном, или наклонил головку, программа корректирует картинку до нормального состояния для дальнейшего анализа.

Построение биометрического образца

Далее нейросеть строит уплотненное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 вещественных чисел.

Этот формат крайне сложно имитировать: он не удерживает само фото пользователя, а лишь исключительные характеристики его вида, что делает его совершенным для таких платформ, как Вулкан Казино Платинум.

Сравнительный анализ и вынесение заключения

В случае, когда пользователь желает разблокировать мобильник взором, система воспроизводит все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный уровень (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ запрещается.

Приспособление к трансформациям облика

Интересная особенность нынешних систем — возможность самообучения. Если вы регулярно открываете смартфон с обновленной укладкой или оптикой, программа постепенно модернизирует базовый шаблон вашего внешности для повышения точности работы без снижения уровня безопасности.

Защита биометрии информации.

Многие клиенты боятся держать свои биометрические идентификационные данные на мобильном устройстве из-за угрозы утечки информации или взлома гаджета. Иные компании, такие как Вулкан Казино Платинум, предоставляют методы для увеличения защиты сведений юзеров.

• Локальное сбережение: Большинство устройств сохраняет биометрические модели исключительно внутри безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не выходят из устройство и закрыты в том числе создателю.

• Шифрование: Все данные сберегаются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних разработчиков не обладают прямого доступа к биометрическим данным; они могут лишь запрашивать факт верификации личности через системный API.

Стоит упомянуть важную деталь: в случае, если кто-либо достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие изготовители внедряют защиту от неосознанного разблокирования — например, заставляют разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают виды определения лиц на изображениях?

Сегодня можно выделить выделить 3 главных метода к осуществлению этой операции:

Программируемое 2D распознавание

Эксплуатируется только лицевая камера без дополнительных датчиков дистанции. Такой подход используется чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость воплощения; минимальная стоимость; оперативная работа при достаточном свете.
Минусы: просто ввести в заблуждение снимком; неустойчивая работа ночью; низкая защищенность.

Аппаратное 3D оцифровка

Использует ИК видеокамеру + проекционный модуль пикселей + датчики глубины (Face ID от Apple; подобные технологии у Huawei Mate).
Достоинства: значительная надежность; невозможно исказить фото/видео; постоянная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с ИИ-дополнением

Используют комбинацию софтверных методов + аппаратную обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие товары, как Vulkan Platinum и Google Pixel Face Unlock современных поколений, комбинируют фронталку c ИК сенсором движения Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Примеры эксплуатации разнообразных способов

• iPhone серии X/11/12/13/14 задействуют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition впервые внедрил подобие Face ID в числе Android.
• Samsung Galaxy S10/S20 имеют как программное обеспечение плоское идентификацию по фото фронтальной камерой, так и сенсор глазного ириса.
• Huawei Mate20 Pro применяет систему из ИК-подсветки + Dot Projector + ToF-датчик

Проблемы охраны и ложные срабатывания

Несмотря на замечательный развитие технологий за последние годы, идеальных системы пока не существует:

1. Вероятность подвоха: Бюджетные смартфоны легко доступны четкой фотографией пользователя или видеозаписью с экрана другого устройства.
2. Идентичные близнецы: Даже самые безупречные механизмы могут перепутать между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
3. Трансформации облика: Стремительное похудение/набор веса, пластические операции или травмы порой необходимы для обновления данных биометрии.
4. Условия фотографирования: Яркая освещённость солнцем либо интенсивная затенение могут уменьшить аккуратность определения признаков.

Ниже некоторые рекомендаций по защищённому эксплуатации:

• Для важных операций всегда применяйте дополнительную аутентификацию;
• Не запускайте возможность “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
• Регулярно обновляйте ПО смартфона для предотвращения угроз от актуальных атак;
• Включайте настройку “Требовать распахнутых глаз” там, где она есть.

Где дополнительно используется технология кроме смартфонов?

Хотя основная мысль данной публикации сосредоточена на в частности смартфонам и планшетам, следует отметить других сферах применения технологии:

• Контроль прохода в офисах и резиденциях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Электронные паспорта нового образца;
• Системы видеонаблюдения муниципальных подразделений;
• Механизация учёта явки образовательных учреждений/институтов;
• Вход участников компьютеров/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по лицу (“Face Pay”) — достаточно пройти через турникет без карты или мобильника! Схожие программы развиваются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как трансформируется технология сегодня?

Всякий год возникают современные концепции для повышения стандарта деятельности систем лицевого распознавания:

1. Увеличивается чёткость сенсоров — чем больше элементов фиксируется фотоаппаратом/глубинными сенсорами, тем меньше шанс погрешности;
2. Улучшаются нейросети — современные архитектуры вида MobileNetV3 дают возможность скоростно адаптироваться к дополнительным характеристикам облика пользователя прямо на устройстве без пересылки информации в облачное хранилище.
3. Развиваются способы антиспуфинга — теперь телефоны способны различать настоящие анимированные лица от фиксированных фотографий/масок по незаметным микродвижениям.
4. Взаимодействие со интеллектуальными приборами — смарт-часы могут автоматически блокировать смартфон, если пользователь ушёл далеко.
5. Появляются смешанные устройства — в частности комбинирующие речевую идентификацию + облик + дактилоскопический след.

Здесь, которые направления очень популярны в данный момент:

1) Миниатюризация деталей

Производители намереваются уменьшить величину отверстия (“чёлки”) для сенсоры на экране за счёт внедрения маленьких ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на девайсе

Для увеличения личной безопасности всё больше обработки данных осуществляется локально без пересылки информации во дополнительный облачный сервис.

3) Стандартизация норм

Google активно пропагандирует стандарт BiometricPrompt API, чтобы такие системы, как Вулкан Платинум, и все Android-аппы могли взаимодействовать с всеми формами биометрии унифицированно.

Что подобрать на сегодня?

В случае если тебе важна предельная защита информации, выбирайте флагманские аппараты с вмонтированным ИК-проектором либо ToF-датчиком глубины.

• iPhone всех актуальных моделей
• Huawei Companion/Series P серии
• Mi Professional
• Vivo X модели
• Oppo Find Х серии.

Если финансы скромен – лучше отдавать предпочтение традиционным методам защиты (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как второстепенную возможность удобства.

Каким способом улучшить удобство использования опции?

Есть несколько хитростей для людей, кто уже использует разблокировку по лицу:

1. Часто обновляйте свою фотографию-шаблон, если кардинально меняется внешний вид.
2. Не пренебрегайте чистить объектив фронтальной камеры – разводы могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам активирует фотоаппарат когда вы поднимаете его.
4. В процессе регистрации постарайтесь сохранять голову неподвижно напротив видеоустройства без резкого наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отворачиваетесь от экрана.

Будущее развития техники

В скоро наступающие периоды можно предполагать появления полностью безконтактных способов идентификации индивидуума сразу по нескольким биометрическим параметрам одновременно: лицо + голос + походка + движения рук!

Также вероятно возникновение современных подходов охраны личной информации – скажем, динамическое изменение цифрового шаблона после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из самых увлекательных технологий нашего периода! Она делает общение со смартфоном проще чем раньше, и такие программы, как Вулкан Казино Платинум, могут в разы повысить ваш опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы понимаете, как работает эта технология в деталях, – сможете более осмысленно выбирать свой очередной гаджет!