Каким способом функционирует определение лиц в телефонах

Для чего мы останавливаемся на разлочивание по лицевому распознаванию

В недавние годы определение лиц превратилось в одной из самых популярных возможностей для деблокировки смартфонов. Лишь несколько годков назад основная часть пользователей обходились PIN-кодами, паролями или сканерами отпечатков пальцев. Но при появлением таких технологий, например Вулкан 24, нам вполне лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Что обуславливает эту конкретную особенность такой востребованной? Для начала, это комфортно: не нужно удерживать в памяти трудные пароли или отыскивать правильный палец в тьме. Во-вторых, это мгновенно: современные системы распознают лицо практически за мгновение. В-третьем пункте, это впечатление футуристичности — будто в кинолентах про вулкан автомат агентов.

Однако за такой кажущейся несложностью таится весь вселенная комплексных технологий и инженерных решений. Попробуем понять, как именно функционирует идентификация по лицу в новейших мобильных телефонах, какие применяются способы, насколько они защищены и что нас предстоит.

Короткая хроника развития технологии

Распознавание лиц как техника имеется уже более 50 лет. Начальные пробы автоматического исследования облика были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры могли лишь выделять контуры черепа и определять промежутки между очами и губами на черно-белых снимках.

Начальные торговые платформы возникли в 90-х, но они были далеки от совершенства: действовали неспешно и часто давали сбои. Только с развитием нейронных сетей и таких систем, как Вулкан 24 Казино, высокопроизводительных мобильных чипов идентификация лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным идентификацией лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать свои разработки.

Основные стадии функционирования механизма распознавания

Процесс распознавания лица можно примерно сегментировать на несколько ключевых этапов:

Распознавание лиц — аппарат определяет присутствие людского образа в снимке.
Определение признаков — механизм изучает особенности лица: конфигурацию глаз, носа, уст, положение надбровных дуг.
Построение структуры — создаётся особенный электронный отпечаток (faceprint) на основе определённых признаков.
Сравнение со эталоном — полученный шаблон сопоставляется со зафиксированной при учёте биометрической сведениями владельца.
Принятие определения — если совпадение достаточно высокое, смартфон открывается.

Любой из данных этапов требует индивидуальных методов и улучшений для оперативной работы непосредственно на девайсе.

Технические компоненты: что прячется внутри

Стандартная селфи камера.

Самый простой простой вариант идентификации физиономии применяет лишь лицевую камеру смартфона смартфона. Такой метод осуществлён во многочисленных бюджетных вариантах Android-устройств.

Достоинства:

Необходимо нуждается в внешних датчиков.
Быстро функционирует при достаточном свете.

Недостатки:

Легко ввести в заблуждение фотографией или видео.
Неудачно работает при плохом свете или непривычных точках зрения.

ИК камера и пунктирный проекционный аппарат

Более совершенные системы, такие как Вулкан 24 Казино, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика является основой Face ID от Apple.

Как это действует:

Точечный устройство проекции проецирует на физиономию пользователя невидимую решетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 пятен).
Инфракрасная устройство регистрирует изменение формы этой сетки по плоскости физиономии.
Создаётся трехмерная карта глубины глубины, которая почти что неосуществима для фальсификации типичной фото или маской.

Преимущества

Надёжная функционирование даже в полной неосвещённости.
Большая сопротивляемость к фальсификациям.
Точность распознавания более 99%.

Дополнительные сенсорные устройства

В некоторых аппаратах задействуются также вспомогательные датчики: ToF (Time-of-Flight), которые определяют время распространения луча до объекта и обратно; Трехцветные-датчики глубины; специальные лазерные лидары для построения более точной 3D-модели физиономии.

Эти инновации применяются в основном во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искуственный разум в исполнении

Текущие системы опознания физиономий немыслимы при отсутствии использования искусственного интеллекта и machine learning. Именно вследствие таким разработкам, как Вулкан 24 Казино, устройство в состоянии идентифицировать юзера даже при метаморфозах внешнего вида: новая укладка, борода, очки или макияж не становятся помехой для деблокировки.

Распознавание лица

При стартовом этапе программа обязана быстро найти лицо в пределах полного изображения камеры. Для этого используются многоуровневые классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены находить человеческие лица среди множества других объектов.

Пример: метод MTCNN может обнаруживать лицо даже с частичном перекрытии (например, платком или рукой).

Выделение ключевых аспектов

После обнаружения лица система, такая как Вулкан 24 Казино, вычисляет местоположение основных точек: кончики глаз, конец носа, края губ и так далее. Как правило задействуется от 68 до 128 ключевых меток на лицевой поверхности.

Это требуется для выравнивания картинки: если человек удерживает смартфон под наклоном, или повернул головку, программа исправляет изображение до обычного угла для дальнейшего анализа.

Построение биометрического идентификатора образца

Далее нейросеть строит компактное математическое представление („эмбеддинг“) внешности пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Данный шаблон очень трудно подделать: он не хранит само картинку пользователя, а лишь уникальные черты его вида, что делает его совершенным для таких систем, как Vulkan24.

Сравнение и принятие заключения

Если человек хочет разлочить телефон глазами, механизм воспроизводит все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа Vulkan24, открывается; если нет — доступ не предоставляется.

Приспособление к изменениям внешнего вида

Занимательная особенность актуальных системы — возможность самостоятельного обучения. Если вы постоянно доступаете к смартфон с свежей стрижкой или очками, программа постепенно освежает эталонный образец вашего облика для повышения точности работы без ухудшения безопасности.

Защита биометрических информации.

Большинство пользователи беспокоятся сохранять свои био-идентификационные данные на мобильном устройстве из-за риска утечки данных или хакерской атаки. Некоторые компании, такие как Vulkan24, предлагают варианты для повышения защиты информации клиентов.

Локальное хранение: Основная часть устройств сохраняет биометрические шаблоны исключительно в пределах защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не покидают гаджет и не доступны включая создателю.
Шифрование: Все сведения хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция программ: Программы внешних девелоперов не обладают непосредственного доступа к биометрическим; они могут лишь требовать подтверждение верификации идентичности через системный API.

Стоит упомянуть существенную подробность: если кто-то достанет доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество изготовители реализуют меры безопасности от неосознанного разблокирования — в частности, заставляют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют типы идентификации лиц на изображениях?

Сегодня можно определить различить 3 главных метода к реализации этой задачи:

Софтверное плоское определение

Эксплуатируется только лицевая камера без вспомогательных сенсоров дистанции. Подобный метод встречается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность реализации; минимальная стоимость; оперативная деятельность при хорошем свете.
Минусы: просто одурачить снимком; ненадежная функционирование ночью; недостаточная охрана.

Оборудование для 3D оцифровка

Использует ИК видеокамеру + проектор точек + датчики глубины (Face ID от Apple; подобные решения у Huawei Mate).
Плюсы: большая достоверность; нельзя подделать фото/видео; устойчивая функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана („чёлка“)

Гибридные методы с ИИ-дополнением

Применяют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для повышения устойчивости к атакам („anti-spoofing“). Например, такие изделия, как Вулкан 24 Казино и Google Pixel Face Unlock современных поколений, комбинируют фронталку c ИК сенсором движения Soli Radar для защиты от подделок руками/масками/видеоэкранами посторонних устройств.

Иллюстрации использования разных техник

iPhone модели X/11/12/13/14 применяют только аппаратное трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition первый раз внедрил эквивалент Face ID в ряду Android.
Samsung Galaxy S10/S20 имеют как софтверное плоское определение по фото фронтальной камерой, так и сканер глазного ириса.
Huawei Mate20 Pro задействует систему из ИК-инфракрасного света + Dot Projector + ToF-датчик

Трудности защиты и неверные тревоги

Несмотря на поразительный успехи техники за недавние годы, совершенных системы пока не имеется:

Возможность обмана: Недорогие телефоны легко доступны качественной снимком пользователя либо роликом с дисплея иного гаджета.
Идентичные двойняшки: Даже самые совершенные механизмы могут спутать между монозиготными близнецами либо семьями с очень похожей внешностью.
Трансформации внешнего вида: Внезапное снижение веса/увеличение массы тела, пластические операции или травмы в некоторых случаях требуют повторной регистрации биометрии.
Условия съёмки: Сильная подсветка солнцем или же плотная затенение могут понизить аккуратность идентификации признаков.

Здесь пара советов по надёжному эксплуатации:

Для критически важных операций всегда используйте двухэтапную аутентификацию;
Не запускайте опцию „Разблокировка по лицу“ на недорогих устройствах без ИК-сенсоров;
Систематически обновляйте прошивку прошивку смартфона для предотвращения угроз от актуальных атак;
Включайте опцию „Требовать открытых глаз“ там, где она имеется.

Где также находится применение технология помимо смартфонов?

Хотя предмет этой публикации сосредоточена на в частности портативным гаджетам, следует отметить прочих направлениях внедрения технологии:

Контроль доступа в рабочих помещениях и многоквартирных зданиях;
Платёжные аппараты финансовых учреждений („Face Pay“);
Электронные идентификационные документы современного поколения;
Системы видеоконтроля муниципальных сервисов;
Автоматизация регистрации явки образовательных учреждений/институтов;
Аутентификация пользователей компьютеров/ноутбуков.

Например: В городском метро уже тестируется система платежа проезда по лицу („Face Pay“) — хватит пройти через турникет без пластика или мобильника! Аналогичные инициативы реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом изменяется технический процесс в наше время?

Всякий годочек появляются свежие идеи для повышения качества деятельности систем идентификации лиц:

Увеличивается разрешение сенсорных устройств — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность погрешности;
Совершенствуются искусственные интеллекты — передовые конструкции вида MobileNetV3 позволяют скоростно обучаться новым особенностям вида владельца прямо на устройстве без пересылки информации в облачное хранилище.
Улучшаются методы антиспуфинга — теперь мобильные устройства могут отличать настоящие живые лица от неподвижных фото/маскировок по мельчайшим микродвижениям.
Взаимодействие со смарт-гаджетами — умные часы могут авто блокировать телефон, если обладатель отошёл далеко.
Возникают гибридные системы — к примеру объединяющие голосовую идентификацию + лицо + пальцевой отпечаток.

Вот, те тренды в особенности популярны в данный момент:

1) Уменьшение деталей

Компании стараются уменьшить размер выреза („чёлки“) для датчики на экране за счёт интеграции маленьких ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для увеличения приватности всё более обработки данных происходит на месте без передачи данных во внешний облачный услугу.

3) Упорядочивание стандартов

Google активно продвигает норму BiometricPrompt API, для того чтобы аналогичные системы, вроде Вулкан 24, и все Android-аппы были совместимы с любыми видами биометрии единообразно.

Что подобрать сегодня?

Если тебе важна максимальная безопасность данных, подбирайте топовые устройства со встроенным ИК-излучателем или же ToF-датчиком глубины.

iPhone каждого новейших моделей
Huawei Mate/Series P линейки
Xiaomi Pro
Vivo X модели
Oppo Найти Х серий.

Если бюджет скромен – лучше предпочесть классическим способам защиты (PIN-код/сканер отпечатка), а функцию „разблокировка по лицу“, такую как в Вулкан 24, задействовать только как второстепенную возможность комфорта.

Каким образом повысить практичность функционирования возможности?

Есть пара советов для пользователей, кто уже пользуется разблокировку по лицу:

Периодически обновляйте свою изображение-шаблон, если сильно меняется внешность.
Не забывайте чистить объектив фронтальной камеры – пятна могут уменьшить точность!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам запускает камеру если вы берёте его в руки.
При регистрации постарайтесь сохранять лицо ровно перед видеоустройства не допуская значительного наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отвернулись от экрана.

Перспективы эволюции инноваций

В ближайшие периоды можно ожидать появления полностью дистанционных способов опознания персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + речь + шаги + движения рук!

Также возможно появление современных методов обеспечения приватности – скажем, изменяющееся модификация электронного шаблона после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – единственная из самых интересных инноваций нашего периода! Она делает интеракцию со мобильным устройством удобнее чем до этого, и такие программы, как Vulkan24, могут в разы оптимизировать ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы понимаете, как устроена эта система внутри, – сумеете более осмысленно определять свой очередной девайс!