Как действует распознавание лиц в смартфонах

Почему мы предпочитаем разблокировку по лицевому распознаванию

В недавние времена определение физиономий стало одной из наиболее востребованных функций для разблокировки смартфонов. Всего некоторые годов тому назад основная часть использующих довольствовались пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением подобных технологий, например Вулкан 24, нам достаточно просто взглянуть на экран — и устройство тут же опознает своего владельца.

Что делает данную особенность такой востребованной? Во-первых, это комфортно: не нужно удерживать в памяти трудные пароли или отыскивать правильный палец в тьме. Также, это быстро: современные алгоритмы узнают лицо буквально за мгновение. В-третьих, это ощущение футуристичности — будто в кинофильмах про вулкан казино разведчиков.

Впрочем за данной кажущейся простотой таится целый универсум комплексных методов и инженерных решений. Попробуем понять, как точно работает идентификация по лицу в современных смартфонах, какие применяются методы, насколько они надёжны и что нас ждёт впереди.

Сжатая повествование развития техники

Распознавание лиц как методика существует уже более пятидесяти лет. Начальные пробы автоматического изучения лиц были сделаны еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины умели лишь обозначать силуэты лица и измерять расстояния между очами и устами на ахроматических изображениях.

Начальные бизнес платформы появились в девяностых годах, но они были далеки от совершенства: функционировали медленно и часто давали сбои. Только с развитием нейронных сетей и таких систем, как Вулкан 24 Казино, сильных мобильных чипов идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным идентификацией лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять личные разработки.

Главные стадии действия системы определения

Процесс распознавания лица можно ориентировочно сегментировать на несколько важных этапов:

Идентификация лица — камера распознает существование людского образа в изображении.
Извлечение признаков — алгоритм анализирует контуры лица: форму зрительных органов, носа, уст, позицию бровей.
Построение модели — создаётся уникальный виртуальный отпечаток (faceprint) на основе выделенных признаков.
Сравнение с стандартом — полученный образец сверяется с сохранённой при регистрации биометрической данными владельца.
Принятие выбора — если совпадение достаточно значительное, смартфон открывается.

Всякий из данных шагов требует индивидуальных процедур и оптимизаций для скорой работы прямо на устройстве.

Технические компоненты: что прячется в их недрах

Типичная передняя камера.

Простейший простой способ определения облика задействует исключительно фронтальную видеокамеру смартфона. Такой способ внедрён во многочисленных бюджетных вариантах Android-девайсов.

Плюсы:

Не нуждается в требует дополнительные сенсоров.
Шустро функционирует при хорошем освещённости.

Недостатки:

Легко обмануть фотографией или видеозаписью.
Плохо действует при слабом освещённости или непривычных точках зрения.

Инфракрасная камера и точечный проектор

Более усовершенствованные системы, такие как Вулкан 24 Казино, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс является основой Face ID от Apple.

Каким способом это действует:

Точечный устройство проекции отображает на физиономию юзера невидимую решетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 точек).
ИК камера записывает деформацию данной сетки по поверхности лица.
Создаётся трехмерная глубинная карта глубинности, что почти неосуществима для имитации стандартной фото или маской.

Плюсы

Надёжная функционирование даже в полной тьме.
Большая устойчивость к фальсификациям.
Точность распознавания более 99%.

Дополнительные сенсорные устройства

В некоторых аппаратах применяются также экстра сенсоры: ToF (Time-of-Flight), которые фиксируют время движения света до предмета и обратно; RGB-датчики дальности; специальные световые дальномеры для формирования более детализированной 3D-модели лица.

Эти инновации применяются наиболее часто во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: синтетический интеллект в работе

Современные системы распознавания физиономий неосуществимы при отсутствии эксплуатации ИИ и машинного обучения. Именно из-за таким инновациям, как Вулкан 24 Казино, аппарат может распознавать пользователя даже при изменениях внешности: новая стрижка, растительность на лице, линзы или косметика не становятся помехой для открытия.

Обнаружение физиономии

На начальном стадии система необходимо оперативно распознать лицо среди полного кадра камеры. Для этой задачи задействуются последовательные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые подготовлены распознавать человеческие лица среди множества других объектов.

Пример: процесс MTCNN может находить физиономию даже в случае частичном закрытии (например, шалью или рукой).

Выделение важных точек

После распознавания лица устройство, такая как Вулкан 24 Казино, определяет расположение главных точек: кончики глаз, конец носа, контуры губ и так далее. Обычно задействуется от 68 до 128 главных маркеров на лицевой области.

Это действие необходимо для стабилизации картинки: если человек находится с мобильник под наклоном, или наклонил головку, программа корректирует изображение до стандартного положения для последующего изучения.

Формирование биометрического идентификатора шаблона

Далее искусственная сеть строит сжатое цифровое представление („эмбеддинг”) внешности пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Данный шаблон весьма сложно сфальсифицировать: он не удерживает непосредственно картинку пользователя, а лишь уникальные характеристики его вида, что делает его совершенным для таких платформ, как Vulkan24.

Сопоставление и вынесение заключения

Если пользователь намеревается разлочить мобильник взглядом, система осуществляет все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый уровень (обычно больше 99%), телефон, как и платформа Vulkan24, разблокируется; если нет — доступ запрещается.

Приспособление к метаморфозам внешнего вида

Занимательная особенность актуальных системы — способность самообучения. Если вы регулярно открываете телефон с свежей укладкой или оптикой, программа постепенно освежает основной шаблон вашего лица для повышения точности работы без ухудшения безопасности.

Безопасность биометрических информации.

Многие пользователи боятся сохранять свои био-идентификационные данные на мобильном устройстве из-за угрозы утечки данных или взлома устройства. Иные компании, такие как Vulkan24, предлагают методы для повышения сохранности информации пользователей.

Локальное сбережение: Преимущественно устройств хранит биометрические образцы исключительно внутрь защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из устройство и не доступны в том числе создателю.
Шифрование: Все сведения сохраняются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция программ: Приложения сторонних разработчиков не имеют прямого доступа к биометрическим данным; они могут лишь запрашивать подтверждение подтверждения личности через системный API.

Необходимо упомянуть важную подробность: если какой-то человек достанет физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство компании реализуют меры безопасности от автоматического разблокирования — в частности, просят открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие имеются типы определения лиц?

Сегодня можно определить определить 3 главных подхода к осуществлению этой операции:

Программируемое двухмерное распознавание

Применяется только лицевая камера без экстра сенсоров глубины. Такой способ используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость воплощения; низкая затраты; скоростная деятельность при достаточном свете.
Минусы: просто обмануть фотографией; нестабильная работа ночью; низкая охрана.

Аппаратное объёмное сканирование

Задействует ИК видеокамеру + проекционный модуль точек + сенсоры дистанции (Face ID от Apple; подобные технологии у Huawei Mate).
Достоинства: большая достоверность; не получится исказить изображение/видеозапись; устойчивая функционирование при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана („чёлка”)

Смешанные подходы с интеграцией ИИ

Задействуют комбинацию программируемых методов + аппаратную обработку + последующую обработку нейросетями для усиления устойчивости к атакам („anti-spoofing”). Например, подобные продукты, как Вулкан 24 Казино и Google Pixel Face Unlock последних версий, комбинируют фронтальную камеру c ИК датчиком движения Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Иллюстрации применения разных методов

iPhone серии X/11/12/13/14 применяют только физическое трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition впервые предложил эквивалент Face ID в ряду Android.
Samsung Galaxy S10 модель/S20 обеспечивают как программное обеспечение двухмерное идентификацию по изображению фронталкой, так и сенсор ириса глаза.
Huawei Mate20 Pro применяет систему из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Проблемы защиты и ошибочные срабатывания

Несмотря на замечательный успехи техники за недавние лет, безупречных систем пока не имеется:

Вероятность подвоха: Бюджетные смартфоны просто доступны четкой изображением хозяина или же видео с экрана другого устройства.
Идентичные близнецы: Даже самые безупречные системы могут ошибиться между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
Метаморфозы внешности: Внезапное утрата веса/увеличение массы тела, хирургические вмешательства либо повреждения иногда необходимы для перерегистрации биометрии.
Условия записи: Сильная освещённость солнцем или же интенсивная тень могут снизить точность определения признаков.

Ниже некоторые советов для защищённому применению:

Для важных операций всегда используйте двухэтапную аутентификацию;
Не активируйте функцию „Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
Систематически обновляйте программное обеспечение смартфона для защиты от современных угроз;
Включайте настройку „Требовать открытых глаз” везде, где она доступна.

В каких местах дополнительно используется технология кроме мобильных телефонов?

Пускай основная мысль этой публикации сосредоточена на именно мобильным устройствам, следует отметить прочих направлениях внедрения технологии:

Контроль прохода в деловых центрах и многоквартирных зданиях;
Платёжные аппараты банков („Face Pay”);
Цифровые идентификационные документы последнего типа;
Системы видеонаблюдения муниципальных сервисов;
Автоматизирование регистрации явки учебных заведений/вузов;
Авторизация пользователей ПК/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по фейсу („Face Pay”) — достаточно пройти через барьер без пластика или телефона! Похожие программы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом меняется технический процесс в нынешнее время?

Любой годочек появляются современные концепции для повышения качества деятельности систем идентификации лиц:

Увеличивается детализация сенсорных устройств — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность неточности;
Улучшаются искусственные интеллекты — современные структуры модели MobileNetV3 обеспечивают возможность скоростно обучаться новым особенностям облика обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
Улучшаются способы антиспуфинга — теперь смартфоны способны отличать подлинные анимированные облики от неподвижных фотографий/маскировок по незаметным микродвижениям.
Интеграция со интеллектуальными приборами — умные часы могут авто закрыть доступ к телефон, если владелец удалился на значительное расстояние.
Возникают комбинированные механизмы — к примеру комбинирующие речевую опознание + физиономию + дактилоскопический след.

Итак, те направления в особенности популярны в данный момент:

1) Миниатюризация деталей

Компании стараются уменьшить габариты прорези („чёлки”) для сенсоры на экране за счёт встраивания маленьких ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на девайсе

Для улучшения приватности всё больше вычислений происходит локально без передачи информации во внешний облачный услугу.

3) Стандартизация стандартов

Гугл интенсивно продвигает эталон BiometricPrompt API, чтобы подобные платформы, как Вулкан 24, и все Android-программы могли работать с любыми видами биометрии единообразно.

Какое подобрать сегодня?

В случае если тебе важна максимальная безопасность данных, выбирайте топовые аппараты с вмонтированным ИК-излучателем или же ToF-сенсором глубины.

iPhone каждого последних поколений
Huawei Mate/Series P серии
Mi Pro
Vivo X серии
Oppo Обнаружить X серии.

Если средства невелик – лучше отдавать предпочтение обычным способам безопасности (PIN-код/сканер пальца), а возможность „разблокировка по лицу”, такую как в Вулкан 24, задействовать только как дополнительную возможность удобства.

Как улучшить комфорт функционирования возможности?

Есть несколько советов для тех, кто уже пользуется функцию распознавания лица:

Периодически обновляйте свою изображение-шаблон, если кардинально изменяется облик.
Не пренебрегайте протирать линзу фронтальной камеры – пятна могут понизить точность!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам запускает фотоаппарат если вы поднимаете его.
При регистрации постарайтесь держать лицо ровно перед видеоустройства исключая значительного наклона головы.
Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвели взгляд от экрана.

Возможности прогресса технологии

В скоро наступающие времена можно ожидать появления полностью безконтактных способов опознания индивидуума сразу по нескольким биометрическим параметрам одновременно: лицо + голос + походка + жесты рук!

Также возможно развитие новых способов защиты приватности – например, изменяющееся изменение электронного образца после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых захватывающих технологий нашего эпохи! Она обеспечивает общение со телефоном проще чем раньше, и такие аппы, как Vulkan24, могут значительно оптимизировать ваш пользовательский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы осведомлены, как функционирует эта методика в деталях, – сможете более осмысленно подбирать свой будущий устройство!