Каким образом работает распознавание лицевых образов в смартфонах

Для чего мы останавливаемся на разблокировку по лицевому распознаванию

В последние годы определение лиц стало одной из самых распространённых опций для открытия умных телефонов. Еще некоторые годков тому назад большинство юзеров довольствовались пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но с появлением подобных технологий, как cabura, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект делает эту возможность настолько популярной? Прежде всего, это практично: не нужно удерживать в памяти трудные пароли или искать верный палец в тьме. Также, это мгновенно: современные программы идентифицируют лицо буквально за мгновения ока. В-третью очередь, это впечатление футуристичности — будто в кинолентах про кабура агентов.

Тем не менее за данной на первый взгляд простотой таится полный мир трудных технологий и инженерных разработок. Позвольте нам понять, как именно работает идентификация по лицу в современных гаджетах, какие бывают технологии, насколько они надёжны и что нас ожидает в будущем.

Короткая повествование эволюции технологии

Распознавание лиц как техника существует уже более 50 лет. Начальные пробы машинного исследования облика были предприняты еще в 1960-х годы в лабораториях США. Тогда компьютеры способны были лишь определять контуры черепа и определять расстояния между очами и губами на монохромных фотографиях.

Изначальные коммерческие системы возникли в 90-х, но они были неидеальны: функционировали медленно и часто ошибались. Только с развитием синтетических сетей и таких систем, как кабура, мощных мобильных чипов распознавание лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным распознаванием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать собственные разработки.

Основные стадии действия механизма определения

Процесс идентификации лица можно ориентировочно разделить на несколько ключевых этапов:

Распознавание лиц — устройство распознает наличие людского образа в изображении.
Определение особенностей — система изучает контуры физиономии: очертания глаз, обонятельного органа, уст, расположение бровей.
Построение модели — создаётся особенный виртуальный отпечаток (faceprint) на основе определённых признаков.
Сравнение с образцом — полученный шаблон сравнивается с записанной при внесении биометрической сведениями владельца.
Принятие решения — если соответствие достаточно существенное, смартфон разблокируется.

Всякий из этих этапов нуждается в специальных процедур и усовершенствований для быстрой работы прямо на устройстве.

Технические составляющие: что прячется внутри них

Стандартная фронтальная камера.

Самый простой простой способ распознавания облика применяет только лицевую камеру смартфона смартфона. Данный подход внедрён во многочисленных бюджетных моделях Android-девайсов.

Сильные стороны:

Не требует дополнительных датчиков.
Оперативно работает при качественном свете.

Недостатки:

Несложно одурачить изображением или роликом.
Неудачно действует при плохом освещении или нестандартных углах обзора.

ИК фотокамера и точечный проекционный аппарат

Более усовершенствованные системы, такие как кабура, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс составляет базу Face ID от Apple.

Каким способом это работает:

Точечный проекционный прибор показывает на лицо пользователя невидимую решетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 пятен).
ИК камера фиксирует изменение формы данной сетки по поверхности лица.
Получается трехмерная карта глубины, которая почти неосуществима для фальсификации стандартной снимком или маскировкой.

Преимущества

Надёжная деятельность даже в полной неосвещённости.
Сильная устойчивость к фальсификациям.
Точность идентификации выше 99%.

Дополнительные сенсоры

В отдельных устройствах задействуются также экстра датчики: ToF (Time-of-Flight), которые измеряют период распространения луча до объекта и обратно; Трехцветные-датчики глубины; специальные лазерные лидары для формирования более точной 3D-модели физиономии.

Эти разработки используются в основном во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искуственный интеллект в работе

Нынешние системы опознания лиц немыслимы в отсутствие применения искусственного интеллекта и машинного обучения. Именно из-за таким разработкам, как кабура, аппарат в состоянии узнавать пользователя даже при метаморфозах облика: новая стрижка, борода, очки или макияж не становятся барьером для деблокировки.

Обнаружение физиономии

В начальном этапе система необходимо оперативно обнаружить ликовое изображение в пределах полного снимка с камеры. Для этой задачи применяются последовательные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые подготовлены идентифицировать лиц человека среди множества других объектов.

Пример: процесс MTCNN может находить облик даже при частичном закрытии (например, платком или рукой).

Выделение основных моментов

После идентификации лица устройство, такая как кабура, устанавливает местоположение основных точек: уголки глаз, конец носа, контуры губ и так далее. Как правило используется от 68 до 128 ключевых маркеров на лицевой области.

Это действие нужно для нормализации изображения: если пользователь находится с смартфон под наклоненным, или склонил голову, программа “выпрямляет” картинку до обычного угла для последующего изучения.

Создание биометрии образца

Далее искусственная сеть строит компактное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 флоатов.

Этот шаблон весьма затруднительно подделать: он не хранит само изображение пользователя, а лишь исключительные характеристики его внешности, что делает его идеальным для таких платформ, как кабура казино.

Сравнительный анализ и вынесение выбора

Если юзер намеревается открыть смартфон взором, программа воспроизводит все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый уровень (обычно выше 99%), телефон, как и платформа кабура казино, открывается; если нет — доступ не предоставляется.

Адаптация к метаморфозам внешности

Занимательная особенность нынешних систем — возможность самообучения. Если вы часто доступаете к телефон с обновленной стрижкой или очками, система постепенно обновляет эталонный модель вашего лица для увеличения точности действия без ухудшения безопасности.

Защита биометрических данных данных.

Многие клиенты беспокоятся хранить свои биометрические идентификационные данные на телефоне из-за вероятности утечки данных или взлома гаджета. Определенные организации, такие как кабура казино, предоставляют варианты для повышения сохранности информации клиентов.

Локальное хранение: Преимущественно аппаратов записывает био-идентификационные шаблоны лишь внутри защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют устройство и недоступны включая изготовителю.
Шифрование: Все данные хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция программ: Приложения третьих девелоперов не имеют непосредственного доступа к биометрическим данным; они могут лишь требовать факт верификации идентичности через системный API.

Необходимо отметить существенную особенность: если кто-либо достанет физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители реализуют меры безопасности от автоматического разблокирования — в частности, заставляют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие бывают виды идентификации лиц на изображениях?

Сегодня можно определить различить три основных метода к выполнению этой операции:

Программируемое 2D распознавание

Применяется только лицевая видеокамера без вспомогательных сенсоров дистанции. Такой метод встречается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость воплощения; умеренная затраты; быстрая функционирование при достаточном свете.
Минусы: просто обмануть снимком; неустойчивая деятельность ночью; недостаточная безопасность.

Техническое 3D сканирование

Применяет инфракрасную видеокамеру + проекционный модуль пикселей + сенсоры дистанции (Face ID у Apple; аналогичные решения у Huawei Mate).
Преимущества: большая достоверность; не получится исказить изображение/видеозапись; устойчивая работа при любом освещении.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с ИИ-дополнением

Задействуют комбинацию программируемых методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например кабура и Google Pixel Face Unlock современных версий, сочетают фронталку c инфракрасным датчиком движения Soli Radar для предотвращения от подделок жестами/масками/видеоэкранами чужих устройств.

Иллюстрации применения разнообразных техник

iPhone серии X/11/12/13/14 применяют только техническое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition первый раз представил аналог Face ID среди Android.
Samsung Galaxy S10 версия/S20 обеспечивают как софтверное плоское определение по изображению селфи-камерой, так и датчик ириса глаза.
Huawei Mate20 Pro применяет комплекс из ИК-инфракрасного света + Dot Projector + ToF-датчик

Вопросы безопасности и ложные сигналы

Несмотря на впечатляющий развитие технологий за последние годы, идеальных систем пока не имеется:

Шанс мошенничества: Бюджетные смартфоны легко доступны высококачественной фотографией владельца или же роликом с дисплея иного гаджета.
Идентичные близняшки: Даже самые безупречные устройства могут перепутать между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
Изменения облика: Резкое снижение веса/увеличение массы тела, пластические операции либо повреждения порой требуют повторной регистрации биометрических данных.
Условия фотографирования: Интенсивная подсветка солнцем или интенсивная затенение могут уменьшить верность распознавания признаков.

Вот пара подсказок для защищённому использованию:

Для значимых операций всегда применяйте двухфакторную аутентификацию;
Не активируйте возможность “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
Регулярно апгрейдите программное обеспечение смартфона для предотвращения угроз от актуальных атак;
Включайте настройку “Требовать раскрытых глаз” везде, где она доступна.

В каких местах также применяется технология за исключением смартфонов?

Хотя основная мысль данной работы касается именно смартфонам и планшетам, необходимо сказать о альтернативных областях использования технологии:

Мониторинг доступа в деловых центрах и многоквартирных зданиях;
Платёжные устройства банков (“Face Pay”);
Цифровые идентификационные документы последнего образца;
Системы видеомониторинга городских служб;
Автоматизирование учёта присутствия учебных заведений/институтов;
Вход пользователей персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без карты или мобильника! Похожие инициативы осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом меняется техпроцесс сегодня?

Всякий годик возникают свежие идеи для повышения стандарта деятельности систем распознавания лиц:

Увеличивается чёткость сенсоров — чем больше элементов фиксируется камерой/датчиками глубины, тем меньше вероятность погрешности;
Совершенствуются искусственные интеллекты — новейшие структуры вида MobileNetV3 позволяют быстро адаптироваться к дополнительным чертам вида владельца прямо на устройстве без отправки данных в облако.
Развиваются технологии антиспуфинга — теперь мобильные устройства способны отличать реальные движущиеся лица от неподвижных фото/маскировок по незаметным движениям кожи.
Взаимодействие со умными устройствами — умные часы могут автоматически заблокировать мобильный телефон, если владелец удалился на значительное расстояние.
Появляются смешанные механизмы — к примеру совмещающие речевую опознание + облик + отпечаток пальца.

Итак, те направления в особенности популярны на сегодняшний день:

1) Миниатюризация деталей

Производители намереваются уменьшить размер выреза (“чёлки”) под датчики на экране за счёт интеграции компактных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для повышения личной безопасности всё более вычислений выполняется локально без отправки информации во сторонний облачный сервис.

3) Унификация стандартов

Гугл активно продвигает стандарт BiometricPrompt API, с целью чтобы аналогичные системы, вроде cabura, и любые Android-программы были совместимы с различными типами биометрии унифицированно.

Какое решить на сегодня?

Если тебе важна максимальная сохранность данных, выбирайте флагманские модели с вмонтированным ИК-проектором или же ToF-сенсором глубины.

iPhone всех актуальных версий
Huawei Companion/Series P линейки
Xiaomi Expert
Vivo X линейки
Oppo Обнаружить Х серии.

Если средства ограничен – лучше отдавать предпочтение традиционным способам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в cabura, применять только как опциональную опцию удобства.

Каким образом улучшить комфорт работы функции?

Есть пара советов для людей, кто уже применяет разблокировку через лицо:

Регулярно обновляйте свою фото-шаблон, если сильно изменяется облик.
Не забывайте очищать объектив передней камеры – загрязнения могут понизить четкость!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам включает камеру если вы поднимаете его.
Во время регистрационного процесса старайтесь сохранять лицевую часть ровно напротив камеры исключая сильного наклона головы.
Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвели взгляд от дисплея.

Будущее развития технологии

В скоро наступающие годы можно ожидать развития полностью дистанционных способов идентификации индивидуума сразу по нескольким биометрическим данным параметрам одновременно: облик + звучание + походка + жесты рук!

Также возможно развитие новых методов охраны приватности – скажем, переменное изменение цифрового шаблона после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее захватывающих технологий нашего времени! Она предоставляет интеракцию со телефоном удобнее чем когда-либо прежде, и такие приложения, как кабура казино, могут существенно улучшить ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы понимаете, как функционирует эта технология изнутри, – сумеете осознаннее выбирать свой следующий девайс!