Каким способом функционирует определение лиц в смартфонах

Зачем мы предпочитаем разблокировку по лицевому распознаванию

В прошлые годы идентификация лиц является одной из самых популярных возможностей для разблокировки смартфонов. Всего пару годов тому назад основная часть пользователей обходились пин-кодами, паролями или сканерами отпечатков пальцев. Но при появлением подобных технологий, как admiral x, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект превращает эту возможность настолько популярной? Прежде всего, это комфортно: не нужно помнить трудные пароли или находить верный палец в мраке. Также, это быстро: современные алгоритмы идентифицируют лицо буквально за мгновения ока. В-третью очередь, это впечатление футуристичности — будто в фильмах про адмирал х разведчиков.

Однако за этой видимой легкостью прячется весь мир комплексных техник и инженерных концепций. Попробуем понять, как именно функционирует фейсканирование в современных гаджетах, какие применяются способы, насколько они защищены и что нас ожидает в будущем.

Короткая история эволюции техники

Распознавание лиц как техника имеется уже более 50 годов. Начальные эксперименты автоматизированного исследования лиц были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда ЭВМ умели лишь обозначать контуры головы и измерять промежутки между зрачками и ртом на монохромных изображениях.

Изначальные торговые системы появились в девяностых годах, но они были далеки от совершенства: действовали неспешно и нередко ошибались. Только с эволюцией искусственных сетей и таких площадок, как адмирал х, мощных мобильных микросхем идентификация лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным сканированием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие начали интегрировать свои разработки.

Основные шаги функционирования механизма определения

Процесс распознавания лица можно примерно сегментировать на несколько важных этапов:

1. Обнаружение лица — устройство распознает присутствие гуманного лица в снимке.
2. Выделение особенностей — система исследует контуры физиономии: форму глаз, обонятельного органа, губ, положение бровей.
3. Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с эталоном — полученный модель сравнивается с записанной при внесении биометрической данными владельца.
5. Принятие определения — если соответствие достаточно значительное, смартфон открывается.

Всякий из этих шагов запрашивает особых методов и усовершенствований для скорой работы прямо на устройстве.

Технические элементы: что прячется в их недрах

Стандартная передняя камера.

Простейший несложный вариант определения физиономии применяет лишь фронтальную камеру мобильного устройства. Данный способ реализован во различных недорогих версиях Android-устройств.

Плюсы:

• Не потребляет дополнительные датчиков.
• Быстро работает при достаточном освещении.

Отрицательные стороны:

• Легко одурачить изображением или видеозаписью.
• Неправильно работает при низком освещённости или необычных точках зрения.

Инфракрасная фотокамера и точечный проектор

Более усовершенствованные системы, такие как адмирал х, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс составляет базу Face ID от Apple.

Каким образом это действует:

• Точечный проекционный прибор проецирует на физиономию юзера невидимую решетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 пятен).
• Инфракрасная камера регистрирует деформацию данной сетки по поверхности лица.
• Формируется трёхмерная карта глубины глубинности, что практически неподвластна для фальсификации типичной снимком или маскировкой.

Плюсы

• Надёжная функционирование даже в полной тьме.
• Высокая устойчивость к подделкам.
• Точность идентификации свыше 99%.

Добавочные датчики

В определённых девайсах используются также вспомогательные датчики: ToF (Time-of-Flight), которые фиксируют время распространения луча до цели и обратно; Цветные-датчики глубины; специальные оптические дальномеры для формирования более аккуратной 3D-модели физиономии.

Эти инновации встречаются в основном во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искуственный ум в исполнении

Современные устройства распознавания физиономий немыслимы при отсутствии применения artificial intelligence и machine learning. Именно благодаря таким инновациям, как адмирал х, аппарат может идентифицировать владельца даже при метаморфозах внешнего вида: новая причёска, щетина, линзы или макияж не становятся барьером для разблокировки.

Распознавание физиономии

В начальном стадии программа должна быстро распознать ликовое изображение среди всего кадра камеры. Для этой задачи применяются каскадные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые “обучены” находить человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN в состоянии находить лицо даже в случае частичном перекрытии (например, платком или рукой).

Идентификация основных моментов

После обнаружения лица устройство, такая как адмирал х, вычисляет положение главных точек: уголки глаз, конец носа, границы губ и так далее. Как правило задействуется от 68 до 128 главных маркеров на лицевой области.

Это нужно для выравнивания картинки: если пользователь удерживает телефон под углом, или склонил голову, программа корректирует изображение до стандартного положения для последующего изучения.

Построение биометрического шаблона

Далее нейросеть строит компактное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Этот формат очень сложно сфальсифицировать: он не удерживает непосредственно картинку пользователя, а лишь особенные характеристики его облика, что делает его идеальным для таких площадок, как admiral-x.

Сравнительный анализ и осуществление заключения

Когда человек желает разблокировать смартфон глазами, механизм осуществляет все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный границу (обычно выше 99%), телефон, как и платформа admiral-x, доступен; если нет — доступ запрещается.

Привыкание к трансформациям внешности

Занимательная особенность актуальных систем — возможность самообучения. Если ты регулярно доступаете к телефон с обновленной стрижкой или очками, алгоритм постепенно обновляет основной образец вашего облика для повышения точности работы без снижения уровня безопасности.

Защита биометрических информации.

Множество клиенты опасаются хранить свои биометрические данные на смартфоне из-за угрозы утечки данных или взлома гаджета. Определенные компании, такие как admiral-x, предлагают решения для улучшения сохранности информации пользователей.

• Локальное сохранение: Преимущественно аппаратов записывает биометричные шаблоны лишь внутри защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают гаджет и закрыты даже производителю.

• Шифрование: Все информация сохраняются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих разработчиков не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь требовать факт верификации личности через системный API.

Следует упомянуть существенную подробность: в случае, если кто-либо получит доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители осуществляют меры безопасности от “слепого” разблокирования — в частности, требуют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются виды идентификации лиц?

В настоящее время можно выделить 3 ключевых подхода к реализации этой операции:

Программное плоское идентификация

Эксплуатируется только передняя камера без экстра датчиков дистанции. Такой способ используется наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость воплощения; низкая цена; оперативная деятельность при качественном освещении.
Минусы: просто ввести в заблуждение фотографией; ненадежная деятельность ночью; низкая защищенность.

Техническое объёмное сканирование

Применяет ИК видеокамеру + проектор точек + сенсоры глубины (Face ID от Apple; аналогичные технологии у Huawei Mate).
Достоинства: высокая надежность; нельзя исказить изображение/видеозапись; стабильная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с интеграцией ИИ

Используют комбинацию программируемых методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, как адмирал х и Google Pixel Face Unlock новейших поколений, комбинируют фронтальную камеру c ИК датчиком мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Иллюстрации эксплуатации разнообразных техник

• iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз представил подобие Face ID среди Android.
• Samsung Galaxy S10/S20 поддерживают как софтверное двухмерное определение по фото селфи-камерой, так и сканер ириса глаза.
• Huawei Mate20 Pro применяет систему из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Трудности безопасности и неверные сигналы

Несмотря на впечатляющий развитие техники за недавние годы, совершенных механизмов пока не существует:

1. Шанс подвоха: Бюджетные смартфоны легко доступны высококачественной изображением владельца либо видеозаписью с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые идеальные системы могут ошибиться между монозиготными близнецами либо семьями с очень похожей внешностью.
3. Метаморфозы внешнего вида: Стремительное похудение/увеличение массы тела, хирургические вмешательства либо травмы порой необходимы для обновления данных биометрических данных.
4. Условия фотографирования: Интенсивная засветка солнцем или плотная темнота могут понизить верность идентификации признаков.

Здесь несколько советов для безопасному использованию:

• Для критически важных операций всегда применяйте дополнительную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Постоянно обновляйте ПО смартфона для защиты от современных угроз;
• Включайте настройку “Требовать распахнутых глаз” в тех местах, где она доступна.

В каких местах также используется технология помимо смартфонов?

Хотя предмет данной публикации сосредоточена на в частности смартфонам и планшетам, следует отметить альтернативных областях использования технологии:

• Мониторинг прохода в деловых центрах и жилых домах;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Виртуальные идентификационные документы нового образца;
• Системы видеонаблюдения городских сервисов;
• Автоматизирование учёта присутствия школ/институтов;
• Вход пользователей компьютеров/ноутбуков.

Например: В городском метро уже тестируется система платежа проезда по лицу (“Face Pay”) — достаточно пройти через турникет без пластика или телефона! Похожие инициативы осуществляются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как трансформируется техпроцесс в нынешнее время?

Любой годочек проявляются свежие мысли для улучшения качества деятельности систем идентификации лиц:

1. Увеличивается чёткость сенсорных устройств — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность неточности;
2. Развиваются нейронные сети — современные архитектуры модели MobileNetV3 дают возможность оперативно обучаться дополнительным чертам вида обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Развиваются способы антиспуфинга — теперь мобильные устройства могут отличать реальные анимированные лица от статичных фото/масок по микроскопическим движениям кожи.
4. Взаимодействие со интеллектуальными приборами — умные часы могут самостоятельно закрыть доступ к телефон, если обладатель отошёл далеко.
5. Проявляются комбинированные системы — в частности комбинирующие голосовую аутентификацию + физиономию + дактилоскопический след.

Вот, те тренды особенно востребованы в данный момент:

1) Сокращение деталей

Производители стараются минимизировать размер выреза (“чёлки”) для датчики на экране за счёт внедрения миниатюрных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на аппарате

Для увеличения конфиденциальности всё больше расчётов осуществляется локально без пересылки данных во сторонний облачный сервис.

3) Унификация регламентов

Google интенсивно продвигает норму BiometricPrompt API, с целью чтобы подобные платформы, как admiral x, и каждые Android-программы могли работать с любыми видами биометрии унифицированно.

Что решить сегодня?

Если вам всем нужна наивысшая защита информации, остановите выбор на топовые модели с вмонтированным ИК-проектором или же ToF-сенсором глубины.

• iPhone всех новейших версий
• Huawei Partner/P Series линейки
• Mi Pro
• Vivo X линейки
• Оппо Обнаружить X серий.

Если средства невелик – лучше выбирать обычным способам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в admiral x, задействовать только как дополнительную возможность комфорта.

Каким образом улучшить удобство функционирования возможности?

Есть некоторые хитростей для тех, кто уже пользуется разблокировку через лицо:

1. Периодически обновляйте свою фото-шаблон, если значительно меняется внешность.
2. Не пренебрегайте чистить объектив фронтальной камеры – разводы могут понизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам активирует камеру как только вы поднимаете его.
4. Во время регистрации постарайтесь сохранять лицо ровно напротив камеры без сильного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отворачиваетесь от дисплея.

Возможности развития техники

В скоро наступающие годы можно предполагать развития полностью дистанционных способов распознавания персоны сразу по нескольким биометрическим данным параметрам одновременно: облик + голос + манера ходьбы + движения рук!

Также вероятно появление свежих способов охраны конфиденциальности – скажем, переменное модификация диджитал образца после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее интересных техник нашего эпохи! Она делает общение со мобильным устройством проще чем до этого, и такие аппы, как admiral-x, могут в разы повысить ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как устроена эта методика в деталях, – сможете вдумчиво подбирать свой очередной девайс!