Как работает идентификация лиц в смартфонах
Для чего мы предпочитаем разблокировку по лицевому распознаванию
В недавние годы распознавание физиономий стало одной из самых популярных возможностей для открытия мобильных телефонов. Лишь некоторые годков тому назад основная масса пользователей довольствовались PIN-кодами, паролями или датчиками отпечатков пальцев. Но с появлением таких технологий, как admiral x, нам достаточно просто взглянуть на экран — и аппарат тут же узнает своего владельца.
Какая вещь превращает эту конкретную функцию такой востребованной? Для начала, это практично: не нужно удерживать в памяти сложные пароли или искать правильный палец в темноте. Также, это мгновенно: современные системы распознают лицо буквально за мгновение. В-третьих, это ощущение футуристичности — будто в фильмах про admiral x агентов.
Однако за такой видимой несложностью прячется полный мир комплексных технологий и инженерных решений. Давайте понять, как конкретно работает идентификация по лицу в актуальных гаджетах, какие применяются технологии, насколько они безопасны и что нас ждёт впереди.
Сжатая хроника прогресса инноваций
Распознавание лиц как техника имеется уже более пятидесяти годов. Изначальные попытки автоматического исследования лица были сделаны еще в 1960-х годах в научных учреждениях США. Тогда компьютеры умели лишь обозначать очертания черепа и вычислять дистанции между глазами и губами на ахроматических изображениях.
Изначальные коммерческие системы возникли в 90-х, но они были несовершенны: работали медленно и нередко ошибались. Только с прогрессом синтетических сетей и таких площадок, как адмирал х, высокопроизводительных мобильных процессоров определение лиц стало по-настоящему общедоступным явлением.
В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным распознаванием лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять свои решения.
Главные стадии работы устройства идентификации
Процесс идентификации лица можно примерно разделить на несколько важных этапов:
- Обнаружение лиц — камера определяет существование людского образа в кадре.
- Определение признаков — алгоритм анализирует черты облика: конфигурацию глаз, носа, уст, позицию бровей.
- Построение структуры — создаётся особенный виртуальный отпечаток (faceprint) на основе определённых признаков.
- Сравнение со эталоном — созданный шаблон сопоставляется с сохранённой при регистрации биометрической информацией владельца.
- Принятие решения — если совпадение достаточно высокое, смартфон деблокируется.
Всякий из этих этапов нуждается в специальных алгоритмов и оптимизаций для скорой работы прямо на устройстве.
Технические составляющие: что скрыто внутри
Обычная передняя камера.
Самый простой простой способ определения облика использует лишь фронтальную камеру смартфона. Данный подход реализован во многочисленных недорогих версиях Android-девайсов.
Сильные стороны:
- Необходимо потребляет внешних сенсоров.
- Оперативно функционирует при качественном свете.
Слабые стороны:
- Легко обмануть фотографией или видео.
- Неудачно работает при низком освещённости или необычных ракурсах.
Инфракрасная камера и точечный проектор
Более продвинутые системы, такие как адмирал х, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс лежит в основе Face ID от Apple.
Каким образом это действует:
- Точечный проектор показывает на физиономию юзера невидимую решетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 пятен).
- Инфракрасная камера регистрирует деформацию данной сетки по плоскости лица.
- Создаётся трёхмерная глубинная карта глубины, что почти что неподвластна для имитации обычной фото или маскировкой.
Достоинства
- Надёжная функционирование даже в полной темноте.
- Большая устойчивость к подделкам.
- Точность распознавания свыше 99%.
Добавочные сенсорные устройства
В отдельных девайсах применяются также экстра датчики: ToF (Time-of-Flight), которые определяют время прохождения луча до объекта и обратно; RGB-датчики глубины; специальные световые дальномеры для построения более точной 3D-модели лица.
Эти разработки используются наиболее часто во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).
Программные методы: искуственный интеллект в действии
Нынешние системы идентификации физиономий невозможны без эксплуатации ИИ и машинного обучения. Именно вследствие таким инновациям, как адмирал х, гаджет может распознавать юзера даже при метаморфозах внешнего вида: новая стрижка, растительность на лице, линзы или макияж не становятся барьером для деблокировки.
Распознавание физиономии
В первом шаге алгоритм должна быстро найти образ лица в пределах полного изображения камеры. Для этого задействуются многоуровневые классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые натренированы распознавать лиц человека среди множества других объектов.
Пример: процесс MTCNN способен распознавать облик даже с неполном перекрытии (например, шарфом или рукой).
Выделение важных моментов
После идентификации лица система, такая как адмирал х, устанавливает расположение ключевых точек: края глаз, кончик носа, края губ и так далее. Обычно задействуется от 68 до 128 ключевых меток на лицевой области.
Это действие необходимо для стабилизации картинки: если пользователь удерживает смартфон под углом, или склонил голову, программа корректирует изображение до стандартного положения для последующего изучения.
Построение биометрического идентификатора модели
Далее нейронная сеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.
Данный шаблон очень затруднительно имитировать: он не хранит непосредственно изображение пользователя, а лишь уникальные черты его облика, что делает его совершенным для таких платформ, как admiral-x.
Сопоставление и вынесение решения
Когда юзер желает разблокировать мобильник взглядом, программа воспроизводит все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.
Если схожесть превышает установленный уровень (обычно превышает 99%), телефон, как и платформа admiral-x, доступен; если нет — доступ запрещается.
Привыкание к изменениям облика
Интересная особенность актуальных системы — способность самообучения. Если ты регулярно доступаете к мобильное устройство с обновленной прической или оптикой, алгоритм постепенно обновляет основной модель вашего лица для увеличения точности действия без снижения уровня безопасности.
Защита биометрических информации.
Многие пользователи опасаются сохранять свои биометрические данные на телефоне из-за вероятности потери данных или хакерской атаки. Иные организации, такие как admiral-x, предлагают решения для улучшения защиты сведений клиентов.
-
Локальное сохранение: Большинство устройств записывает био-идентификационные шаблоны лишь внутри защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют устройство и не доступны даже создателю.
-
Шифрование: Все данные сохраняются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.
-
Изоляция программ: Приложения внешних разработчиков не имеют прямого доступа к биометрическим; они могут лишь запрашивать факт подтверждения личности через системный API.
Необходимо отметить значимую особенность: в случае, если кто-то достанет физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие изготовители внедряют защиту от автоматического разблокирования — в частности, требуют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.
Какие существуют категории определения лиц?
В настоящее время можно выделить различить три главных метода к выполнению этой операции:
Программное плоское идентификация
Используется только фронтальная камера без дополнительных датчиков глубины. Такой подход используется чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).
Преимущества: легкость реализации; минимальная стоимость; быстрая функционирование при качественном свете.
Минусы: легко обмануть фотографией; ненадежная функционирование ночью; низкая защищенность.
Аппаратное объёмное сканирование
Задействует инфракрасную камеру + проекционный модуль пикселей + датчики дистанции (Face ID от Apple; аналогичные технологии у Huawei Mate).
Плюсы: значительная надежность; не получится исказить изображение/видеозапись; стабильная работа в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)
Гибридные способы с дополнением ИИ
Используют комбинацию софтверных методов + техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как адмирал х и Google Pixel Face Unlock современных поколений, объединяют фронталку c инфракрасным сенсором мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами чужих устройств.
Образцы использования разнообразных техник
- iPhone линейки X/11/12/13/14 используют только физическое трёхмерное сканирование в 3D
- Xiaomi Mi8 Explorer Edition в первый раз представил эквивалент Face ID в ряду Android.
- Samsung Galaxy S10 модель/S20 поддерживают как софтверное 2D идентификацию по изображению фронталкой, так и сенсор глазного ириса.
- Huawei Mate20 Pro задействует комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсор
Проблемы охраны и ошибочные сигналы
Несмотря на поразительный развитие инноваций за недавние лет, безупречных систем пока не наблюдается:
- Вероятность подвоха: Недорогие мобильники без труда “разблокируются” качественной изображением пользователя либо видеозаписью с дисплея иного гаджета.
- Идентичные двойняшки: Даже самые безупречные системы могут перепутать между монозиготными близнецами либо родственниками с очень похожей внешностью.
- Изменения внешнего вида: Внезапное похудение/увеличение массы тела, косметические процедуры или повреждения в некоторых случаях необходимы для перерегистрации биометрии.
- Условия записи: Сильная подсветка солнечным светом или плотная затенение могут снизить верность идентификации признаков.
Вот пара рекомендаций для безопасному эксплуатации:
- Для важных операций всегда используйте двухэтапную аутентификацию;
- Не включайте функцию “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
- Систематически апгрейдите ПО смартфона для защиты от актуальных атак;
- Включайте опцию “Требовать раскрытых глаз” в тех местах, где она доступна.
В каких областях дополнительно применяется технологии кроме смартфонов?
Хотя тема данной публикации сосредоточена на конкретно портативным гаджетам, стоит упомянуть о прочих направлениях внедрения технологии:
- Мониторинг прохода в деловых центрах и жилых домах;
- Платёжные терминалы банков (“Face Pay”);
- Цифровые удостоверения личности нового образца;
- Комплексы видеоконтроля городских сервисов;
- Автоматизирование отслеживания посещаемости учебных заведений/университетов;
- Аутентификация пользователей ПК/ноутбуков.
Например: В московском метро уже испытывается система платежа проезда по лицу (“Face Pay”) — достаточно пройти через барьер без карты или телефона! Похожие программы реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.
Каким способом меняется технология сегодня?
Каждый годик появляются современные мысли для усовершенствования стандарта функционирования систем лицевого распознавания:
- Увеличивается чёткость датчиков — чем больше деталей фиксируется камерой/датчиками глубины, тем меньше шанс неточности;
- Улучшаются нейросети — новейшие конструкции вида MobileNetV3 позволяют скоростно адаптироваться к дополнительным особенностям вида обладателя напрямую на гаджете без отправки данных в облако.
- Улучшаются технологии антиспуфинга — теперь смартфоны могут распознавать настоящие движущиеся облики от фиксированных фото/масок по микроскопическим микродвижениям.
- Взаимодействие со интеллектуальными приборами — умные часы могут авто заблокировать телефон, если владелец ушёл далеко.
- Появляются смешанные устройства — например объединяющие аудио аутентификацию + лицо + пальцевой отпечаток.
Итак, какие тенденции особенно востребованы на сегодняшний день:
1) Уменьшение элементов
Производители намереваются минимизировать размер выреза (“чёлки”) под сенсоры на дисплее за счёт внедрения миниатюрных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.
2) Обработка прямо на устройстве
Для увеличения приватности всё больше расчётов выполняется на месте без передачи информации во внешний облачный сервис.
3) Стандартизация норм
Гугл энергично продвигает норму BiometricPrompt API, для того чтобы такие системы, как admiral x, и любые Android-программы были совместимы с различными типами биометрии единообразно.
Какое подобрать на сегодня?
Когда вам всем важна предельная сохранность данных, выбирайте передовые модели со встроенным ИК-излучателем или же ToF-сенсором глубины.
- iPhone всех актуальных поколений
- Huawei Companion/Series P линейки
- Xiaomi Expert
- Vivo X серии
- Oppo Найти Икс серий.
Если финансы невелик – лучше предпочесть классическим методам безопасности (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в admiral x, использовать только как дополнительную возможность удобства.
Каким способом улучшить практичность работы возможности?
Есть несколько хитростей для людей, кто уже применяет функцию распознавания лица:
- Периодически меняйте свою фотографию-шаблон, если сильно изменяется внешний вид.
- Не пренебрегайте чистить линзу фронтальной камеры – разводы могут снизить четкость!
- Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам активирует фотоаппарат как только вы поднимаете его.
- В процессе регистрации постарайтесь сохранять лицевую часть прямо перед камеры исключая значительного наклона головы.
- Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отвели взгляд от дисплея.
Перспективы эволюции техники
В скоро наступающие периоды можно предвкушать развития полностью безконтактных способов опознания персоны сразу по нескольким биометрическим параметрам одновременно: физиономия + звучание + походка + манипуляции руками!
Также предполагается появление современных способов обеспечения личной информации – к примеру, динамическое модификация цифрового паттерна после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.
Распознавание лиц – единственная из наиболее интересных инноваций нашего периода! Она обеспечивает взаимодействие со мобильным устройством проще чем раньше, и такие аппы, как admiral-x, могут в разы улучшить ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.
Теперь, раз вы понимаете, как функционирует эта технология внутри, – будете в состоянии более осмысленно выбирать свой будущий устройство!