Каким способом функционирует определение лиц в смартфонах
Зачем мы выбираем разлочивание по лицу
В последние времена распознавание физиономий превратилось в одной из самых популярных возможностей для разблокировки смартфонов. Всего несколько годов тому назад большинство использующих довольствовались пин-кодами, паролями или сканерами отпечатков пальцев. Но при появлением подобных технологий, например admiral x, нам вполне лишь взглянуть на экран — и устройство тут же узнает своего владельца.
Какой аспект превращает эту особенность настолько популярной? Прежде всего, это удобно: не нужно удерживать в памяти замысловатые пароли или отыскивать правильный палец в темноте. Во-вторых, это мгновенно: современные системы идентифицируют лицо фактически за мгновение. В-третьих, это ощущение футуризма — будто в кинолентах про адмирал х официальный сайт шпионов.
Тем не менее за этой на первый взгляд простотой таится целый вселенная сложных технологий и инженерных решений. Позвольте нам разобраться, как точно работает распознавание лиц в новейших гаджетах, какие применяются способы, насколько они надёжны и что нас ждёт впереди.
Сжатая хроника развития технологии
Распознавание лиц как методика существует уже более 50 годов. Изначальные попытки автоматического анализа облика были сделаны еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ умели лишь выделять контуры черепа и вычислять промежутки между очами и губами на черно-белых фотографиях.
Начальные торговые платформы стали доступны в 90-х, но они были далеки от совершенства: действовали неспешно и часто ошибались. Только с эволюцией синтетических сетей и таких систем, как адмирал х, сильных мобильных чипов распознавание лиц стало по-настоящему общедоступным явлением.
В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным сканированием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать личные решения.
Главные стадии действия механизма распознавания
Процесс определения лица можно условно сегментировать на несколько важных этапов:
- Идентификация лица — аппарат распознает присутствие гуманного лица в кадре.
- Извлечение признаков — алгоритм исследует контуры лица: форму зрительных органов, носа, уст, позицию надбровных дуг.
- Построение шаблона — создаётся особенный электронный отпечаток (faceprint) на основе выделенных признаков.
- Сравнение с образцом — полученный образец сопоставляется со зафиксированной при учёте биометрической данными владельца.
- Принятие решения — если соответствие достаточно значительное, смартфон открывается.
Всякий из указанных стадий нуждается в индивидуальных методов и улучшений для скорой работы непосредственно на девайсе.
Аппаратные составляющие: что находится внутри
Типичная передняя камера.
Простейший простой вариант распознавания лица применяет лишь переднюю камеру смартфона. Такой метод реализован во многих недорогих версиях Android-девайсов.
Достоинства:
- Не требует внешних сенсоров.
- Быстро работает при достаточном освещённости.
Слабые стороны:
- Несложно одурачить изображением или видеозаписью.
- Неправильно действует при плохом свете или нестандартных точках зрения.
Инфракрасная камера и пунктирный проекционный аппарат
Более продвинутые системы, такие как адмирал х, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика является основой Face ID от Apple.
Как это действует:
- Точечный проектор проецирует на облик использующего невидимую структуру из тысяч инфракрасных меток (например, Face ID задействует около 30 000 пятен).
- ИК устройство регистрирует изменение формы этой сетки по плоскости физиономии.
- Получается трёхмерная карта глубинности, что почти неосуществима для имитации стандартной фотографией или маской.
Преимущества
- Надёжная работа даже в полной тьме.
- Высокая защита к фальсификациям.
- Точность определения более 99%.
Добавочные сенсоры
В некоторых устройствах используются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые измеряют период распространения света до предмета и обратно; Цветные-датчики глубины; специальные лазерные лидары для построения более детализированной 3D-модели физиономии.
Эти разработки используются наиболее часто во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).
Софтверные алгоритмы: искуственный разум в исполнении
Текущие устройства опознания физиономий неосуществимы без использования ИИ и machine learning. Именно вследствие таким технологиям, как адмирал х, устройство в состоянии узнавать юзера даже при трансформациях внешности: новая стрижка, растительность на лице, линзы или косметика не становятся барьером для открытия.
Детектирование физиономии
В стартовом этапе система обязана быстро найти образ лица в пределах целого кадра камеры. Для этой задачи используются многоуровневые классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые натренированы распознавать лиц человека среди множества других объектов.
Пример: процесс MTCNN может обнаруживать лицо даже при частичном закрытии (например, платком или ладонью).
Выделение важных моментов
После обнаружения лица система, такая как адмирал х, вычисляет местоположение основных точек: кончики глаз, верхушка носа, контуры губ и так далее. Часто задействуется от 68 до 128 ключевых маркеров на лицевой поверхности.
Это необходимо для стабилизации визуала: если пользователь держит смартфон под наклоном, или повернул головку, программа исправляет картинку до обычного угла для последующего изучения.
Формирование биометрического идентификатора образца
Далее нейронная сеть строит уплотненное математическое представление («эмбеддинг») лица пользователя — своеобразный цифровой след внешности длиной от 128 до 512 чисел с плавающей запятой.
Такой образец крайне сложно подделать: он не удерживает непосредственно фото юзера, а лишь уникальные характеристики его вида, что делает его оптимальным для таких систем, как admiral-x.
Сравнительный анализ и осуществление заключения
В случае, когда пользователь намеревается открыть смартфон взглядом, система осуществляет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.
Если схожесть превышает определённый порог (обычно превышает 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ блокируется.
Приспособление к изменениям внешнего вида
Увлекательная характеристика нынешних систем — возможность самообучения. Если ты часто доступаете к смартфон с обновленной прической или оптикой, программа постепенно модернизирует основной шаблон вашего внешности для повышения точности работы без ухудшения безопасности.
Защита биометрии информации.
Множество юзеры опасаются сохранять свои биометрические данные на смартфоне из-за риска утечки информации или взлома устройства. Некоторые организации, такие как admiral-x, предлагают решения для повышения защиты информации пользователей.
-
Локальное сбережение: Преимущественно аппаратов хранит биометричные модели исключительно в пределах безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из гаджет и недоступны включая производителю.
-
Шифрование: Все данные сохраняются только в кодированном виде с использованием современных криптографических алгоритмов AES256.
-
Изоляция приложений: Программы сторонних девелоперов не обладают прямого доступа к биометрическим данным; они могут лишь требовать подтверждение подтверждения идентичности через системный API.
Стоит отметить существенную подробность: в случае, если кто-то достанет физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие производители реализуют меры безопасности от автоматического разблокирования — к примеру, требуют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.
Какие существуют виды идентификации лиц?
На сегодняшний день можно определить определить три главных подхода к выполнению этой функции:
Софтверное плоское определение
Эксплуатируется только фронтальная камера без экстра сенсоров дистанции. Подобный подход наблюдается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).
Достоинства: несложность воплощения; умеренная стоимость; быстрая деятельность при качественном освещении.
Минусы: несложно одурачить фотографией; неустойчивая деятельность ночью; низкая охрана.
Техническое объёмное сканирование
Задействует инфракрасную видеокамеру + проектор пикселей + сенсоры дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Достоинства: значительная достоверность; невозможно подделать изображение/видеозапись; устойчивая работа при любом освещении.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана («чёлка»)
Комбинированные подходы с дополнением ИИ
Задействуют комбинацию программируемых методов + аппаратную обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам («anti-spoofing»). Например, такие товары, например адмирал х и Google Pixel Face Unlock последних версий, сочетают фронталку c ИК датчиком мобильности Soli Radar для предотвращения от подделок руками/масками/видеоэкранами чужих устройств.
Примеры эксплуатации разных методов
- iPhone серии X/11/12/13/14 задействуют только физическое трёхмерное сканирование в 3D
- Xiaomi Mi8 Explorer Edition впервые представил подобие Face ID среди Android.
- Samsung Galaxy S10/S20 имеют как программное 2D распознавание по изображению фронталкой, так и сканер радужки глаза.
- Huawei Mate20 Pro использует комплекс из ИК-освещения + Dot Projector + ToF-сенсор
Трудности безопасности и ошибочные срабатывания
Несмотря на поразительный развитие инноваций за последние годы, идеальных системы пока не имеется:
- Вероятность подвоха: Недорогие смартфоны легко открываются четкой снимком хозяина либо видео с экрана другого устройства.
- Идентичные близняшки: Даже самые совершенные системы могут ошибиться между монозиготными близнецами либо родичами с очень похожей внешностью.
- Трансформации внешнего вида: Стремительное снижение веса/увеличение массы тела, косметические процедуры либо повреждения в некоторых случаях необходимы для повторной регистрации биометрических данных.
- Условия записи: Яркая освещённость солнцем либо интенсивная тень могут понизить аккуратность определения признаков.
Вот пара подсказок для надёжному эксплуатации:
- Для критически важных операций всегда применяйте двухфакторную аутентификацию;
- Не запускайте функцию «Разблокировка по лицу» на бюджетных аппаратах без ИК-сенсоров;
- Регулярно апгрейдите ПО телефона для предотвращения угроз от новых видов атак;
- Включайте функцию «Требовать распахнутых глаз» в тех местах, где она доступна.
Где ещё применяется технологии за исключением смартфонов?
Пускай предмет данной публикации касается конкретно портативным гаджетам, стоит упомянуть о прочих направлениях внедрения технологии:
- Мониторинг прохода в рабочих помещениях и многоквартирных зданиях;
- Платёжные аппараты финансовых учреждений («Face Pay»);
- Цифровые идентификационные документы нового образца;
- Комплексы видеомониторинга городских служб;
- Механизация учёта присутствия образовательных учреждений/институтов;
- Аутентификация участников персональных компьютеров/ноутбуков.
Например: В московском метро уже тестируется система оплаты проезда по лицу («Face Pay») — достаточно пройти через барьер без пластика или мобильника! Схожие инициативы реализуются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.
Как меняется техпроцесс в наше время?
Любой годочек проявляются свежие концепции для повышения качества функционирования систем лицевого распознавания:
- Увеличивается разрешение сенсорных устройств — чем больше деталей фиксируется фотоаппаратом/датчиками глубины, тем меньше шанс неточности;
- Улучшаются нейронные сети — новейшие конструкции типа MobileNetV3 дают возможность быстро обучаться новым особенностям облика пользователя непосредственно на девайсе без пересылки информации в облачное хранилище.
- Улучшаются методы антиспуфинга — теперь телефоны могут отличать реальные живые лица от статичных снимков/маскировок по незаметным движениям кожи.
- Синхронизация со интеллектуальными приборами — умные часы могут авто блокировать смартфон, если владелец удалился на значительное расстояние.
- Появляются комбинированные устройства — к примеру объединяющие речевую идентификацию + облик + пальцевой отпечаток.
Итак, которые тенденции в особенности востребованы в данный момент:
1) Миниатюризация компонентов
Производители стараются уменьшить величину прорези («чёлки») под сенсоры на экране за счёт внедрения маленьких ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.
2) Обработывание прямо на устройстве
Для улучшения личной безопасности всё более вычислений выполняется локально без отправки информации во сторонний облачный услугу.
3) Унификация регламентов
Google энергично пропагандирует норму BiometricPrompt API, для того чтобы подобные площадки, вроде admiral x, и каждые Android-аппы могли взаимодействовать с различными типами биометрии единообразно.
Что решить сегодня?
Если вам всем необходима максимальная сохранность данных, остановите выбор на флагманские аппараты со встроенным ИК-проектором либо ToF-сенсором глубины.
- iPhone всех последних моделей
- Huawei Mate/P Series линейки
- Xiaomi Expert
- Vivo X серии
- Oppo Найти X серии.
Если средства скромен – лучше выбирать классическим методам защиты (PIN-код/сканер отпечатка), а опцию «разблокировка по лицу», такую как в admiral x, задействовать только как дополнительную возможность комфорта.
Каким способом увеличить удобство функционирования возможности?
Есть некоторые хитростей для тех, кто уже использует разблокировку через лицо:
- Периодически меняйте свою фотографию-шаблон, если сильно трансформируется внешний вид.
- Не упускайте из виду протирать объектив фронтальной камеры – загрязнения могут снизить точность!
- Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам включает фотоаппарат как только вы берёте его в руки.
- В процессе регистрации старайтесь сохранять голову ровно напротив видеоустройства исключая сильного наклона головы.
- Используйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отворачиваетесь от дисплея.
Возможности развития инноваций
В скоро наступающие годы можно ожидать появления полностью безконтактных способов опознания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + звучание + манера ходьбы + жесты рук!
Также вероятно появление новых подходов обеспечения приватности – скажем, переменное изменение электронного образца после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.
Распознавание лиц – единственная из очень интересных технологий нашего эпохи! Она обеспечивает интеракцию со телефоном удобнее чем когда-либо прежде, и такие аппы, как admiral-x, могут существенно повысить ваш пользовательский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.
Теперь, когда вы осведомлены, как работает эта технология изнутри, – сможете вдумчиво подбирать свой очередной гаджет!