Как действует распознавание лиц в телефонах

Зачем мы выбираем разблокировку по лицу

В недавние времена определение лиц стало одной из самых распространённых опций для разблокировки мобильных телефонов. Еще некоторые годков тому назад основная часть юзеров довольствовались PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением таких технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Какая вещь делает эту функцию настолько популярной? Для начала, это удобно: не нужно помнить сложные пароли или отыскивать верный палец в мраке. Во-вторых, это оперативно: современные программы идентифицируют лицо практически за мгновение. В-третьем пункте, это ощущение футуристичности — будто в кинофильмах про казино вулкан разведчиков.

Тем не менее за этой кажущейся несложностью таится весь универсум трудных технологий и инженерных концепций. Позвольте нам исследовать, как именно работает идентификация по лицу в актуальных смартфонах, какие бывают технологии, насколько они защищены и что нас ждёт впереди.

Короткая повествование развития инноваций

Идентификация лиц как методика имеется уже более 50 лет. Начальные эксперименты автоматического изучения лиц были предприняты еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины умели лишь выделять очертания головы и вычислять расстояния между зрачками и устами на монохромных фотографиях.

Начальные торговые платформы появились в 90-х, но они были далеки от совершенства: функционировали медленно и часто ошибались. Только с прогрессом нейронных сетей и таких систем, как вулкан россии, высокопроизводительных мобильных микросхем распознавание лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным распознаванием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие стали внедрять личные разработки.

Главные шаги работы устройства определения

Процесс определения лица можно примерно поделить на несколько основных этапов:

1. Идентификация лиц — устройство определяет присутствие гуманного образа в изображении.
2. Определение особенностей — алгоритм исследует черты лица: конфигурацию глаз, носа, уст, позицию бровей.
3. Построение модели — создаётся особенный цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со образцом — полученный шаблон сверяется с сохранённой при учёте биометрической данными владельца.
5. Принятие определения — если соответствие достаточно существенное, смартфон открывается.

Каждый из указанных шагов требует специальных алгоритмов и усовершенствований для оперативной работы прямо на устройстве.

Железные компоненты: что прячется внутри них

Стандартная передняя камера.

Самый простой легкий способ определения физиономии использует исключительно лицевую камеру смартфона смартфона. Подобный способ внедрён во многочисленных недорогих версиях Android-девайсов.

Преимущества:

• Не нуждается в дополнительных датчиков.
• Шустро работает при качественном освещении.

Слабые стороны:

• Несложно одурачить фотографией или видеозаписью.
• Неудачно функционирует при слабом свете или необычных точках зрения.

ИК камера и пунктирный проектор

Более усовершенствованные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика лежит в основе Face ID от Apple.

Каким способом это работает:

• Точечный проекционный прибор показывает на лицо использующего невидимую решетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 меток).
• ИК устройство записывает искривление данной сетки по поверхности лица.
• Формируется 3D карта глубины глубины, что практически неподвластна для подделки обычной фото или маскировкой.

Преимущества

• Надёжная работа даже в полной неосвещённости.
• Сильная защита к фальсификациям.
• Точность определения свыше 99%.

Дополнительные сенсоры

В некоторых устройствах используются также экстра датчики: ToF (Time-of-Flight), которые измеряют время прохождения луча до цели и обратно; RGB-датчики глубины; специальные лазерные дальномеры для построения более детализированной 3D-модели лица.

Эти разработки встречаются в основном во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искуственный интеллект в исполнении

Нынешние системы идентификации физиономий немыслимы без эксплуатации ИИ и машинного обучения. Именно вследствие таким разработкам, как вулкан россии, устройство может распознавать юзера даже при метаморфозах облика: новая стрижка, растительность на лице, оптика или грим не становятся барьером для открытия.

Распознавание лиц

На стартовом этапе алгоритм обязана быстро распознать лицо в пределах полного изображения с камеры. Для этой задачи применяются многоуровневые классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые “обучены” распознавать лица людей среди множества других объектов.

Пример: процесс MTCNN может находить облик даже с частичном закрытии (например, шалью или рукой).

Идентификация ключевых аспектов

После распознавания лица устройство, такая как вулкан россии, устанавливает местоположение ключевых точек: уголки глаз, конец носа, границы губ и так далее. Обычно применяется от 68 до 128 основных меток на лицевой области.

Данное необходимо для стабилизации картинки: если юзер держит телефон под наклоном, или повернул головку, программа исправляет картинку до обычного угла для последующего изучения.

Создание биометрического идентификатора шаблона

Далее искусственная сеть строит уплотненное математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 вещественных чисел.

Этот формат весьма сложно имитировать: он не сохраняет само картинку юзера, а лишь исключительные черты его внешности, что делает его идеальным для таких платформ, как vulkan russia.

Сравнение и принятие выбора

В случае, когда человек намеревается открыть телефон взором, система повторяет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый уровень (обычно больше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ запрещается.

Адаптация к трансформациям внешнего вида

Интересная особенность актуальных систем — возможность самообучения. Если вы регулярно разблокируете мобильное устройство с новой укладкой или очками, алгоритм постепенно модернизирует основной шаблон вашего внешности для улучшения точности функционирования без снижения уровня безопасности.

Защита биометрических данных.

Многие юзеры боятся хранить свои био-идентификационные данные на мобильном устройстве из-за риска утечки информации или взлома гаджета. Некоторые компании, вроде vulkan russia, предлагают методы для повышения безопасности сведений пользователей.

• Локальное сохранение: Основная часть девайсов сохраняет биометричные модели исключительно в пределах защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из устройство и закрыты даже изготовителю.

• Шифрование: Все сведения сберегаются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы третьих разработчиков не обладают прямого доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации личности через системный API.

Необходимо упомянуть значимую деталь: в случае, если кто-либо сможет получить доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество изготовители реализуют меры безопасности от неосознанного разблокирования — в частности, заставляют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются типы определения лиц?

На сегодняшний день можно различить 3 основных метода к осуществлению этой операции:

Программируемое двухмерное определение

Используется только передняя видеокамера без экстра датчиков дистанции. Подобный способ используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота воплощения; минимальная стоимость; скоростная деятельность при хорошем освещении.
Минусы: легко обмануть фотографией; нестабильная функционирование ночью; слабая защищенность.

Аппаратное объёмное оцифровка

Использует ИК видеокамеру + проектор пикселей + датчики глубины (Face ID от Apple; подобные решения у Huawei Mate).
Достоинства: высокая достоверность; не получится обмануть фото/видео; постоянная деятельность в любых условиях освещения.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с интеграцией ИИ

Используют комбинацию программируемых методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие изделия, например вулкан россии и Google Pixel Face Unlock новейших поколений, сочетают фронтальную камеру c ИК сенсором мобильности Soli Radar для предотвращения от подделок руками/масками/видеоэкранами посторонних устройств.

Примеры эксплуатации различных способов

• iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз внедрил эквивалент Face ID в числе Android.
• Samsung Galaxy S10/S20 обеспечивают как программное 2D определение по фото фронтальной камерой, так и датчик радужки глаза.
• Huawei Mate20 Pro задействует систему из ИК-подсветки + Dot Projector + ToF-сенсор

Трудности охраны и ошибочные сигналы

Несмотря на поразительный успехи техники за недавние лет, безупречных систем пока не существует:

1. Шанс мошенничества: Доступные телефоны легко доступны четкой изображением хозяина или же видеозаписью с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые безупречные системы могут перепутать между однояйцевыми близнецами либо родичами с очень схожей внешностью.
3. Метаморфозы внешности: Стремительное снижение веса/увеличение массы тела, косметические процедуры или травмы в некоторых случаях необходимы для перерегистрации биометрии.
4. Условия записи: Сильная освещённость солнечным светом либо глубокая затенение могут уменьшить аккуратность распознавания признаков.

Ниже несколько подсказок по безопасному использованию:

• Для значимых операций всегда используйте дополнительную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
• Регулярно обновляйте ПО мобильного устройства для защиты от новых видов атак;
• Включайте функцию “Требовать открытых глаз” в тех местах, где она доступна.

В каких областях дополнительно применяется технология помимо мобильных телефонов?

Несмотря на то, что тема данной статьи касается в частности смартфонам и планшетам, следует отметить других сферах применения технологии:

• Мониторинг входа в офисах и жилых домах;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Электронные удостоверения личности последнего образца;
• Системы видеомониторинга городских подразделений;
• Автоматизирование регистрации посещаемости образовательных учреждений/университетов;
• Вход пользователей ПК/ноутбуков.

Например: В столичном метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — хватит пройти через турникет без пластика или мобильника! Схожие проекты осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом меняется технология в нынешнее время?

Любой годик возникают новые мысли для улучшения качества деятельности систем идентификации лиц:

1. Увеличивается разрешение датчиков — чем больше элементов фиксируется камерой/датчиками глубины, тем меньше вероятность погрешности;
2. Развиваются нейронные сети — современные структуры вида MobileNetV3 обеспечивают возможность оперативно адаптироваться к дополнительным характеристикам вида обладателя напрямую на гаджете без отправки данных в облако.
3. Развиваются технологии антиспуфинга — теперь мобильные устройства умеют распознавать реальные анимированные облики от фиксированных снимков/маскировок по микроскопическим движениям кожи.
4. Интеграция со умными устройствами — умные часы могут автоматически блокировать смартфон, если владелец ушёл далеко.
5. Возникают комбинированные устройства — к примеру комбинирующие голосовую идентификацию + физиономию + отпечаток пальца.

Итак, какие тенденции в особенности популярны в данный момент:

1) Сокращение деталей

Производители намереваются минимизировать габариты отверстия (“чёлки”) для датчики на дисплее за счёт внедрения компактных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для увеличения приватности всё более расчётов осуществляется локально без пересылки данных во внешний облачный услугу.

3) Унификация регламентов

Гугл энергично продвигает стандарт BiometricPrompt API, с целью чтобы такие платформы, как вулкан россия, и все Android-аппы были совместимы с всеми формами биометрии стандартизированно.

Что выбрать на сегодня?

Когда вам всем необходима максимальная защита информации, выбирайте флагманские устройства с интегрированным ИК-излучателем либо ToF-датчиком глубины.

• iPhone всех новейших версий
• Huawei Partner/P ряда
• Mi Pro
• Vivo X серии
• Oppo Обнаружить Икс серии.

Если финансы невелик – лучше предпочесть классическим способам защиты (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную опцию удобства.

Как повысить удобство использования опции?

Есть пара лайфхаков для тех, кто уже использует функцию распознавания лица:

1. Часто меняйте свою изображение-шаблон, если значительно изменяется внешность.
2. Не забывайте чистить линзу передней камеры – загрязнения могут снизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам запускает камеру когда вы берёте его в руки.
4. При записи старайтесь держать лицевую часть неподвижно напротив видеоустройства без значительного наклона головы.
5. Используйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отворачиваетесь от экрана.

Будущее эволюции техники

В скоро наступающие периоды можно предвкушать возникновения полностью безконтактных способов идентификации персоны сразу по нескольким биометрическим параметрам одновременно: облик + речь + манера ходьбы + движения рук!

Также вероятно появление современных подходов обеспечения конфиденциальности – например, изменяющееся изменение электронного образца после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – единственная из очень увлекательных техник нашего времени! Она обеспечивает интеракцию со смартфоном проще чем до этого, и такие аппы, как vulkan russia, могут существенно улучшить ваш опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как работает эта система внутри, – сумеете вдумчиво определять свой будущий гаджет!