Каким образом функционирует распознавание лиц в телефонах

Почему мы останавливаемся на разблокировку по лицу

В прошлые времена идентификация физиономий является одной из наиболее востребованных опций для разблокировки умных телефонов. Всего пару годов тому назад основная масса использующих удовлетворялись PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением подобных технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что превращает эту функцию очень нужной? Для начала, это практично: не нужно помнить трудные пароли или отыскивать нужный палец в мраке. Также, это мгновенно: современные алгоритмы узнают лицо фактически за мгновение. В-третьем пункте, это чувство футуризма — словно в фильмах про казино вулкан агентов.

Тем не менее за данной видимой несложностью таится полный мир сложных технологий и инженерных решений. Давайте понять, как конкретно функционирует распознавание лиц в новейших смартфонах, какие существуют технологии, насколько они надёжны и что нас предстоит.

Краткая повествование развития инноваций

Идентификация лиц как техника существует уже более 50 годов. Первые эксперименты автоматического анализа облика были сделаны еще в 1960-х годы в лабораториях США. Тогда компьютеры могли лишь обозначать контуры лица и вычислять промежутки между зрачками и ртом на черно-белых фотографиях.

Начальные коммерческие установки возникли в девяностых годах, но они были неидеальны: работали медленно и часто давали сбои. Только с эволюцией нейронных сетей и таких систем, как вулкан россии, мощных мобильных чипов идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным идентификацией лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие стали внедрять собственные решения.

Главные шаги действия механизма определения

Процесс определения лица можно примерно разделить на несколько ключевых этапов:

1. Обнаружение лиц — аппарат выявляет присутствие людского образа в снимке.
2. Извлечение признаков — механизм анализирует черты физиономии: конфигурацию глаз, носа, уст, позицию надбровных дуг.
3. Построение модели — создаётся уникальный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со образцом — полученный модель сравнивается с зафиксированной при учёте биометрической информацией владельца.
5. Принятие решения — если сходство достаточно существенное, смартфон открывается.

Любой из этих шагов требует специальных методов и улучшений для оперативной работы прямо на устройстве.

Аппаратные составляющие: что прячется внутри них

Обычная селфи камера.

Простейший простой вариант идентификации облика задействует лишь лицевую камеру смартфона мобильного устройства. Такой метод реализован во многочисленных доступных моделях Android-девайсов.

Положительные стороны:

• Не нуждается в нуждается в внешних сенсоров.
• Оперативно функционирует при хорошем свете.

Недостатки:

• Несложно обмануть фотографией или видеозаписью.
• Плохо действует при низком освещении или необычных точках зрения.

ИК камера и пунктирный проекционный аппарат

Более совершенные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология лежит в основе Face ID от Apple.

Каким способом это работает:

• Точечный проекционный прибор проецирует на физиономию пользователя невидимую решетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 пятен).
• Инфракрасная камера регистрирует искривление данной сетки по плоскости лица.
• Создаётся 3D карта глубинности, что почти неосуществима для подделки стандартной фотографией или маской.

Преимущества

• Надёжная функционирование даже в полной неосвещённости.
• Сильная устойчивость к имитациям.
• Точность определения более 99%.

Добавочные сенсорные устройства

В определённых устройствах используются также дополнительные датчики: ToF (Time-of-Flight), которые измеряют период прохождения света до цели и обратно; Цветные-датчики дальности; специальные световые дальномеры для создания более аккуратной 3D-модели физиономии.

Эти разработки используются наиболее часто во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искусственный ум на исполнении

Текущие системы распознавания лиц немыслимы в отсутствие эксплуатации искусственного интеллекта и машинного обучения. Именно благодаря таким инновациям, как вулкан россии, устройство может распознавать владельца даже при метаморфозах внешности: новая стрижка, растительность на лице, линзы или косметика не становятся барьером для разблокировки.

Обнаружение лиц

В стартовом стадии алгоритм необходимо быстро распознать образ лица в пределах целого снимка камеры. Для этого применяются последовательные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые подготовлены идентифицировать лица людей среди множества других объектов.

Пример: процесс MTCNN в состоянии распознавать лицо даже с частичном перекрытии (например, шарфом или рукой).

Идентификация важных аспектов

После обнаружения лица устройство, такая как вулкан россии, вычисляет положение основных точек: уголки глаз, кончик носа, края губ и так далее. Часто используется от 68 до 128 ключевых точек на лицевой области.

Это нужно для выравнивания изображения: если пользователь находится с мобильник под наклоненным, или повернул голову, программа «выпрямляет» картинку до нормального состояния для дальнейшего анализа.

Построение биометрического идентификатора модели

Далее искусственная сеть строит уплотненное цифровое представление («эмбеддинг») внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Данный шаблон весьма сложно подделать: он не удерживает непосредственно изображение пользователя, а лишь особенные характеристики его внешности, что делает его оптимальным для таких систем, как vulkan russia.

Сопоставление и принятие заключения

Когда пользователь намеревается открыть телефон глазами, система повторяет все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый порог (обычно выше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ запрещается.

Приспособление к изменениям облика

Увлекательная характеристика нынешних системы — возможность самостоятельного обучения. Если ты регулярно доступаете к смартфон с свежей прической или очками, система постепенно освежает базовый шаблон вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Защита биометрии информации.

Множество клиенты опасаются сохранять свои биометрические данные на мобильном устройстве из-за угрозы утечки информации или хакерской атаки. Иные организации, вроде vulkan russia, предоставляют варианты для повышения защиты информации пользователей.

• Локальное хранение: Большинство устройств записывает биометрические шаблоны исключительно внутрь защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют аппарат и не доступны включая производителю.

• Шифрование: Все сведения сберегаются только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения третьих девелоперов не имеют прямого возможности доступа к биометрическим данным; они могут лишь запрашивать подтверждение подтверждения идентичности через системный API.

Стоит подчеркнуть значимую особенность: в случае, если какой-то человек достанет доступ к вашему телефону физически (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство компании реализуют меры безопасности от «слепого» разблокирования — например, просят раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются типы определения лиц?

Сегодня можно различить три главных метода к осуществлению этой операции:

Программируемое двухмерное распознавание

Используется только передняя видеокамера без вспомогательных сенсоров дистанции. Этот способ наблюдается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость осуществления; низкая цена; скоростная работа при хорошем освещении.
Минусы: просто обмануть фотографией; нестабильная работа ночью; слабая защищенность.

Техническое трёхмерное сканирование

Применяет инфракрасную видеокамеру + проектор пикселей + сенсоры дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Плюсы: высокая надежность; нельзя подделать изображение/видеозапись; стабильная деятельность при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана («чёлка»)

Комбинированные методы с ИИ-дополнением

Применяют комбинацию софтверных методов + аппаратную обработку + последующую обработку нейросетями для увеличения устойчивости к атакам («anti-spoofing»). Например, подобные товары, например вулкан россии и Google Pixel Face Unlock современных поколений, объединяют фронтальную камеру c ИК сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Образцы эксплуатации различных способов

• iPhone модели X/11/12/13/14 применяют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition впервые представил аналог Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как софтверное двухмерное идентификацию по фото фронтальной камерой, так и сенсор радужки глаза.
• Huawei Mate20 Pro задействует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Трудности защиты и ошибочные срабатывания

Несмотря на впечатляющий развитие инноваций за недавние годы, идеальных систем пока не существует:

1. Шанс подвоха: Доступные смартфоны просто доступны качественной изображением хозяина или же видеозаписью с экрана другого устройства.
2. Идентичные близнецы: Даже самые безупречные механизмы могут перепутать между монозиготными близнецами либо родичами с очень аналогичной внешностью.
3. Метаморфозы внешнего вида: Стремительное снижение веса/увеличение массы тела, косметические процедуры или повреждения порой необходимы для перерегистрации биометрии.
4. Условия записи: Яркая подсветка солнцем либо глубокая темнота могут понизить верность идентификации признаков.

Ниже некоторые рекомендаций по безопасному эксплуатации:

• Для важных операций всегда используйте двухфакторную аутентификацию;
• Не включайте опцию «Разблокировка по лицу» на недорогих устройствах без ИК-сенсоров;
• Систематически апгрейдите программное обеспечение телефона для обеспечения безопасности от современных угроз;
• Включайте функцию «Требовать распахнутых глаз» там, где она есть.

Где также находится применение технологии помимо мобильных телефонов?

Пускай основная мысль нашей работы касается именно мобильным устройствам, необходимо сказать о альтернативных областях использования технологии:

• Контроль входа в офисах и многоквартирных зданиях;
• Платёжные устройства банков («Face Pay»);
• Электронные идентификационные документы нового образца;
• Комплексы видеонаблюдения муниципальных подразделений;
• Механизация отслеживания присутствия школ/университетов;
• Аутентификация участников компьютеров/ноутбуков.

Например: В московском метро уже проверяется система платежа проезда по лицу («Face Pay») — достаточно пройти через турникет без пластика или мобильника! Аналогичные инициативы развиваются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким способом меняется техпроцесс в наше время?

Каждый годик проявляются современные концепции для улучшения стандарта работы систем идентификации лиц:

1. Увеличивается разрешение датчиков — чем больше деталей фиксируется фотоаппаратом/датчиками глубины, тем меньше шанс погрешности;
2. Улучшаются нейронные сети — передовые структуры типа MobileNetV3 позволяют оперативно осваивать новым характеристикам вида пользователя напрямую на гаджете без отправки данных в облако.
3. Развиваются способы антиспуфинга — теперь телефоны способны различать настоящие живые лица от фиксированных фотографий/маскировок по микроскопическим движениям кожи.
4. Синхронизация со интеллектуальными приборами — умные часы могут самостоятельно закрыть доступ к смартфон, если пользователь ушёл далеко.
5. Появляются смешанные механизмы — например совмещающие голосовую идентификацию + облик + дактилоскопический след.

Здесь, которые тенденции особенно актуальны сейчас:

1) Сокращение компонентов

Производители пытаются сократить величину прорези («чёлки») под датчики на дисплее за счёт встраивания миниатюрных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для повышения личной безопасности всё более обработки данных осуществляется локально без отправки данных во дополнительный облачный сервис.

3) Стандартизация стандартов

Google активно продвигает норму BiometricPrompt API, для того чтобы аналогичные платформы, например как вулкан россия, и все Android-программы могли работать с любыми видами биометрии унифицированно.

Что выбрать сегодня?

В случае если тебе нужна максимальная защита данных, выбирайте флагманские модели с интегрированным ИК-излучателем либо ToF-сенсором глубины.

• iPhone всех последних поколений
• Huawei Companion/P Series ряда
• Mix Expert
• Vivo X серии
• Oppo Обнаружить Икс серии.

Если средства невелик – лучше предпочесть традиционным методам безопасности (PIN-код/сканер пальца), а возможность «разблокировка по лицу», такую как в вулкан россия, применять только как опциональную возможность комфорта.

Как улучшить удобство работы возможности?

Есть несколько советов для пользователей, кто уже пользуется функцию распознавания лица:

1. Периодически меняйте свою фотографию-шаблон, если кардинально трансформируется облик.
2. Не упускайте из виду очищать объектив передней камеры – загрязнения могут понизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам активирует камеру когда вы поднимаете его.
4. В процессе регистрационного процесса старайтесь держать лицевую часть ровно напротив камеры без значительного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отворачиваетесь от экрана.

Будущее развития техники

В скоро наступающие периоды можно предполагать возникновения полностью безконтактных способов идентификации индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + голос + шаги + жесты рук!

Также предполагается развитие свежих подходов обеспечения приватности – например, переменное изменение электронного шаблона после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых захватывающих технологий нашего периода! Она обеспечивает интеракцию со телефоном проще чем до этого, и такие программы, как vulkan russia, могут в разы оптимизировать ваш юзерский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы знаете, как функционирует эта система в деталях, – сумеете осознаннее подбирать свой следующий гаджет!