Каким образом функционирует распознавание лицевых образов в смартфонах

Зачем мы выбираем разблокировку по фейсу

В прошлые годы определение лиц является одной из самых популярных возможностей для открытия мобильных телефонов. Лишь несколько годов назад большинство юзеров удовлетворялись PIN-кодами, паролями или сканерами отпечатков пальцев. Но с появлением таких технологий, например cabura, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что делает эту конкретную возможность такой востребованной? Для начала, это комфортно: не нужно помнить сложные пароли или искать нужный палец в темноте. Также, это быстро: современные системы распознают лицо фактически за доли секунды. В-третьем пункте, это впечатление будущего — как будто в фильмах про кабура казино шпионов.

Однако за такой кажущейся легкостью скрывается весь универсум трудных техник и инженерных решений. Позвольте нам понять, как именно действует фейсканирование в актуальных мобильных телефонах, какие существуют технологии, насколько они защищены и что нас ждёт впереди.

Краткая история эволюции технологии

Идентификация лиц как методика присутствует уже более пятидесяти годов. Первые пробы машинного анализа облика были осуществлены еще в 1960-х годы в лабораториях США. Тогда ЭВМ способны были лишь определять силуэты лица и вычислять дистанции между зрачками и устами на черно-белых фотографиях.

Первые коммерческие платформы появились в 90-х, но они были несовершенны: функционировали медленно и часто давали сбои. Только с прогрессом искусственных сетей и таких площадок, как кабура, сильных мобильных чипов распознавание лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным распознаванием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать свои разработки.

Ключевые стадии действия системы идентификации

Процесс распознавания лица можно примерно разделить на несколько основных этапов:

1. Распознавание лица — устройство определяет существование гуманного образа в изображении.
2. Выделение особенностей — алгоритм исследует черты лица: очертания глаз, носа, уст, расположение бровей.
3. Построение шаблона — создаётся уникальный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с стандартом — созданный модель сопоставляется со записанной при учёте биометрической данными владельца.
5. Принятие определения — если сходство достаточно высокое, смартфон деблокируется.

Любой из данных этапов запрашивает специальных процедур и улучшений для оперативной работы непосредственно на девайсе.

Аппаратные составляющие: что находится внутри

Типичная передняя камера.

Простейший легкий вариант идентификации физиономии применяет лишь лицевую камеру смартфона мобильного устройства. Такой метод внедрён во различных доступных версиях Android-девайсов.

Плюсы:

• Не нуждается в нуждается в внешних сенсоров.
• Быстро работает при хорошем свете.

Отрицательные стороны:

• Просто ввести в заблуждение фотографией или видео.
• Неудачно функционирует при слабом освещённости или необычных точках зрения.

ИК фотокамера и пунктирный проекционный аппарат

Более продвинутые системы, такие как кабура, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика составляет базу Face ID от Apple.

Каким образом это действует:

• Точечный устройство проекции проецирует на лицо пользователя невидимую решетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 точек).
• ИК устройство фиксирует искривление этой сетки по плоскости лица.
• Создаётся 3D глубинная карта глубины, которая почти неосуществима для фальсификации стандартной снимком или маской.

Преимущества

• Надёжная деятельность даже в полной неосвещённости.
• Большая устойчивость к подделкам.
• Точность распознавания более 99%.

Дополнительные сенсорные устройства

В отдельных аппаратах используются также вспомогательные сенсоры: ToF (Time-of-Flight), которые фиксируют период движения луча до цели и обратно; Трехцветные-датчики глубины; специальные оптические лидары для формирования более детализированной 3D-модели физиономии.

Эти инновации встречаются чаще всего во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искуственный разум на действии

Текущие устройства опознания физиономий немыслимы при отсутствии эксплуатации ИИ и машинного обучения. Именно благодаря таким инновациям, как кабура, аппарат в состоянии идентифицировать юзера даже при изменениях внешности: новая укладка, щетина, очки или грим не становятся помехой для открытия.

Детектирование физиономии

На стартовом стадии система должна мгновенно распознать лицо внутри всего кадра с камеры. Для этого задействуются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые натренированы распознавать лиц человека среди множества других объектов.

Пример: алгоритм MTCNN в состоянии обнаруживать физиономию даже с неполном перекрытии (например, шарфом или рукой).

Выделение основных точек

После идентификации лица система, такая как кабура, определяет местоположение ключевых точек: края глаз, верхушка носа, контуры губ и так далее. Как правило применяется от 68 до 128 главных меток на лицевой области.

Это нужно для стабилизации картинки: если пользователь находится с мобильник под наклоненным, или склонил голову, программа исправляет картинку до обычного угла для последующего изучения.

Создание биометрического идентификатора модели

Далее нейросеть строит сжатое математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 чисел с плавающей запятой.

Данный шаблон весьма сложно сфальсифицировать: он не сохраняет непосредственно изображение юзера, а лишь особенные особенности его внешности, что делает его оптимальным для таких систем, как кабура казино.

Сопоставление и вынесение выбора

Если человек желает открыть телефон взглядом, программа осуществляет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный границу (обычно больше 99%), телефон, как и платформа кабура казино, разблокируется; если нет — доступ блокируется.

Привыкание к трансформациям внешности

Увлекательная характеристика нынешних систем — способность самостоятельного обучения. Если ты регулярно доступаете к мобильное устройство с новой укладкой или оптикой, программа постепенно модернизирует базовый образец вашего облика для увеличения точности действия без ухудшения безопасности.

Защита биометрии данных.

Многие клиенты беспокоятся держать свои биометрические идентификационные данные на смартфоне из-за вероятности утечки информации или хакерской атаки. Определенные организации, например кабура казино, предлагают методы для улучшения сохранности данных юзеров.

• Локальное сбережение: Преимущественно устройств записывает био-идентификационные шаблоны исключительно в пределах защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не покидают гаджет и не доступны в том числе создателю.

• Шифрование: Все сведения сберегаются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих разработчиков не имеют непосредственного доступа к биометрическим; они могут лишь требовать подтверждение верификации идентичности через системный API.

Следует подчеркнуть существенную особенность: в случае, если какой-то человек получит доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие производители осуществляют защиту от “слепого” разблокирования — например, просят раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют виды определения лиц?

В настоящее время можно выделить 3 главных подхода к реализации этой задачи:

Программируемое 2D распознавание

Используется только лицевая видеокамера без вспомогательных датчиков дистанции. Этот подход наблюдается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость реализации; минимальная цена; оперативная функционирование при достаточном свете.
Минусы: просто обмануть фотографией; ненадежная работа ночью; слабая безопасность.

Аппаратное объёмное сканирование

Задействует инфракрасную камеру + проекционный модуль пикселей + датчики дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Достоинства: большая надёжность; невозможно исказить изображение/видеозапись; постоянная деятельность при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные подходы с ИИ-дополнением

Задействуют комбинацию программируемых методов + аппаратную обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как кабура и Google Pixel Face Unlock последних поколений, комбинируют фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.

Образцы эксплуатации различных методов

• iPhone модели X/11/12/13/14 применяют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил подобие Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 поддерживают как софтверное плоское определение по снимку фронтальной камерой, так и датчик радужки глаза.
• Huawei Mate20 Pro задействует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Вопросы защиты и неверные тревоги

Несмотря на впечатляющий развитие технологий за последние лет, совершенных систем пока не наблюдается:

1. Шанс подвоха: Доступные мобильники без труда открываются четкой снимком пользователя или же видео с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые безупречные системы могут ошибиться между однояйцевыми близнецами либо родичами с очень схожей внешностью.
3. Изменения внешнего вида: Резкое утрата веса/набор веса, пластические операции либо травмы в некоторых случаях требуют перерегистрации биометрии.
4. Условия фотографирования: Интенсивная засветка солнечным светом либо глубокая затенение могут снизить точность распознавания признаков.

Вот пара советов по защищённому применению:

• Для критически важных операций всегда используйте двухфакторную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
• Постоянно обновляйте программное обеспечение смартфона для защиты от новых видов атак;
• Включайте настройку “Требовать открытых глаз” в тех местах, где она имеется.

В каких местах дополнительно используется технологии за исключением мобильных телефонов?

Несмотря на то, что тема этой работы сосредоточена на именно смартфонам и планшетам, следует отметить альтернативных областях использования технологии:

• Управление доступа в офисах и многоквартирных зданиях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Виртуальные идентификационные документы современного поколения;
• Установки видеоконтроля городских подразделений;
• Механизация учёта посещаемости образовательных учреждений/университетов;
• Аутентификация пользователей компьютеров/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по лицу (“Face Pay”) — достаточно пройти через турникет без карты или мобильника! Похожие инициативы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом изменяется технический процесс в нынешнее время?

Каждый год возникают современные мысли для усовершенствования стандарта работы систем лицевого распознавания:

1. Увеличивается чёткость сенсорных устройств — чем больше деталей фиксируется фотоаппаратом/датчиками глубины, тем меньше риск ошибки;
2. Улучшаются искусственные интеллекты — новейшие архитектуры модели MobileNetV3 дают возможность скоростно обучаться дополнительным характеристикам внешности пользователя прямо на устройстве без отправки данных в облако.
3. Совершенствуются способы антиспуфинга — теперь мобильные устройства могут отличать реальные живые лица от статичных фото/маскировок по микроскопическим движениям кожи.
4. Интеграция со умными устройствами — интеллектуальные часы могут самостоятельно заблокировать мобильный телефон, если пользователь ушёл далеко.
5. Появляются гибридные механизмы — например комбинирующие речевую идентификацию + лицо + пальцевой отпечаток.

Итак, которые тренды особенно востребованы в данный момент:

1) Уменьшение компонентов

Изготовители намереваются сократить размер прорези (“чёлки”) под датчики на экране за счёт интеграции миниатюрных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Переработка прямо на девайсе

Для увеличения личной безопасности всё более расчётов происходит на месте без передачи данных во сторонний облачный сервис.

3) Упорядочивание стандартов

Google интенсивно продвигает эталон BiometricPrompt API, чтобы подобные системы, вроде cabura, и все Android-приложения могли работать с всеми формами биометрии единообразно.

Что подобрать на сегодня?

Когда тебе важна максимальная защита информации, выбирайте флагманские модели со встроенным ИК-излучателем либо ToF-сенсором глубины.

• iPhone всех новейших поколений
• Huawei Partner/P ряда
• Mi Professional
• Vivo X модели
• Оппо Обнаружить Х линейки.

Если средства ограничен – лучше предпочесть обычным способам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в cabura, задействовать только как второстепенную возможность удобства.

Как улучшить практичность функционирования возможности?

Есть некоторые советов для тех, кто уже применяет разблокировку через лицо:

1. Часто обновляйте свою фотографию-шаблон, если кардинально трансформируется внешний вид.
2. Не упускайте из виду чистить линзу фронтальной камеры – загрязнения могут понизить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам включает камеру как только вы поднимаете его.
4. При записи пытайтесь держать лицевую часть прямо напротив видеоустройства без сильного наклона головы.
5. Используйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвели взгляд от дисплея.

Возможности прогресса техники

В скоро наступающие периоды можно предполагать появления полностью безконтактных способов опознания человека сразу по нескольким биометрическим данным параметрам одновременно: лицо + звучание + походка + манипуляции руками!

Также возможно появление новых способов охраны конфиденциальности – к примеру, переменное модификация диджитал шаблона после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых интересных инноваций нашего эпохи! Она обеспечивает интеракцию со смартфоном удобнее чем когда-либо прежде, и такие приложения, как кабура казино, могут существенно оптимизировать ваш пользовательский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы понимаете, как устроена эта система изнутри, – будете в состоянии вдумчиво выбирать свой будущий устройство!