Как работает распознавание лиц в смартфонах

Зачем мы предпочитаем разблокирование по фейсу

В прошлые годы идентификация лиц является одной из самых популярных возможностей для деблокировки мобильных телефонов. Всего некоторые годов назад основная масса пользователей обходились PIN-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением подобных технологий, например Spinto, нам достаточно просто взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь обуславливает данную возможность такой востребованной? Для начала, это практично: не нужно удерживать в памяти сложные пароли или искать правильный палец в мраке. Во-вторых, это быстро: современные системы узнают лицо практически за мгновения ока. В-третьих, это впечатление футуризма — словно в фильмах про russles.ru агентов.

Тем не менее за такой кажущейся простотой таится весь мир сложных технологий и инженерных решений. Попробуем исследовать, как именно действует распознавание лиц в современных гаджетах, какие существуют технологии, насколько они надёжны и что нас предстоит.

Сжатая история эволюции инноваций

Распознавание лиц как техника имеется уже более пятидесяти лет. Начальные эксперименты автоматизированного анализа лиц были сделаны еще в 1960-х годы в исследовательских центрах США. Тогда компьютеры могли лишь обозначать очертания лица и определять дистанции между глазами и губами на черно-белых фотографиях.

Первые коммерческие системы появились в девяностых годах, но они были далеки от совершенства: функционировали медленно и часто ошибались. Только с прогрессом искусственных сетей и таких площадок, как Спинто, мощных мобильных процессоров определение лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным сканированием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали внедрять личные разработки.

Ключевые шаги действия системы определения

Процесс распознавания лица можно условно разделить на несколько основных этапов:

1. Обнаружение лица — камера выявляет присутствие людского лица в кадре.
2. Выделение характеристик — алгоритм изучает черты облика: форму зрительных органов, обонятельного органа, губ, расположение бровей.
3. Построение модели — создаётся неповторимый цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со стандартом — созданный образец сопоставляется со сохранённой при учёте биометрической информацией владельца.
5. Принятие решения — если совпадение достаточно высокое, смартфон разблокируется.

Всякий из данных стадий запрашивает индивидуальных процедур и улучшений для быстрой работы непосредственно на девайсе.

Железные составляющие: что находится в их недрах

Типичная селфи камера.

Самый легкий способ определения облика применяет лишь переднюю видеокамеру мобильного устройства. Такой метод осуществлён во различных бюджетных вариантах Android-девайсов.

Преимущества:

• Не потребляет дополнительные датчиков.
• Шустро функционирует при хорошем свете.

Недостатки:

• Легко обмануть снимком или видео.
• Неудачно действует при низком освещении или нестандартных ракурсах.

ИК фотокамера и точечный проектор

Более усовершенствованные системы, такие как Спинто, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология является основой Face ID от Apple.

Каким образом это функционирует:

• Точечный проектор отображает на физиономию юзера невидимую сетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 пятен).
• Инфракрасная камера фиксирует искривление этой решетки по поверхности лица.
• Создаётся трёхмерная глубинная карта глубины, что почти невозможна для имитации типичной снимком или маскировкой.

Достоинства

• Надёжная деятельность даже в полной неосвещённости.
• Высокая сопротивляемость к подделкам.
• Точность распознавания выше 99%.

Дополнительные сенсорные устройства

В отдельных девайсах задействуются также вспомогательные датчики: ToF (Time-of-Flight), которые измеряют время распространения света до предмета и обратно; Цветные-датчики глубины; специальные оптические измерители расстояния для создания более детализированной 3D-модели лица.

Эти разработки применяются чаще всего во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искусственный интеллект в действии

Текущие системы опознания физиономий невозможны при отсутствии использования ИИ и машинного обучения. Именно благодаря таким технологиям, как Спинто, устройство в состоянии идентифицировать пользователя даже при метаморфозах внешнего вида: новая стрижка, растительность на лице, линзы или макияж не становятся помехой для разблокировки.

Обнаружение физиономии

На начальном стадии программа необходимо быстро обнаружить ликовое изображение в пределах всего снимка камеры. Для этого задействуются каскадные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые “обучены” находить лиц человека среди множества других объектов.

Пример: процесс MTCNN в состоянии распознавать физиономию даже в случае неполном перекрытии (например, шарфом или ладонью).

Определение ключевых аспектов

После распознавания лица устройство, такая как Спинто, устанавливает положение главных точек: уголки глаз, верхушка носа, контуры губ и так далее. Как правило применяется от 68 до 128 основных маркеров на лице.

Это действие требуется для выравнивания визуала: если юзер удерживает мобильник под наклоном, или склонил головку, программа исправляет изображение до стандартного положения для последующего изучения.

Построение биометрического образца

Далее нейронная сеть строит сжатое цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 вещественных чисел.

Данный формат очень сложно подделать: он не удерживает непосредственно картинку юзера, а лишь уникальные особенности его вида, что делает его идеальным для таких платформ, как Спинто казино.

Сравнение и осуществление решения

Если человек хочет разблокировать телефон глазами, система осуществляет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный уровень (обычно больше 99%), телефон, как и платформа Спинто казино, разблокируется; если нет — доступ запрещается.

Привыкание к метаморфозам внешнего вида

Занимательная характеристика нынешних системы — возможность самообучения. Если вы постоянно разблокируете телефон с обновленной прической или оптикой, алгоритм постепенно модернизирует базовый модель вашего облика для улучшения точности функционирования без снижения уровня безопасности.

Защита биометрических данных данных.

Большинство юзеры боятся хранить свои биометрические данные на смартфоне из-за угрозы утечки информации или хакерской атаки. Определенные фирмы, такие как Спинто казино, предлагают варианты для повышения сохранности сведений клиентов.

• Локальное хранение: Преимущественно аппаратов записывает биометричные шаблоны лишь в пределах безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из устройство и не доступны включая создателю.

• Шифрование: Все сведения хранятся только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних разработчиков не имеют прямого доступа к биометрическим; они могут лишь запрашивать факт верификации идентичности через системный API.

Следует упомянуть значимую особенность: если кто-то получит доступ к вашему телефону физически (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие производители внедряют меры безопасности от “слепого” разблокирования — например, заставляют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие имеются категории распознавания лиц?

На сегодняшний день можно выделить определить 3 основных метода к реализации этой функции:

Программируемое двухмерное определение

Эксплуатируется только фронтальная видеокамера без дополнительных детекторов глубины. Этот метод используется чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота осуществления; минимальная стоимость; быстрая функционирование при качественном освещении.
Минусы: просто одурачить снимком; ненадежная функционирование ночью; недостаточная защищенность.

Оборудование для 3D сканирование

Применяет инфракрасную камеру + проектор точек + датчики глубины (Face ID от Apple; подобные технологии у Huawei Mate).
Преимущества: большая достоверность; нельзя исказить фото/видео; стабильная деятельность в любых условиях освещения.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с ИИ-дополнением

Применяют комбинацию программных методов + аппаратную обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как Спинто и Google Pixel Face Unlock последних поколений, сочетают фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для предотвращения от подделок руками/масками/видеоэкранами посторонних устройств.

Иллюстрации применения разных способов

• iPhone модели X/11/12/13/14 применяют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition впервые представил аналог Face ID среди Android.
• Samsung Galaxy S10 модель/S20 поддерживают как софтверное 2D определение по снимку фронтальной камерой, так и датчик глазного ириса.
• Huawei Mate20 Pro использует набор из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Трудности охраны и ошибочные тревоги

Несмотря на замечательный успехи технологий за прошедшие годы, безупречных систем пока не имеется:

1. Вероятность мошенничества: Доступные смартфоны просто доступны четкой фотографией хозяина или роликом с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые идеальные устройства могут спутать между монозиготными близнецами либо семьями с очень схожей внешностью.
3. Изменения внешнего вида: Внезапное снижение веса/набор веса, косметические процедуры или травмы порой требуют обновления данных биометрических данных.
4. Условия записи: Интенсивная засветка солнцем либо глубокая затенение могут понизить аккуратность определения признаков.

Ниже некоторые подсказок для надёжному эксплуатации:

• Для критически важных операций всегда внедряйте двухэтапную аутентификацию;
• Не запускайте возможность “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Постоянно обновляйте прошивку смартфона для защиты от современных угроз;
• Включайте функцию “Требовать открытых глаз” там, где она имеется.

Где дополнительно находится применение технологии кроме мобильных телефонов?

Пускай предмет нашей статьи касается именно портативным гаджетам, стоит упомянуть о прочих направлениях внедрения технологии:

• Контроль прохода в офисах и жилых домах;
• Платёжные терминалы банков (“Face Pay”);
• Цифровые паспорта нового типа;
• Установки видеонаблюдения городских сервисов;
• Автоматизация учёта явки учебных заведений/вузов;
• Вход пользователей компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система платежа проезда по лицу (“Face Pay”) — достаточно пройти через барьер без карты или телефона! Аналогичные проекты реализуются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом меняется техпроцесс в нынешнее время?

Каждый годочек проявляются новые идеи для улучшения качества функционирования систем идентификации лиц:

1. Увеличивается разрешение датчиков — чем больше информации фиксируется фотоаппаратом/глубинными сенсорами, тем меньше шанс неточности;
2. Развиваются нейронные сети — современные архитектуры вида MobileNetV3 позволяют быстро обучаться свежим чертам внешности пользователя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Развиваются технологии антиспуфинга — теперь мобильные устройства умеют отличать подлинные живые лица от статичных фотографий/маскировок по мельчайшим движениям кожи.
4. Взаимодействие со смарт-гаджетами — интеллектуальные часы могут автоматически закрыть доступ к телефон, если пользователь отошёл далеко.
5. Возникают комбинированные системы — в частности комбинирующие голосовую идентификацию + лицо + отпечаток пальца.

Итак, те тренды в особенности востребованы на сегодняшний день:

1) Уменьшение деталей

Компании намереваются минимизировать величину прорези (“чёлки”) под датчики на экране за счёт встраивания миниатюрных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для повышения конфиденциальности всё больше расчётов осуществляется на месте без передачи данных во дополнительный облачный сервис.

3) Упорядочивание стандартов

Гугл интенсивно пропагандирует стандарт BiometricPrompt API, для того чтобы подобные системы, вроде Spinto, и все Android-программы могли взаимодействовать с всеми формами биометрии унифицированно.

Какое подобрать сегодня?

Если тебе нужна наивысшая безопасность данных, выбирайте топовые устройства с интегрированным ИК-излучателем либо ToF-сенсором глубины.

• iPhone всех последних моделей
• Huawei Mate/Series P линейки
• Mi Professional
• Vivo X модели
• Оппо Найти Икс линейки.

Если финансы скромен – лучше отдавать предпочтение обычным способам безопасности (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в Spinto, применять только как второстепенную опцию удобства.

Как увеличить комфорт работы возможности?

Есть некоторые хитростей для тех, кто уже использует разблокировку по лицу:

1. Часто обновляйте свою изображение-шаблон, если значительно меняется внешний вид.
2. Не пренебрегайте очищать линзу передней камеры – разводы могут уменьшить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам включает фотоаппарат когда вы берёте его в руки.
4. При регистрации старайтесь держать голову прямо впереди камеры без резкого наклона головы.
5. Используйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отвернулись от экрана.

Возможности эволюции техники

В предстоящие времена можно ожидать развития полностью безконтактных способов опознания человека сразу по нескольким биометрическим данным параметрам одновременно: облик + речь + шаги + движения рук!

Также предполагается развитие современных подходов охраны конфиденциальности – например, переменное модификация цифрового паттерна после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень увлекательных технологий нашего времени! Она предоставляет общение со смартфоном комфортнее чем раньше, и такие приложения, как Спинто казино, могут значительно повысить ваш юзерский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы знаете, как функционирует эта методика в деталях, – сумеете осознаннее выбирать свой будущий устройство!