Каким способом действует определение лиц в смартфонах

Зачем мы останавливаемся на разблокирование по лицевому распознаванию

В последние времена распознавание физиономий превратилось в одной из самых распространённых возможностей для разблокировки смартфонов. Еще некоторые годков тому назад основная масса пользователей обходились PIN-кодами, паролями или датчиками отпечатков пальцев. Но с появлением таких технологий, например Spinto, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь обуславливает эту возможность очень нужной? Для начала, это удобно: не нужно удерживать в памяти замысловатые пароли или отыскивать нужный палец в тьме. Во-вторых, это мгновенно: современные программы распознают лицо буквально за доли секунды. В-третью очередь, это ощущение футуристичности — как будто в кинофильмах про казино спинто шпионов.

Тем не менее за этой на первый взгляд легкостью таится целый мир сложных методов и инженерных концепций. Попробуем понять, как именно функционирует идентификация по лицу в современных мобильных телефонах, какие бывают способы, насколько они безопасны и что нас предстоит.

Короткая повествование прогресса технологии

Идентификация лиц как технология имеется уже более пятидесяти годов. Первые эксперименты машинного изучения лиц были осуществлены еще в 1960-х годах в научных учреждениях США. Тогда вычислительные машины способны были лишь обозначать силуэты черепа и определять дистанции между глазами и губами на черно-белых фотографиях.

Изначальные коммерческие установки возникли в 90-х, но они были неидеальны: действовали неспешно и часто давали сбои. Только с развитием искусственных сетей и таких систем, как Спинто, мощных мобильных микросхем распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным идентификацией лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять личные разработки.

Основные этапы работы системы определения

Процесс распознавания лица можно ориентировочно сегментировать на несколько важных этапов:

Идентификация лиц — камера выявляет существование человеческого образа в изображении.
Определение характеристик — механизм исследует черты физиономии: форму глаз, носа, уст, расположение бровей.
Построение структуры — создаётся особенный виртуальный отпечаток (faceprint) на основе выделенных признаков.
Сравнение со эталоном — созданный образец сравнивается со зафиксированной при внесении биометрической сведениями владельца.
Принятие определения — если соответствие достаточно существенное, смартфон открывается.

Всякий из данных этапов требует специальных методов и усовершенствований для скорой работы непосредственно на девайсе.

Железные элементы: что скрыто в их недрах

Обычная фронтальная камера.

Наиболее простой метод определения облика задействует исключительно переднюю видеокамеру мобильного устройства. Данный подход внедрён во различных бюджетных моделях Android-девайсов.

Достоинства:

Необходимо требует дополнительные сенсоров.
Быстро работает при качественном освещении.

Слабые стороны:

Просто ввести в заблуждение снимком или роликом.
Плохо работает при слабом освещении или непривычных точках зрения.

Инфракрасная камера и пунктирный проектор

Более продвинутые системы, такие как Спинто, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология является основой Face ID от Apple.

Каким способом это работает:

Точечный проекционный прибор показывает на лицо юзера невидимую структуру из тысяч инфракрасных точек (например, Face ID использует около 30 000 меток).
Инфракрасная устройство регистрирует изменение формы данной сетки по поверхности лица.
Формируется трёхмерная карта глубинности, что практически неподвластна для фальсификации обычной фото или маской.

Преимущества

Надёжная деятельность даже в полной неосвещённости.
Высокая устойчивость к подделкам.
Точность определения более 99%.

Дополнительные сенсорные устройства

В некоторых устройствах задействуются также экстра сенсоры: ToF (Time-of-Flight), которые фиксируют период движения света до предмета и обратно; Трехцветные-датчики дальности; специальные световые лидары для создания более детализированной 3D-модели физиономии.

Эти технологии встречаются наиболее часто во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искусственный разум в действии

Нынешние механизмы идентификации физиономий неосуществимы при отсутствии использования ИИ и машинного обучения. Именно благодаря таким инновациям, как Спинто, гаджет может идентифицировать юзера даже при трансформациях внешности: новая стрижка, борода, оптика или косметика не становятся барьером для открытия.

Детектирование лица

На стартовом этапе система обязана оперативно обнаружить лицо в пределах целого изображения камеры. Для этой задачи используются многоуровневые классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые натренированы распознавать лиц человека среди множества других объектов.

Пример: процесс MTCNN в состоянии обнаруживать физиономию даже с частичном перекрытии (например, платком или рукой).

Определение важных аспектов

После распознавания лица устройство, такая как Спинто, устанавливает местоположение ключевых точек: кончики глаз, верхушка носа, границы губ и так далее. Обычно задействуется от 68 до 128 ключевых маркеров на лицевой поверхности.

Это требуется для стабилизации изображения: если человек удерживает мобильник под наклоном, или повернул голову, программа корректирует картинку до обычного угла для последующего изучения.

Создание биометрии образца

Далее искусственная сеть строит сжатое числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ лица длиной от 128 до 512 чисел с плавающей запятой.

Данный шаблон крайне затруднительно имитировать: он не хранит само фото юзера, а лишь особенные особенности его облика, что делает его оптимальным для таких платформ, как Спинто казино.

Сравнительный анализ и принятие выбора

В случае, когда юзер желает разлочить телефон глазами, программа воспроизводит все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный порог (обычно превышает 99%), телефон, как и платформа Спинто казино, открывается; если нет — доступ не предоставляется.

Приспособление к изменениям облика

Увлекательная черта нынешних систем — способность самообучения. Если вы часто разблокируете мобильное устройство с обновленной прической или очками, система постепенно освежает основной шаблон вашего внешности для улучшения точности функционирования без ухудшения безопасности.

Защита биометрических информации.

Большинство клиенты боятся держать свои био-идентификационные данные на телефоне из-за риска потери данных или хакерской атаки. Иные фирмы, такие как Спинто казино, предлагают решения для улучшения защиты сведений клиентов.

Локальное сбережение: Преимущественно устройств хранит био-идентификационные шаблоны лишь внутри защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они всегда не оставляют аппарат и закрыты в том числе изготовителю.
Шифрование: Все информация сберегаются только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция приложений: Приложения третьих девелоперов не обладают прямого доступа к биометрическим данным; они могут лишь запрашивать подтверждение подтверждения идентичности через системный API.

Необходимо подчеркнуть существенную подробность: в случае, если кто-то достанет доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители осуществляют меры безопасности от автоматического разблокирования — к примеру, требуют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются виды идентификации лиц на изображениях?

На сегодняшний день можно определить различить три главных метода к осуществлению этой задачи:

Программируемое 2D определение

Применяется только лицевая видеокамера без вспомогательных детекторов дистанции. Такой метод используется чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность осуществления; низкая затраты; быстрая работа при хорошем освещении.
Минусы: легко одурачить снимком; нестабильная деятельность ночью; низкая безопасность.

Аппаратное трёхмерное оцифровка

Задействует ИК камеру + проекционный модуль точек + датчики дистанции (Face ID у Apple; аналогичные решения у Huawei Mate).
Достоинства: высокая достоверность; нельзя исказить фото/видео; постоянная работа при любом освещении.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с ИИ-дополнением

Задействуют комбинацию программируемых методов + техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как Спинто и Google Pixel Face Unlock последних поколений, объединяют фронтальную камеру c инфракрасным сенсором мобильности Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями посторонних устройств.

Иллюстрации применения разнообразных способов

iPhone линейки X/11/12/13/14 используют только аппаратное трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition в первый раз внедрил подобие Face ID среди Android.
Samsung Galaxy S10/S20 поддерживают как софтверное 2D определение по снимку селфи-камерой, так и сенсор ириса глаза.
Huawei Mate20 Pro использует комплекс из ИК-инфракрасного света + Dot Projector + ToF-датчик

Вопросы защиты и неверные сигналы

Несмотря на впечатляющий развитие техники за последние годы, безупречных механизмов пока не существует:

Возможность обмана: Бюджетные мобильники легко доступны высококачественной фотографией пользователя либо видеозаписью с экрана другого устройства.
Идентичные близнецы: Даже самые совершенные устройства могут ошибиться между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
Метаморфозы облика: Резкое похудение/увеличение массы тела, косметические процедуры или травмы в некоторых случаях требуют перерегистрации биометрии.
Условия записи: Интенсивная освещённость солнечным светом либо интенсивная темнота могут уменьшить верность идентификации признаков.

Вот несколько рекомендаций по защищённому использованию:

Для значимых операций всегда внедряйте двухэтапную аутентификацию;
Не активируйте опцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
Систематически обновляйте прошивку программное обеспечение мобильного устройства для предотвращения угроз от современных угроз;
Включайте настройку “Требовать раскрытых глаз” везде, где она есть.

В каких областях дополнительно используется технология помимо смартфонов?

Несмотря на то, что основная мысль данной работы касается конкретно портативным гаджетам, следует отметить прочих направлениях внедрения технологии:

Управление доступа в деловых центрах и резиденциях;
Платёжные устройства финансовых учреждений (“Face Pay”);
Цифровые паспорта последнего образца;
Системы видеонаблюдения городских сервисов;
Механизация регистрации присутствия образовательных учреждений/университетов;
Аутентификация пользователей персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без карты или телефона! Аналогичные инициативы осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом изменяется техпроцесс в наше время?

Любой годик появляются свежие мысли для усовершенствования уровня функционирования систем лицевого распознавания:

Увеличивается разрешение сенсорных устройств — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность погрешности;
Совершенствуются искусственные интеллекты — новейшие архитектуры модели MobileNetV3 позволяют быстро адаптироваться к дополнительным особенностям внешности обладателя напрямую на гаджете без пересылки информации в облачное хранилище.
Развиваются способы антиспуфинга — теперь мобильные устройства умеют различать подлинные движущиеся лица от фиксированных фото/маскировок по незаметным движениям кожи.
Синхронизация со умными устройствами — смарт-часы могут самостоятельно закрыть доступ к телефон, если пользователь отошёл далеко.
Проявляются гибридные механизмы — в частности объединяющие голосовую опознание + физиономию + отпечаток пальца.

Итак, которые направления в особенности актуальны сейчас:

1) Миниатюризация элементов

Изготовители стараются сократить габариты выреза (“чёлки”) для сенсоры на экране за счёт внедрения маленьких ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на девайсе

Для увеличения приватности всё больше вычислений осуществляется внутри устройства без пересылки данных во дополнительный облачный услугу.

3) Упорядочивание норм

Google активно продвигает стандарт BiometricPrompt API, для того чтобы аналогичные платформы, вроде Spinto, и все Android-аппы были совместимы с всеми формами биометрии единообразно.

Что выбрать сегодня?

В случае если тебе необходима предельная сохранность данных, остановите выбор на топовые устройства с вмонтированным ИК-проектором либо ToF-датчиком глубины.

iPhone каждого актуальных моделей
Huawei Mate/P серии
Mi Pro
Vivo X линейки
Oppo Find X серии.

Если бюджет невелик – лучше отдавать предпочтение обычным способам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в Spinto, применять только как опциональную возможность комфорта.

Каким способом улучшить комфорт работы возможности?

Есть некоторые советов для пользователей, кто уже применяет разблокировку по лицу:

Периодически обновляйте свою фотографию-шаблон, если кардинально изменяется облик.
Не забывайте чистить объектив фронтальной камеры – разводы могут снизить точность!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам активирует камеру когда вы поднимаете его.
При записи пытайтесь удерживать лицевую часть ровно впереди объектива исключая значительного наклона головы.
Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отворачиваетесь от экрана.

Будущее развития техники

В ближайшие периоды можно ожидать возникновения полностью бесконтактных способов распознавания персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + звучание + манера ходьбы + манипуляции руками!

Также предполагается развитие новых способов обеспечения конфиденциальности – например, изменяющееся модификация электронного паттерна после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее захватывающих техник нашего периода! Она обеспечивает общение со телефоном проще чем до этого, и такие аппы, как Спинто казино, могут значительно улучшить ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы осведомлены, как работает эта методика внутри, – сумеете вдумчиво определять свой будущий гаджет!