Каким образом работает распознавание лиц в телефонах

Для чего мы останавливаемся на разлочивание по лицевому распознаванию

В недавние годы определение лиц превратилось в одной из самых популярных возможностей для открытия смартфонов. Еще некоторые лет тому назад основная масса пользователей обходились пин-кодами, паролями или сканерами отпечатков пальцев. Но при появлением таких технологий, например Spinto, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь превращает эту конкретную возможность такой востребованной? Во-первых, это комфортно: не нужно запоминать сложные пароли или отыскивать нужный палец в темноте. Во-вторых, это мгновенно: современные системы идентифицируют лицо буквально за мгновение. В-третью очередь, это ощущение футуристичности — будто в кинолентах про казино спинто разведчиков.

Впрочем за этой кажущейся простотой скрывается полный вселенная трудных технологий и инженерных концепций. Давайте понять, как конкретно действует фейсканирование в актуальных гаджетах, какие применяются способы, насколько они безопасны и что нас ожидает в будущем.

Сжатая история эволюции инноваций

Распознавание лиц как техника присутствует уже более пятидесяти лет. Начальные попытки машинного исследования лица были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда ЭВМ умели лишь определять очертания лица и определять дистанции между глазами и ртом на ахроматических снимках.

Начальные торговые платформы возникли в 90-х, но они были неидеальны: функционировали медленно и часто ошибались. Только с развитием искусственных сетей и таких систем, как Спинто, сильных мобильных чипов идентификация лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали интегрировать свои разработки.

Основные этапы действия механизма распознавания

Процесс распознавания лица можно ориентировочно сегментировать на несколько ключевых этапов:

Обнаружение лиц — камера определяет существование людского лица в изображении.
Извлечение особенностей — система исследует контуры облика: конфигурацию глаз, носа, уст, позицию бровей.
Построение структуры — создаётся неповторимый виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с стандартом — созданный шаблон сопоставляется со сохранённой при регистрации биометрической данными владельца.
Принятие определения — если сходство достаточно высокое, смартфон разблокируется.

Каждый из указанных шагов требует особых методов и усовершенствований для оперативной работы непосредственно на девайсе.

Железные компоненты: что находится в их недрах

Типичная селфи камера.

Самый простой легкий метод идентификации лица применяет лишь лицевую камеру смартфона мобильного устройства. Такой способ внедрён во различных недорогих версиях Android-девайсов.

Плюсы:

Необходимо нуждается в дополнительные датчиков.
Быстро действует при достаточном освещённости.

Минусы:

Просто одурачить изображением или роликом.
Неправильно функционирует при слабом освещённости или непривычных точках зрения.

Инфракрасная фотокамера и точечный проектор

Более усовершенствованные системы, такие как Спинто, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология лежит в основе Face ID от Apple.

Каким образом это действует:

Точечный проектор показывает на облик юзера невидимую структуру из тысяч инфракрасных меток (например, Face ID задействует около 30 000 меток).
ИК устройство фиксирует искривление этой сетки по поверхности физиономии.
Получается 3D карта глубины глубины, что практически невозможна для фальсификации стандартной снимком или маскировкой.

Достоинства

Надёжная работа даже в полной темноте.
Большая сопротивляемость к фальсификациям.
Точность идентификации более 99%.

Дополнительные датчики

В некоторых устройствах применяются также дополнительные датчики: ToF (Time-of-Flight), которые фиксируют период движения света до предмета и обратно; RGB-датчики дальности; специальные лазерные лидары для формирования более аккуратной 3D-модели физиономии.

Эти технологии встречаются чаще всего во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: синтетический разум на действии

Нынешние механизмы идентификации лиц неосуществимы без применения ИИ и машинного обучения. Именно вследствие таким инновациям, как Спинто, аппарат способно распознавать владельца даже при трансформациях внешнего вида: новая причёска, растительность на лице, оптика или макияж не становятся препятствием для разблокировки.

Детектирование лица

При первом шаге алгоритм обязана мгновенно распознать ликовое изображение среди всего изображения с камеры. Для данной цели задействуются каскадные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые натренированы находить лица людей среди множества других объектов.

Пример: процесс MTCNN в состоянии распознавать облик даже при частичном перекрытии (например, шарфом или ладонью).

Выделение важных аспектов

После идентификации лица устройство, такая как Спинто, определяет местоположение основных точек: кончики глаз, кончик носа, границы губ и так далее. Обычно используется от 68 до 128 ключевых точек на лицевой поверхности.

Это требуется для выравнивания картинки: если человек держит мобильник под углом, или склонил голову, программа корректирует изображение до нормального состояния для дальнейшего анализа.

Создание биометрии шаблона

Далее нейронная сеть строит уплотненное математическое представление («эмбеддинг») внешности пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Такой формат крайне затруднительно сфальсифицировать: он не хранит само фото пользователя, а лишь особенные особенности его внешности, что делает его совершенным для таких платформ, как Спинто казино.

Сопоставление и принятие выбора

Если юзер хочет разблокировать смартфон глазами, механизм повторяет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный границу (обычно превышает 99%), телефон, как и платформа Спинто казино, разблокируется; если нет — доступ блокируется.

Привыкание к метаморфозам облика

Занимательная характеристика нынешних систем — возможность самообучения. Если ты постоянно разблокируете мобильное устройство с свежей укладкой или оптикой, алгоритм постепенно обновляет основной модель вашего лица для увеличения точности действия без снижения уровня безопасности.

Защита биометрических данных информации.

Многие юзеры боятся хранить свои биометрические идентификационные данные на смартфоне из-за риска утечки информации или взлома устройства. Некоторые фирмы, такие как Спинто казино, предлагают варианты для повышения сохранности сведений юзеров.

Локальное хранение: Большинство устройств хранит био-идентификационные образцы только внутрь защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не оставляют аппарат и не доступны даже изготовителю.
Шифрование: Все сведения сохраняются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция программ: Программы внешних разработчиков не имеют непосредственного доступа к биометрическим; они могут лишь запрашивать факт верификации личности через системный API.

Необходимо упомянуть важную деталь: в случае, если кто-то сможет получить доступ к вашему телефону физически (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители осуществляют защиту от «слепого» разблокирования — например, заставляют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие имеются виды определения лиц?

Сегодня можно выделить три ключевых подхода к выполнению этой задачи:

Программируемое плоское идентификация

Эксплуатируется только фронтальная видеокамера без экстра детекторов дистанции. Такой подход встречается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность осуществления; минимальная затраты; оперативная деятельность при качественном освещении.
Минусы: легко одурачить фотографией; нестабильная функционирование ночью; низкая безопасность.

Оборудование для 3D оцифровка

Применяет инфракрасную камеру + проекционный модуль пикселей + датчики дистанции (Face ID от Apple; подобные решения у Huawei Mate).
Преимущества: большая надежность; нельзя подделать фото/видео; устойчивая функционирование при любом освещении.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана («чёлка»)

Смешанные подходы с дополнением ИИ

Задействуют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для усиления устойчивости к атакам («anti-spoofing»). Например, подобные продукты, как Спинто и Google Pixel Face Unlock последних версий, сочетают фронтальную камеру c ИК датчиком мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Примеры эксплуатации различных способов

iPhone серии X/11/12/13/14 используют только техническое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition первый раз представил эквивалент Face ID в числе Android.
Samsung Galaxy S10 модель/S20 поддерживают как программное обеспечение 2D определение по снимку селфи-камерой, так и датчик глазного ириса.
Huawei Mate20 Pro использует набор из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Трудности безопасности и ложные тревоги

Несмотря на впечатляющий успехи инноваций за недавние лет, совершенных системы пока не существует:

Шанс мошенничества: Доступные мобильники просто доступны качественной снимком хозяина либо роликом с экрана другого устройства.
Идентичные близнецы: Даже самые идеальные устройства могут ошибиться между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
Изменения внешности: Стремительное утрата веса/набор веса, косметические процедуры или повреждения иногда требуют повторной регистрации биометрии.
Условия записи: Сильная подсветка солнечным светом или же интенсивная затенение могут снизить точность идентификации признаков.

Здесь некоторые подсказок по безопасному использованию:

Для значимых операций всегда применяйте двухфакторную аутентификацию;
Не запускайте опцию «Разблокировка по лицу» на бюджетных аппаратах без ИК-сенсоров;
Регулярно обновляйте прошивку ПО телефона для обеспечения безопасности от новых видов атак;
Включайте функцию «Требовать открытых глаз» там, где она есть.

В каких местах также применяется технология за исключением мобильных телефонов?

Хотя основная мысль этой работы касается конкретно портативным гаджетам, стоит упомянуть о других сферах применения технологии:

Управление доступа в рабочих помещениях и жилых домах;
Платёжные терминалы финансовых учреждений («Face Pay»);
Электронные идентификационные документы последнего типа;
Комплексы видеонаблюдения городских сервисов;
Механизация учёта явки школ/университетов;
Вход пользователей ПК/ноутбуков.

Например: В московском метро уже проверяется система платежа проезда по лицу («Face Pay») — достаточно пройти через барьер без карты или мобильника! Аналогичные программы развиваются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как трансформируется технология сегодня?

Всякий годик проявляются свежие мысли для повышения стандарта деятельности систем лицевого распознавания:

Увеличивается детализация сенсорных устройств — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше шанс ошибки;
Совершенствуются искусственные интеллекты — современные конструкции вида MobileNetV3 обеспечивают возможность скоростно осваивать свежим характеристикам внешности обладателя непосредственно на девайсе без отправки данных в облако.
Совершенствуются способы антиспуфинга — теперь мобильные устройства способны отличать реальные движущиеся лица от неподвижных снимков/маскировок по мельчайшим движениям кожи.
Синхронизация со умными устройствами — интеллектуальные часы могут автоматически заблокировать мобильный телефон, если обладатель ушёл далеко.
Проявляются гибридные механизмы — например объединяющие речевую идентификацию + физиономию + дактилоскопический след.

Итак, которые направления очень популярны сейчас:

1) Уменьшение деталей

Изготовители намереваются минимизировать габариты прорези («чёлки») для сенсоры на дисплее за счёт встраивания маленьких ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для улучшения конфиденциальности всё больше расчётов выполняется локально без отправки информации во дополнительный облачный услугу.

3) Стандартизация норм

Гугл интенсивно продвигает эталон BiometricPrompt API, чтобы такие площадки, вроде Spinto, и каждые Android-аппы могли взаимодействовать с различными типами биометрии стандартизированно.

Какое выбрать на сегодня?

В случае если вам всем нужна максимальная сохранность данных, остановите выбор на флагманские аппараты с вмонтированным ИК-проектором либо ToF-датчиком глубины.

iPhone всех последних моделей
Huawei Partner/P ряда
Xiaomi Pro
Vivo X линейки
Oppo Найти Икс серии.

Если средства невелик – лучше выбирать классическим способам безопасности (PIN-код/сканер отпечатка), а функцию «разблокировка по лицу», такую как в Spinto, использовать только как второстепенную возможность удобства.

Как увеличить удобство функционирования опции?

Есть пара советов для людей, кто уже использует разблокировку через лицо:

Часто обновляйте свою изображение-шаблон, если сильно трансформируется внешний вид.
Не пренебрегайте протирать объектив передней камеры – загрязнения могут уменьшить четкость!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам запускает камеру когда вы берёте его в руки.
В процессе регистрационного процесса старайтесь сохранять лицевую часть прямо перед камеры не допуская сильного наклона головы.
Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отвернулись от дисплея.

Будущее развития технологии

В ближайшие периоды можно ожидать возникновения полностью безконтактных способов распознавания индивидуума сразу по нескольким биометрическим параметрам одновременно: облик + голос + манера ходьбы + движения рук!

Также возможно развитие новых подходов обеспечения личной информации – например, изменяющееся модификация электронного паттерна после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых увлекательных техник нашего периода! Она предоставляет общение со телефоном удобнее чем до этого, и такие программы, как Спинто казино, могут в разы оптимизировать ваш пользовательский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы знаете, как устроена эта методика внутри, – сможете более осмысленно подбирать свой следующий устройство!