Отслеживая то, что ты не можешь увидеть

На протяжении многих лет работы в области отслеживания лиц я наблюдал суеверие среди инженеров и исследователей, что невозможно отследить ориентиры лица (такие черты, как брови, глаза и рот), если они находятся вне поля зрения камеры. Это убеждение не совсем верно. Вам не нужно видеть брови, чтобы знать, поднимаются они или нахмуриваются, и вам не нужно видеть нос, чтобы знать, когда он морщится.

Наши лица выпячиваются, растягиваются и морщинки уникальным образом с каждым действием на лицо. Я использовала эти изменения, чтобы обучить этикетировщиков распознавать и точно классифицировать дискретные выражения от одного только движения кожи. С помощью хорошо ориентированной документации, исчерпывающего набора примеров и высококачественной камеры вы можете экстраполировать границы информации с помощью ограниченного FOV.

Минимальное количество FOV, необходимое для отслеживания глаз, достаточно часто для отслеживания нескольких действий. Вид A (на изображении ниже) наиболее полно отражает то, как может выглядеть взгляд трекера. Несмотря на то, что основной целью камер слежения за глазами является прикрытие только достаточного количества глаз, чтобы наблюдать за изменениями в взгляде, их потенциал намного больше. Даже при таком концентрированном взгляде, вы все равно можете обнаружить. райзер верхней крышки (AU5), подтяжка щек (AU6), и затягиватель крышек (AU7) с относительно высокой степенью уверенности. Эти действия полезны для применения в измерении внимания, реакции и вовлеченности; они также являются важнейшими сигналами в коммуникации.

Многих людей блокируют такие имена боевиков, как подтяжка щек и предположить: "Мы не можем отследить подтяжка щек потому что наше ФОВ не покрывает область щек". Но подтяжка щек это нечто большее, чем следует из названия; это действие, вызванное сокращением круговой мышцы глаза, мышцы, окружающей область глаз. Хотя движения круговой мышцы влияют на щеки, многие изменения происходят в области глазниц. Если у вас есть краевой обзор уголков глаз или кусочек кожи под нижним веком, вы можете определить, является ли подтяжка щек происходит. Аналогичные понятия применимы и к другим действиям, перечисленным мной на рисунках ниже. 

Возможности с различными FOV

На этой диаграмме показано, какие единицы действия (АЕ) можно обнаружить с различными полями зрения. Помните, что это сокращенное описание того, что может быть или не быть возможным при различных FOV. (Если вы хотите узнать о прогнозах для более низких форм лица и комбинированных форм, Я доступен для консультаций.) Условия будут меняться в зависимости от дополнительных факторов, таких как угол наклона камеры и положение гарнитуры на лице. (Тяжелая ли гарнитура? Как ее вес и давление влияют на различные участки лица?) 

Если вы работаете над отслеживанием лиц в гарнитуре, не позволяйте предположениям ограничивать ваш потенциал. Лицо сложное и полное подсказок. Все, что вам нужно сделать, это найти правильные улики, и вы можете достичь многого с малого.