Rastrear lo que no se puede ver

A lo largo de mis años de trabajo en el seguimiento de rostros, he observado una superstición entre los ingenieros e investigadores de que no se pueden seguir los puntos de referencia faciales (rasgos como las cejas, los ojos y la boca) cuando caen fuera de la vista de la cámara. Esta creencia no es del todo cierta. No hace falta ver una ceja para saber si se levanta o se frunce, y no hace falta ver la nariz para saber cuándo se arruga.

Nuestros rostros se abultan, estiran y arrugan de manera única con cada acción facial. He usado estos cambios para entrenar a los etiquetadores a reconocer y clasificar con precisión las expresiones discretas del movimiento de la piel solamente. Con una documentación bien dirigida, un conjunto completo de ejemplos y una cámara de alta calidad, se pueden extrapolar los límites de la información con un FOV limitado.

El mínimo FOV requerido para el seguimiento de los ojos es a menudo suficiente para rastrear un puñado de acciones. La vista A (en la imagen que se muestra a continuación) es la que mejor refleja cómo puede ser la vista de un rastreador basado en la mirada. Aunque el objetivo principal de las cámaras de seguimiento ocular es cubrir lo suficiente del ojo para observar los cambios de la mirada, su potencial es mucho mayor. Incluso con esta vista concentrada, todavía se puede detectar elevador de la tapa superior (AU5), levantador de mejillas (AU6), y Tapa de cierre (AU7) con un grado de certeza relativamente alto. Estas acciones son útiles por sus aplicaciones en la medición de la atención, las reacciones y el compromiso; también son señales cruciales en la comunicación.

Mucha gente se bloquea con nombres de unidades de acción como levantador de mejillas y asumir, "No podemos rastrear levantador de mejillas ...porque nuestro FOV no cubre el área de la mejilla". Pero levantador de mejillas es más de lo que su nombre revela; es una acción causada por la contracción del orbicular de los ojos, un músculo que rodea la zona del ojo. Aunque los movimientos del orbicularis oculi repercuten en las mejillas, muchos cambios se producen en realidad en la zona de la cuenca del ojo. Siempre que tenga una visión marginal de las esquinas de los ojos o un trozo de piel bajo el párpado inferior, podrá determinar si levantador de mejillas está ocurriendo. Conceptos similares se aplican a las otras acciones que he enumerado en las imágenes de abajo. 

Capacidades con diferentes FOVs

Este gráfico muestra qué unidades de acción (UA) son posibles de detectar con varios campos de visión. Tenga en cuenta que esto es un desglose abreviado de lo que puede o no puede ser posible con diferentes FOVs. (Si desea aprender acerca de las predicciones para la cara inferior y las formas de combinación, Estoy disponible para consultas.) Las condiciones cambiarán en función de otros factores, como el ángulo de la cámara y la forma en que los auriculares se apoyan en la cara. (¿Pesan los auriculares? ¿Cómo afecta su peso y presión a las distintas zonas de la cara?) 

Si estás trabajando en el rastreo facial con auriculares, no dejes que las suposiciones limiten tu potencial. La cara es complicada y está llena de pistas. Todo lo que necesitas es encontrar las pistas correctas, y puedes lograr mucho con poco.