Seguimiento de lo que no se ve

A lo largo de mis años de trabajo en el seguimiento de rostros, he observado una superstición entre los ingenieros e investigadores de que no se pueden seguir los puntos de referencia faciales (rasgos como las cejas, los ojos y la boca) cuando caen fuera de la vista de la cámara. Esta creencia no es del todo cierta. No hace falta ver una ceja para saber si se levanta o se frunce, y no hace falta ver la nariz para saber cuándo se arruga.

Nuestros rostros se abultan, se estiran y se arrugan de forma única con cada acción facial. He utilizado estos cambios para entrenar a los etiquetadores para que reconozcan y clasifiquen con precisión expresiones discretas a partir del movimiento de la piel únicamente. Con una documentación bien dirigida, un amplio conjunto de ejemplos y una cámara de alta calidad, se pueden extrapolar límites de información con un FOV limitado.

El mínimo FOV requerido para el seguimiento de la mirada es a menudo suficiente para seguir un puñado de acciones. La vista A (en el conjunto de imágenes de abajo) es la que más refleja el aspecto que puede tener una vista de seguimiento de la mirada. Aunque el objetivo principal de las cámaras de seguimiento ocular es cubrir lo suficiente del ojo para observar los cambios en la mirada, su potencial es mucho mayor. Incluso con esta vista concentrada, se puede detectar elevador de la tapa superior (AU5), levantador de mejillas (AU6), y Tapa de cierre (AU7) con un grado de certeza relativamente alto. Estas acciones son útiles por sus aplicaciones en la medición de la atención, las reacciones y el compromiso; también son señales cruciales en la comunicación.

Muchas personas se bloquean por nombres de unidades de acción como levantador de mejillas y asumir, "No podemos rastrear levantador de mejillas porque nuestro FOV no cubre la zona de las mejillas". Pero levantador de mejillas es más de lo que su nombre revela; es una acción causada por la contracción del orbicular de los ojos, un músculo que rodea la zona del ojo. Aunque los movimientos del orbicularis oculi repercuten en las mejillas, muchos cambios se producen en realidad en la zona de la cuenca del ojo. Siempre que tenga una visión marginal de las esquinas de los ojos o un trozo de piel bajo el párpado inferior, podrá determinar si levantador de mejillas se está produciendo. Conceptos similares se aplican a las otras acciones que he enumerado en las imágenes siguientes. 

Capacidades con diferentes FOVs

Este gráfico muestra qué unidades de acción (UA) son posibles de detectar con distintos campos de visión. Tenga en cuenta que esto es un desglose abreviado de lo que puede o no puede ser posible con diferentes FOVs. (Si desea aprender acerca de las predicciones para la cara inferior y las formas de combinación, Estoy disponible para consultas.) Las condiciones cambiarán en función de otros factores, como el ángulo de la cámara y la forma en que los auriculares se apoyan en la cara. (¿Pesan los auriculares? ¿Cómo afecta su peso y presión a las distintas zonas de la cara?) 

Si está trabajando en el seguimiento facial en la cabeza, no deje que las suposiciones limiten su potencial. La cara es complicada y está llena de pistas. Todo lo que tienes que hacer es encontrar las pistas correctas, y puedes lograr mucho a partir de poco.