Seguimiento de lo que no se ve

A lo largo de mis años de trabajo en seguimiento facial, he observado una superstición entre ingenieros e investigadores según la cual no se pueden seguir los puntos de referencia faciales (rasgos como las cejas, los ojos y la boca) cuando quedan fuera de la vista de la cámara. Esta creencia no es del todo cierta. No hace falta ver una ceja para saber si se levanta o se frunce, ni la nariz para saber si se arruga.

Nuestros rostros se abomban, estiran y arrugan de forma única con cada acción facial. He utilizado estos cambios para entrenar etiquetadores que reconozcan y clasifiquen con precisión expresiones discretas a partir únicamente del movimiento de la piel. Con una documentación bien dirigida, un amplio conjunto de ejemplos y una cámara de alta calidad, se pueden extrapolar límites de información con un FOV limitado.

El FOV mínimo necesario para el seguimiento ocular suele ser suficiente para seguir un puñado de acciones. La vista A (en el conjunto de imágenes inferior) es la que mejor refleja el aspecto que puede tener una vista de seguimiento basada en la mirada. Aunque el objetivo principal de las cámaras de seguimiento ocular es cubrir lo suficiente del ojo para observar los cambios en la mirada, su potencial es mucho mayor. Incluso con esta vista concentrada, se pueden detectar elevador del párpado superior (AU5), levantador de mejillas (AU6), y tensor de tapa (AU7) con un grado de certeza relativamente alto. Estas acciones son útiles por sus aplicaciones en la medición de la atención, las reacciones y el compromiso; también son señales cruciales en la comunicación.

Muchas personas se bloquean por nombres de unidades de acción como levantador de mejillas y asumir, "No podemos rastrear levantador de mejillas porque nuestro FOV no cubre la zona de las mejillas". Pero levantador de mejillas es más de lo que revela su nombre; es una acción provocada por la contracción del orbicular de los ojos, un músculo que rodea la zona ocular. Aunque los movimientos del orbicular afectan a las mejillas, en realidad se producen muchos cambios en la zona de la cuenca del ojo. Siempre que tenga una visión marginal de las comisuras de los ojos o un trozo de piel bajo el párpado inferior, podrá determinar si levantador de mejillas está ocurriendo. Conceptos similares se aplican a las otras acciones que he enumerado en las imágenes siguientes. 

Capacidades con distintos FOV

Este gráfico muestra qué unidades de acción (UA) es posible detectar con distintos campos de visión. Tenga en cuenta que esto es un desglose abreviado de lo que puede o no puede ser posible con diferentes FOVs. (Si desea aprender acerca de las predicciones para la cara inferior y formas combinadas, Estoy disponible para consultas.) Las condiciones cambiarán en función de factores adicionales como el ángulo de la cámara y la forma en que los auriculares se apoyan en la cara. (¿Pesan mucho los auriculares? ¿Cómo afectan su peso y presión a las distintas zonas de la cara?). 

Si está trabajando en el seguimiento facial en la cabeza, no deje que las suposiciones limiten su potencial. La cara es complicada y está llena de pistas. Todo lo que tienes que hacer es encontrar las pistas adecuadas, y podrás conseguir mucho con poco.