Captures d'expressions faciales posées

femme faisant des expressions faciales : heureuse, sourire bizarre, bouche triste, visage incliné
Exemples de saisie d'images dans le cadre d'un projet de données de capture faciale pour lequel j'ai été consulté.


Comment augmenter la qualité de l'expression posée :
 Expression posée caes systèmes d'images sont de plus en plus populaires. Bien qu'ils existent depuis longtemps dans l'industrie de l'art et du divertissement, ces dernières années, ils ont également gagné en popularité dans l'industrie technologique. Quel que soit le secteur, l'acquisition des poses souhaitées pose des problèmes universels. Afin d'obtenir des données de meilleure qualité pour l'apprentissage automatique dans le domaine de la technologie et de promouvoir des poses de référence plus précises dans le domaine de l'art/divertissement, vous trouverez ci-dessous un guide avec les erreurs courantes à éviter afin de tirer le meilleur parti de vos données - participant, acteur ou modèle.

NOTE: Il y a beaucoup à dire sur ce sujet. Il s'agit d'une version tronquée avec uniquement des expressions de la face supérieure. Je suis disponible pour consultation (facetheFACS@melindaozel.com) si vous souhaitez obtenir les mêmes informations pour le bas du visage et/ou les expressions combinées.


Meilleures pratiques pour la saisie des expressions posées dans Technologie


Erreurs à éviter lors de l'embauche et de la planification

HIRING

Le choix de votre équipe de collecte aura un impact important sur la qualité de votre projet. En matière de technologie, les erreurs les plus courantes commises lors de l'embauche d'acquisition de données sont les suivantes

N'ENGAGEZ PAS de personnes surqualifiées pour collecter vos données.  

  • La saisie des données peut être fastidieuse et répétitive. Si l'expertise est importante dans la phase de stratégie des données, elle n'est pas nécessaire dans la phase d'acquisition des données. L'embauche de personnes surqualifiées pour la collecte de données augmentera la probabilité que vos employés soient fatigués par des tâches peu stimulantes et une stagnation de leur carrière. L'ennui et la stagnation réduiront l'incitation des personnes à rester dans votre équipe - à moins que vous n'ayez une voie d'avancement claire. L'embauche de personnes ayant moins d'expérience augmentera les chances de conserver les membres de votre équipe. Cela offrira également des possibilités d'évolution de carrière aux employés inexpérimentés, plutôt que de perpétuer des structures étouffantes basées sur des sous-traitants.
  • L'une des pires choses que l'on puisse avoir dans un projet de saisie de données est un taux de rotation élevé. Vous voulez que votre équipe connaisse les tenants et aboutissants de votre processus de collecte à domicile. Une équipe bien informée qui comprend les difficultés et les piratages de votre système produira des données plus précises et réduira le temps consacré au dépannage.

 NE PAS Valoriser l'expérience plutôt que les compétences humaines 

  • Faire en sorte que votre participant se sente à l'aise est la moitié de la bataille. Les gens sont moins expressifs dans des situations nouvelles et non naturelles. Les environnements de saisie de données sont par nature peu naturels ; vous devrez donc compenser cet environnement inconfortable par un personnel intuitif et sympathique. L'embauche de spécialistes de l'acquisition de données ayant une expérience du service à la clientèle ou une forte intelligence émotionnelle vous mènera beaucoup plus loin que l'embauche de personnes ayant une expérience technique.

PLANIFICATION

Les données d'expression que vous choisissez de saisir varient en fonction du cas d'utilisation et de la disponibilité des ressources. Parmi les erreurs courantes de planification, on peut citer

 Éviter les guides déficients et les visuels imprécis 

  • En raison d'un manque de connaissance des nuances d'expression, la plupart des guides de pose ont soit des descriptions incorrectes, soit des exemples visuels inexacts. Pour réduire ce problème, il est essentiel de consulter des experts ou de consacrer du temps et du matériel de formation (comme le manuel du système de codage des actions faciales) à des membres désignés de votre équipe.

AAnnuler les poses redondantes ou non pertinentes

  • La redondance est un problème commun à la capture d'expression. S'il est important de rassembler un ensemble d'expressions diverses avec des poses et des combinaisons de poses variées, il est crucial de ne pas gaspiller l'énergie sur des poses inutiles. Certaines actions faciales se combinent intuitivement, d'autres non. Certaines expressions du visage supérieur ont un impact sur l'apparence du visage inférieur, et certaines expressions du visage inférieur ont un impact sur l'apparence du visage supérieur. Certaines ne le font pas. Si votre équipe est consciente de ces impacts, vous serez en mesure de réduire les combinaisons de poses non essentielles.
    – Par exemple, ll'abaisseur d'angle ip est une action sur le visage inférieur qui a peu ou pas d'impact sur le visage supérieur. Il n'y a pas de besoin immédiat de combiner abaisseur du coin des lèvres avec des formes de visage supérieures - à moins que vous ne deviez capturer une expression de tristesse complète.

Évitez LeIdentification des combinaisons de formes importantes 

  • Comme indiqué plus haut, certaines formes s'associent intuitivement, d'autres non.  En comprenant comment les mouvements du visage s'articulent entre eux, vous pourrez créer un ensemble de poses d'expression varié mais cohérent. Les poses dont vous avez besoin dépendront des ressources dont vous disposez et des besoins sous-jacents en matière de produits.

Évitez UNomenclature non normalisée 

  • Il existe déjà une terminologie normalisée pour chaque expression de base. L'utilisation d'une terminologie normalisée réduira les erreurs de communication. Ne nommez pas vos propres poses, sauf si vous avez besoin de poses qui n'ont pas encore de noms normalisés.
    – Le mot “ frown ” illustre bien les malentendus pouvant résulter de l’ambiguïté d’une terminologie non normalisée. Selon votre pays d’origine, le terme “ frown ” peut désigner soit abaisser le front ou abaisseur du coin des lèvres. En Amérique du Nord, le terme "froncement de sourcils" désigne abaisseur du coin des lèvres - d'où l'expression "Renversez votre froncement de sourcils". Un tel dicton n'aurait aucun sens en dehors de l'Amérique du Nord, car le reste du monde utilise le terme "froncement de sourcils" pour indiquer sourcils basr.
  • Le meilleur système de dénomination actuel est le Facial Action Coding System. Le système FACS est largement utilisé et comporte des termes clairement définis avec des exigences détaillées.
  • Si vous avez besoin de poses qui n'ont pas de noms officiels, il est essentiel de documenter vos définitions de travail.

 À éviter Ne pas favoriser la communication entre les différentes fonctions 

  • Les équipes d'acquisition de données, les équipes d'annotation de données, l'ingénierie, la recherche et la gestion des produits doivent rester en communication ouverte. Les besoins et la qualité des données sont affectés à tous les niveaux de la production. Il est impératif de favoriser la communication entre tous les rôles afin de mettre en évidence les différentes perspectives et les différents points de vue.

 

Meilleures pratiques pour la saisie des expressions posées dans Les deux Technologie et Art/Divertissement


 

Erreurs à éviter lors de la capture

 NE PAS révéler ses difficultés 

  • De nombreuses poses sont difficiles pour les gens à frapper. Ne dites pas à votre participant ou acteur quand une pose est difficile avant qu'il n'ait déjà essayé et échoué. Chaque personne aura à faire face à des poses différentes. En révélant les difficultés de manière préventive, vous risquez de biaiser votre participant et/ou de l'amener à trop réfléchir à quelque chose qui lui serait venu naturellement.

 NE FAITES PAS LES PARTICIPANTS MAINTENIR LEURS POSTURES 

  • Certains muscles du visage ne sont pas conçus pour être maintenus pendant de longues périodes. Certains traitements de données exigent des participants qu'ils tiennent des poses pendant trois à cinq secondes. Une durée aussi longue entraînera une fatigue d'expression pour votre modèle. La fatigue d'expression augmente considérablement la probabilité de co-activation des muscles faciaux indésirables.

 NE FORCEZ PAS les participants à prendre des poses ou à adopter des expressions qui ne leur sont pas naturelles 

  • Comme indiqué plus haut, les difficultés rencontrées pour prendre certaines poses varient d’une personne à l’autre. Certaines personnes ne parviendront jamais à réaliser certaines poses. Cette incapacité peut être due à un manque de contrôle musculaire, mais elle peut également être résultat de la diversité anatomique.
  • La diversité anatomique des muscles faciaux est un sujet peu discuté et peu étudié. Diverses études sur les cadavres ont mis en évidence des différences morphologiques importantes dans la composition des muscles faciaux. Dans certaines études, par exemple, jusqu'à 40% des cadavres examinés étaient dépourvus du muscle risorius. Le risorius est le muscle qui se trouve derrière un tendeur de lèvres, une cible commune pour les formes de pose de base ainsi que les prototypes d'émotions. Ne pas tenir compte de la diversité morphologique ne vous fera pas seulement perdre votre temps et celui de votre participant - mais cela entraînera un stress inutile pour le participant et l'acquéreur.

Les défis de l'expression dans Les deux Technologie et Art/Divertissement


Face supérieure

AU 1 - sourcil intérieur

AU1 GIF

  • Beaucoup de gens ont du mal à activer le muscle qui soulève le sourcil sans recourir à abaisser le front. Si vous avez le temps de former vos participants à isoler leurs mouvements de sourcils, c'est parfait ! Cependant, il est peut-être préférable de passer à autre chose s'ils ne peuvent pas le toucher dès les premiers essais.
  • Il convient également de noter que de nombreuses personnes ne présentent pas le style caractéristique de « soulèvement interne des sourcils » illustré dans les prototypes d'expressions. Lorsque de nombreuses personnes effectuent ce mouvement, la partie médiane de leur front reste large et n'est pas aussi nettement isolée au centre.

AU 6 - lever de joues

AU6 - lever de joue

  • Lève-bras est souvent contaminée par tendeur de couvercle et inversement. Cependant, il existe une astuce pour amener les participants à au moins localiser leur lever de joues est de leur demander de faire un clin d'œil. Faites-leur alterner les clins d'œil de chaque côté du visage tout en leur demandant de sentir le mouvement dans leurs joues. Bien que cette astuce devrait aider à créer la sensation du muscle, elle ne garantira pas l'omission de tendeur de couvercle.
  • Lève-bras est également remplacé par erreur par ou combiné avec extracteur de coin de lèvre (bouche "sourire"). Bien qu'il ne soit pas possible de séparer lever de joues à partir de tendeur de couvercle pour la plupart des participants, il est impératif de consacrer du temps supplémentaire pour s'assurer que le participant ne co-active pas extracteur de coin de lèvre. Extracteur de coin de lèvres affecte trop la forme des joues et noiera les traits de le lever de joue.

AU 7 - tendeur de couvercle

AU7 - resserreur de couvercle

  • Comme mentionné ci-dessus, les gens co-activent souvent tendeur de couvercle avec le lever de joue. Au fur et à mesure que vous augmentez la force de tendeur de couverclela probabilité que votre participant active lever de joues augmente de façon spectaculaire. Une façon d'atténuer cette co-activation est d'opter pour une intensité plus faible tendeur de couvercle pose. 

AU 9 - rideau de nez**

9site

**Tandis que rideau de nez est techniquement considéré comme une action sur le bas du visage, il a un impact significatif sur toutes les zones du visage, y compris les yeux et les sourcils.

  • Les problèmes les plus courants liés à rideau de nez apparaîtra dans différentes parties du visage. Parfois, un individu peut complètement échouer à employer rideau de nez et d'activer à la place abaisser le front ou lèvre supérieure.
  • Pour se débarrasser de ce problème, il suffit de demander à votre participant de toucher légèrement l'arête de son nez. Cette astuce permet d'attirer l'attention sur la zone cible.
  • Si l'astuce de l'arête du nez ne fonctionne pas, demandez à votre responsable de l'acquisition des données de donner des instructions plus précises pour différencier abaisser le front et lèvre supérieure à partir de le plissement du nez. 

Face inférieure

La face inférieure est beaucoup plus compliquée que la face supérieure. Veuillez me contacter (facetheFACS@melindaozel.com) pour une consultation sur la manière de tirer le meilleur parti des expressions faciales basses posées.

Conçu pour les studios et les équipes

Parlons-en.

facetheFACS@melindaozel.com