포즈 표현 품질을 높이는 방법 포즈 표정 ca퓨처 시스템이 점점 더 대중화되고 있습니다. 예술/엔터테인먼트 업계에서는 꽤 오래 전부터 사용되어 왔지만, 최근에는 기술 업계에서도 주목을 받고 있습니다. 업종에 관계없이 원하는 포즈를 취하는 데에는 보편적인 어려움이 있습니다. 기술 분야의 머신러닝을 위한 고품질 데이터를 확보하고 예술/엔터테인먼트 분야에서 보다 정확한 참조 포즈를 장려하기 위해, 데이터 참여자, 배우 또는 모델을 최대한 활용하기 위해 피해야 할 일반적인 실수가 담긴 가이드를 아래에 소개합니다.

참고: 이 주제에 대해 다룰 내용이 많습니다. 얼굴 표정만 잘라낸 버전입니다. 상담을 받을 수 있습니다(facetheFACS@melindaozel.com)를 클릭하면 아래쪽 얼굴 및/또는 조합 표현식에 대해 동일한 정보를 얻을 수 있습니다.

에서 포즈를 취한 표정을 캡처하는 모범 사례 기술

채용 및 계획 시 피해야 할 실수

채용

수집 팀을 선택하는 것은 프로젝트의 품질에 큰 영향을 미칩니다. 기술 분야에서 데이터 수집 전문가를 고용할 때 흔히 저지르는 실수는 다음과 같습니다:

데이터 수집을 위해 과도한 자격을 갖춘 사람을 고용하지 마세요.  

• 데이터 수집은 지루하고 반복적인 작업일 수 있습니다. 데이터 전략 단계에서는 전문성이 중요하지만, 데이터 수집 단계에서는 전문성이 반드시 필요한 것은 아닙니다. 과도한 자격을 갖춘 사람을 데이터 수집에 고용하면 직원들이 자극이 부족한 업무와 경력 정체로 인해 지칠 가능성이 높아집니다. 지루함과 정체는 명확한 승진 경로가 없는 한 개인이 팀에 남아있으려는 동기를 감소시킵니다. 경력이 적은 사람을 채용하면 팀원들이 팀에 남을 가능성이 높아집니다. 또한 경험이 부족한 직원에게 계약직 기반의 답답한 구조를 지속하는 대신 경력 성장 기회를 제공할 수 있습니다.
• 데이터 캡처 프로젝트에서 최악의 상황 중 하나는 높은 이직률입니다. 팀원들이 하우스 스타일 수집 프로세스의 모든 것을 알고 있어야 합니다. 시스템의 어려움과 해킹에 대해 잘 알고 있는 팀은 더 정확한 데이터를 생산하고 문제 해결에 소요되는 시간을 줄일 수 있습니다.

 하지 마세요 사람의 기술보다 경험을 중시 

• 참가자가 편안하게 느끼도록 하는 것이 절반의 승리입니다. 사람들은 새롭고 부자연스러운 환경에서는 표현력이 떨어집니다. 데이터 수집 환경은 본질적으로 부자연스럽기 때문에 직관적이고 개성 있는 직원으로 불편한 환경을 보완해야 합니다. 고객 서비스 경력이 있거나 감성 지능이 뛰어난 데이터 수집 전문가를 고용하면 기술 경험만 있는 사람을 고용하는 것보다 훨씬 더 많은 것을 얻을 수 있습니다.

계획

캡처하기로 선택한 표현식 데이터는 사용 사례와 리소스 가용성에 따라 달라집니다. 계획에서 흔히 저지르는 실수는 다음과 같습니다:

 부족한 가이드와 부정확한 비주얼 피하기 

• 표현의 뉘앙스에 대한 지식이 부족하기 때문에 대부분의 포즈 가이드에는 잘못된 설명이 있거나 부정확한 시각적 예시가 있습니다. 이러한 문제를 줄이려면 전문가와 상담하거나 지정된 팀원에게 표정 코딩 시스템 매뉴얼과 같은 교육 자료와 시간을 할애하는 것이 중요합니다.

A중복되거나 관련 없는 포즈 무효화

• A common issue with expression capture is redundancy. While it is important to gather a diverse expression set with various poses/pose combinations, it is crucial to not waste energy on unnecessary poses. Some facial actions combine intuitively; some do not. Some upper face expressions impact the look of the lower face, and some lower face expressions impact the look of the upper face. Some do not. If your team is mindful of these impacts, you will be able to reduce nonessential pose combinations.
  – For example, lip corner depressor is a lower face action that has little to no impact on the upper face. There is no immediate need to combine 립 코너 디프레서 with upper face shapes – unless you need to capture a full sadness expression.

Avoid Leaving Out Important Shape Combinations 

• As mentioned above, some shapes combine intuitively and some don’t.  Being aware of how facial actions combine will allow you to create a diverse but streamlined set of expression poses. Which poses you need will depend on your available resources and underlying product needs.

Avoid Unstandardized Nomenclature 

• Standardized terminology for each base expression already exists. Using standardized terminology will reduce miscommunication. Do not name your own poses unless you need poses that do not already have standardized names.
  – An example of miscommunication caused by ambiguity of unstandardized terminology is the the word “frown.” Depending on your country of origin, the term “frown” can refer to either 눈썹 아래 또는 립 코너 디프레서. In North America, “frown” refers to 립 코너 디프레서 – hence the phrase, “Turn your frown upside down.” Such a saying would make no sense outside North America, as the rest of the world uses “frown” to indicate brow lowerer.
• The best current naming system is the Facial Action Coding System. FACS is widely used and features clearly defined terms with detailed requirements.
• If you require poses that do not have official names, it is crucial to document your working definitions.

 Avoid Failing to Encourage Cross-functional Communication 

• Data acquisition teams, data annotation teams, engineering, research, and product management must stay in open communication. Data needs and quality are affected at all levels of productization. It is imperative to foster cross-functional communication between all roles to highlight different perspectives and insights.

에서 포즈를 취한 표정을 캡처하는 모범 사례 Both 기술 그리고 Art/Entertainment

Mistakes to Avoid During Capture

 DON’T Disclose Difficulty 

• Many poses are challenging for people to hit. Do not tell your participant or actor when a pose is difficult until they have already attempted and failed. Each individual will struggle with different poses. Preemptively disclosing difficulty will bias your participant and/or cause them to overthink something that may have otherwise come naturally to them.

 DON’t Make Participant Sustain Poses 

• Certain facial muscles are not designed to be held for long periods of time. Some data processes require participants to hold poses for as long as three to five seconds.  Such long duration will cause your model to experience expression fatigue. Expression fatigue greatly increases likelihood of co-activating unwanted facial muscles.

 DON’T Force Participant to Pose Expressions They Cannot 

• As mentioned above, challenges in hitting poses will differ across individuals. Some individuals will never be able to achieve certain poses. This inability may be the result of an individual’s lack of muscle control, but it can also be a product of anatomical diversity.
• Anatomical diversity in facial muscles is an under-discussed and under-researched topic. Various cadaver studies have identified significant morphological differences in our facial muscle makeup. In some studies, for example, as much as 40% of cadavers examined were missing the risorius muscle. Risorius is the muscle behind lip stretcher, a common target for basic pose shapes as well as emotion prototypes. Failing to consider morphological diversity will not only waste your time and your participant’s time – but it will cause unnecessary stress for the participant and acquisitionist.

Challenges in Expression Posing in Both 기술 그리고 Art/Entertainment

Upper Face

AU 1 – 이너 브로우 레이져

• Many people struggle to activate inner brow raiser without employing 눈썹 아래. If you have the luxury of time to train your participant to isolate their brow movements – great! However, it may be best to move on if they cannot hit it in the first few tries.
• Another thing to note is that many people do not have the characterized inner brow raiser style shown in expression prototypes. When many people perform inner brow raiser, the medial portion of their forehead is wide and not as centrally isolated.

AU 6 – 뺨 올리기

• 뺨 올리기 is often contaminated with 뚜껑 조임 and vice versa. However, one hack to get participants to at least locate their 뺨 올리기 is to ask them to wink. Have them alternate winking on each side of their face while asking them to feel the movement in their cheeks. Though this trick should help create the feel for the muscle, it will not guarantee omission of 뚜껑 조임.
• 뺨 올리기 is also mistakenly replaced by or combined with 립 코너 풀러 (mouth “smile”). While it may not be possible to separate 뺨 올리기 에서 뚜껑 조임 in most participants, it is imperative to spend extra time to ensure participant is not co-activating 립 코너 풀러. 립 코너 풀러 affects the shape of the cheeks too much and will drown out the features from 볼 올리기.

AU 7 – 뚜껑 조임

• As mentioned above, people often co-activate 뚜껑 조임 와 함께 볼 올리기. As you increase the strength of 뚜껑 조임, the probability that your participant will activate 뺨 올리기 increases dramatically. One way to mitigate this co-activation is to opt for a lower intensity 뚜껑 조임 pose. 

AU 9 – nose wrinkler**

**While 코 링클러 is technically considered a lower face action, it significantly impacts all areas of the face, including the eyes and eyebrows.

• The most common issues associated with 코 링클러 will appear in different parts of the face. Sometimes an individual can completely fail to employ 코 링클러 and instead activate 눈썹 아래 또는 윗입술 올리기.
• Getting rid of this problem can be as simple as asking your participant to lightly touch the bridge of their nose. This trick helps bring attention to the target area.
• If the nose bridge trick does not work, have your data acquisitionist give more thorough instructions to differentiate 눈썹 아래 그리고 윗입술 올리기 에서 nose wrinkler. 

Lower Face

The lower face is much more complicated than the upper face. Please contact me (facetheFACS@melindaozel.com) for consultation on how to get the best out of posed lower face expressions.