얼굴 시스템 컨설팅

얼굴 AI를 구축하는 팀에는 행동을 평가하는 체계적인 방법이 부족한 경우가 많습니다. 어떤 모델이 더 나은지, 표현식이 깨지는 이유는 무엇인지, 파이프라인에서 문제가 어디에서 발생하는지 확실하게 알 수 없습니다. 저는 이러한 결정을 진단할 수 있는 평가 프레임워크를 설계합니다.

메타에서 저는 초기 파이프라인부터 확장까지 얼굴 데이터 인프라를 구축하여 Quest Pro 얼굴 추적의 주석 표준과 수집 프로토콜을 정의했습니다. 그 작업으로 확보한 보안 아바타 애니메이션 분야 특허 3건. 그 이후로 저는 Flawless AI에서 모델 평가 프레임워크를 개발하고 Affectiva에서 표현식 감지 표준을 구축했습니다.

AI / 기술

모든 얼굴 AI 파이프라인에 동일한 문제가 있는 것은 아닙니다. 저는 어떤 것을 추천하기 전에 먼저 진단을 통해 고객의 데이터, 모델, 사용 사례, 그리고 부족한 부분을 파악합니다. 그 다음에는 일반적으로 다음과 같은 조합을 사용합니다:

  • 모델 및 데이터 감사
  • 주석 전략 및 문서화
  • 공급업체 평가 및 표준화
  • 골드 세트 개발
  • 자동화된 성능 측정 프레임워크

범위와 깊이는 전적으로 현재 위치와 구축하려는 대상에 따라 다릅니다.

애니메이션

페이셜 릭은 움직이는 부분이 많고 많은 사람이 서로 다르게 해석하는 복잡한 시스템입니다. 캐릭터, 부서, 파이프라인에 걸쳐 불일치가 발생하면 어디서부터 문제가 시작되었는지, 어떻게 해결해야 하는지 명확하게 알 수 있는 경우가 드뭅니다. 저는 팀이 어디에서 문제가 발생했는지 진단하고 앞으로 나아갈 길을 정의하기 위해 해부학적, 기술적 깊이를 갖춘 외부의 시각이 필요할 때 투입됩니다.

제 리그와 블렌드셰이프 리뷰는 단순한 수정 사항 목록이 아닙니다. 각 노트는 해부학과 근육 역학에 기반을 두고 있습니다. 팀은 무엇을 변경해야 하는지, 왜 변경해야 하는지, 그리고 그 추론을 이후 모든 모양에 적용하는 방법을 이해하고 돌아갑니다.

일부 프로젝트에는 기존 플레이북이 없는 경우도 있습니다. 스튜디오에서 카푸친, 침팬지 또는 스포츠 캐릭터의 얼굴 시스템이 필요하고 사용 사례별 ROM 요구 사항이 있는 경우, 작업은 조사부터 시작합니다. 해부학을 조사하고 부족한 부분을 파악한 다음, 팀이 독립적으로 실행할 수 있을 때까지 모델링, 리깅, 애니메이션을 반복하면서 처음부터 커스텀 프레임워크를 구축합니다.

프로젝트에 대해 이야기해 보겠습니다.

모든 참여는 대화에서 시작됩니다. 디스커버리 통화를 예약하려면 연락하세요.

스튜디오 및 팀을 위해 설계됨

이야기해 봅시다.

facetheFACS@melindaozel.com