Hiệu suất khuôn mặt: 3 Mẹo quan trọng cho các quy trình thu thập dữ liệu

Khi thiết kế các quy trình thu thập dữ liệu khuôn mặt, có rất nhiều yếu tố cần xem xét để tránh dữ liệu chất lượng kém và mệt mỏi của người tham gia.

Các yếu tố như…

Bạn chọn những tư thế nào?
Cách bạn sắp xếp các tư thế
Cách bạn giải thích/thể hiện các tư thế, v.v.

…có thể tạo ra sự khác biệt lớn trong kết quả của các buổi học của bạn.

Working with major game and tech companies to refine their facial performance capture pipelines, it’s quite obvious that people are recycling similar, dated protocols. Considering the present purpose of many captures, such old protocols are often clunky with illogical pose combinations, redundant expressions, and inefficient flow.

Có một danh sách dài dằng dặc các quy tắc nên làm và không nên làm trong thiết kế capture khuôn mặt, nhưng dưới đây là một số nguyên tắc chung:

1. Be use case-minded!

Are you defining machine learning training data for real-time applications? Are you gathering extreme poses for high-intensity fight scenes in film or games? Think about your end goal.

If your purpose is to capture facial data for an avatar product aimed toward co-working, you’d likely want to prioritize prosocial, collaborative, and natural facial expressions. Stop wasting time, energy, and production budget by bloating your session with every possible unsightly “scream” pose or hyper-compressed “lemon” face. Save those for Diablo và Planet of the Apes.

2. Design for logical flow.

Group similar expressions together, e.g. brow-based FACS poses (action units like – inner brow raiser, outer brow raiser, brow lowerer) and eye-based FACS poses (action units like – upper lid raiser, lid tightener, cheek raiser, eye closure, blink, wink) together.
Go from easy to difficult within each section. If you move from easy to difficult across ALL poses, you will end up forcing your user to leap from eyes to mouth to brows to jaw.
Grouping expressions strategically not only helps with user fatigue and comprehension, but it also opens up opportunity to order your poses in a way that allows you to describe and build off previous ones.

3. Make sure your example imagery and descriptions match the target pose and intended blendshapes.

Too many times, I see prompts like “raise brows without widening eyes” – yet the actor in the example shot is clearly widening their eyes. A large percentage of users will do as they see, not as they hear or read. So, don’t give conflicting instructions, and make sure you rigorously review the example poses!

📝 Một mẹo nữaTrong video, hãy chú ý cách tôi hướng dẫn động tác được gọi là "chin raiser" bằng cách nói "đẩy môi dưới lên". Dễ dàng bị mắc kẹt trong việc mô tả tư thế dựa trên tên gọi chính thức của chúng, nhưng bằng cách sử dụng các mô tả dễ hiểu hơn, bạn có thể tăng khả năng người tham gia thực hiện đúng tư thế.