Perundingan Sistem Muka

Pasukan yang membangunkan AI pengecaman wajah sering kali kekurangan cara sistematik untuk menilai tingkah laku. Mereka tidak dapat dengan pasti menentukan model mana yang lebih baik, mengapa ekspresi gagal, atau di mana masalah bermula dalam aliran kerja. Saya mereka bentuk rangka kerja penilaian yang membolehkan keputusan tersebut didiagnosis, merangkumi penilaian keadaan model, diagnostik data, piawaian anotasi, dan dokumentasi dalaman yang memastikan sistem tersebut terus boleh digunakan selepas saya tiada.

Kerangka kerja yang saya bawa kepada pelanggan diambil daripada membina infrastruktur data wajah berskala besar. Di Meta, saya menentukan piawaian anotasi dan protokol pengumpulan di sebalik penjejakan wajah Quest Pro, memastikan tiga paten dalam animasi avatar. Sejak itu, saya telah membangunkan kerangka penilaian model di Flawless AI dan membina piawaian pengesanan ekspresi di Affectiva.

AI / Teknologi

Tiada dua saluran AI wajah yang menghadapi masalah yang sama. Sebelum mencadangkan apa-apa, saya bermula dengan diagnostik supaya saya dapat memahami data anda, model anda, kes penggunaan anda, dan di mana kekosongan wujud. Daripada situ, penglibatan biasanya melibatkan beberapa gabungan:

Audit model dan data
Strategi anotasi & dokumentasi
Penilaian dan pensetandardan penjual
Perkembangan set emas
Kerangka pengukuran prestasi automatik

Skop dan kedalaman bergantung sepenuhnya pada lokasi anda dan apa yang anda cuba bina.

Animasi

Rigs wajah adalah sistem kompleks dengan banyak bahagian bergerak dan ramai orang mentafsirkannya secara berbeza. Apabila ketidakselarasan muncul merentasi watak, jabatan, atau aliran kerja, jarang sekali jelas di mana ia bermula atau bagaimana untuk membetulkannya. Saya terlibat apabila pasukan memerlukan pandangan luar dengan kedalaman anatomi dan teknikal untuk mendiagnosis di mana perkara-perkara rosak dan menentukan hala tuju seterusnya.

Ulasan rig dan blendshape saya bukan sekadar senarai pembetulan. Setiap nota berasaskan anatomi dan mekanik otot. Pasukan akan beredar dengan pemahaman tentang apa yang perlu diubah, mengapa, dan bagaimana menerapkan alasan itu pada setiap bentuk yang seterusnya.

Sesetengah projek tidak mempunyai buku panduan sedia ada. Apabila sebuah studio memerlukan sistem wajah untuk seekor kera kapuchin, seekor simpanse, atau watak sukan dengan keperluan ROM khusus mengikut kes penggunaan, kerja bermula dengan penyelidikan. Saya menyiasat anatomi, mengenal pasti kekurangan, dan membina rangka kerja tersuai dari awal, mengulangi proses pemodelan, rigging, dan animasi sehingga pasukan dapat melaksanakannya secara bebas.