Ekspresi wajah anda dan soalan FACS terjawab!
Berikut adalah campuran soalan yang kerap dan jarang ditanya berkaitan Sistem Kod Tindakan Muka (FACS) dan ekspresi muka. Jawapan-jawapan ini disasarkan terutamanya kepada animator, pemodel, rigger, dan artis lain serta penyelidik dan jurutera yang bekerja dalam teknologi penjejakan muka dan manusia digital. Kerana terdapat banyak teks, disyorkan untuk menelusuri mengikut seksyen atau menggunakan Ctrl+F untuk mencari kata kunci.
Asas FACS
Apakah FACS (Sistem Kodifikasi Tindakan Wajah)?
FACS, atau Sistem Kod Tindakan Muka, adalah satu sistem pengelasan yang direka untuk menamakan dan menerangkan pergerakan muka manusia yang dapat dilihat. Oleh kerana FACS berasaskan anatomi dan didokumenkan secara terperinci, ia membolehkan kita memecahkan ekspresi muka yang kompleks secara objektif dan standard.
Pos penjelasan penuh akan datang tidak lama lagi!
Petua Pembelajaran & Pengajian
Di manakah anda mencadangkan pemula mempelajari FACS?
Bergantung. Jika anda seorang artis, anda boleh mempelajari FACS melalui laman web ini, saya Lembaran Cheat FACS, Manual FACS, atau saya Sesi Latihan Intensif FACS; bagaimanapun, anda mungkin tidak akan mendapat pulangan yang setimpal atas wang anda dalam Manual FACS rasmi melainkan anda sanggup meluangkan masa dan wang ($350) untuk mengendalikan 500 muka surat bahasa buku teks yang direka untuk khalayak yang berbeza. Manual ini tidak akan mempunyai sebanyak maklumat relevan untuk artis., kerana ia direka khas untuk mengajar pengguna cara menulis kod pergerakan wajah menggunakan kaedah penyelidikan berstruktur.
Jika anda berada dalam bidang akademik atau teknologi dan ingin menjalankan penyelidikan tingkah laku, pelajari FACS secara rasmi melalui Manual FACS dan lengkapkan mana-mana visual yang hilang dengan laman web saya, Lembaran Cheat FACS, atau saya Sesi Latihan Intensif FACS. Bagi penyelidik akademik, Erika Rosenberg menganjurkan bengkel untuk bakal pengkod wajah.
FACS nampaknya sangat rumit. Di mana dan bagaimana pelajar seperti saya harus bermula?
FACS mungkin kelihatan rumit, tetapi wajah sebenar adalah lebih rumit. Saya mencipta Hadapi FACS, kerana Manual FACS boleh menjadi padat, dan tiada sumber yang mudah diakses (atau berkualiti) di luar sana. Seperti yang disebutkan di atas, anda boleh memanfaatkan sumber di laman web saya, kedua-duanya percuma dan dibayar. Anda juga boleh mengikuti media sosial saya untuk lebih banyak rujukan percuma, petua, dan kiriman informatif (Instagram: @manicexpression / Twitter: @melindaozel / LinkedIn).
Adakah terdapat kitab panduan FACS? Di manakah saya boleh mencari rujukan mengenai pelbagai AU FACS (unit tindakan)?
Alkitab FACS yang sebenar ialah Manual FACS, tetapi saya sentiasa menambah ke dalam milik saya. Lembaran Cheat FACS! Lembaran ini direka untuk mempamerkan AU asas. Saya mempunyai bentuk gabungan tersedia untuk Ahli Premium, dan saya sering menyiarkan rujukan percuma di semua akaun sosial saya (Instagram: @manicexpression / Twitter: @melindaozel / LinkedIn). Untuk meminta kombinasi AU tertentu, isi borang di bahagian bawah halaman ini.
Ada sebarang helah untuk membantu artis agar tidak tertekan apabila melihat pada Hadapi FACS bahasa? Bagi artis yang lebih hijau mendapati bahawa mereka cepat terbawa arus apabila mencetuskan terlalu banyak bentuk sekaligus, yang akhirnya boleh membatalkan animasi.
Mulakan dengan bahagian-bahagian muka. Mulakan dengan kening – itu yang paling mudah. Perhatikan nama-nama FACS; ia mungkin kedengaran menakutkan pada mulanya, tetapi apabila anda sedar bahawa namanya sendiri menerangkan definisi pergerakan tersebut, ia akan menjadi kawan anda! Sebagai contoh – Apakah maksud “inner brow raiser”? Ia bermaksud bahagian dalam kening anda sedang diangkat! Kaji anatomi asas bersama FACS. Latih membentuk bentuk-bentuk tersebut pada wajah anda sendiri. Mulakan memerhati pergerakan dalam kehidupan sebenar dan apabila menonton filem / rancangan / video media sosial. Simpan pergerakan yang melibatkan mulut untuk terakhir sekali.
Berkenaan dibawa terlalu jauh dengan mencetuskan terlalu banyak bentuk sekaligus – mempunyai pemahaman asas tentang anatomi wajah dan FACS akan membolehkan anda mengkaji pergerakan dan gabungan biasa yang berlaku dalam dunia semula jadi. Pengamatan dunia sebenar akan membantu membimbing strategi anda tentang apa yang perlu dicetuskan dan bila.
Apakah sumber/tutorial kegemaran anda untuk menguasai FACS?
Saya mencipta Hadapi FACS,kerana sumber di luar Manual FACS rasmi hampir selalu mengandungi maklumat dan rujukan yang tidak tepat. Manual itu sendiri juga boleh samar-samar mengenai beberapa tindakan wajah. Ia mengambil masa bertahun-tahun kajian kendiri dan pemerhatian untuk benar-benar memahami tindakan seperti “pengencang bibir,” “penguat kedutan nasolabial,” “pemampat lubang hidung,” dan sebagainya. Matlamat laman web ini adalah untuk meminimumkan kekeliruan FACS dan memerangi berita palsu tentang wajah.
Saya menjadi cukup mahir dalam FACS melalui Manual FACS dan para mentor yang saya miliki semasa latihan amali saya di Zurich Interaction and Expression Laboratory: Willibald Ruch, Tracey Platt, dan Jennifer Hofmann. Selepas itu, segala yang saya pelajari adalah daripada pengalaman, amalan, dan pemerhatian dunia sebenar.
Untuk sumber anatomi pemula, saya mengesyorkan:
- Wajah Manusia dan Bahasa Mimik oleh Carl-Herman Hjortsjö. Buku percuma yang boleh dimuat turun ini adalah aset mesra artis bagi mereka yang ingin memahami kedua-dua FACS dan anatomi wajah. Hjortsjö pada dasarnya adalah datuk kepada FACS. Tanpa sumbangannya dalam anatomi wajah dan kajian pergerakan wajah, FACS hanya akan menjadi sebahagian kecil daripada apa yang ia adalah sekarang. Banyak bahagian FACS diambil daripada karya Hjortsjö – walaupun dia tidak pernah mendapat pengiktirafan yang mencukupi.
- Anatomi Manusia untuk Seniman: Unsur-unsur Bentuk oleh Eliot Goldfinger. Saya suka bagaimana buku ini menerangkan otot-otot muka dengan cara yang berkesan namun ringkas. Ia adalah buku paling jelas dan paling tepat yang pernah saya temui, dan ia sebenarnya mengakui kepelbagaian otot muka. Untuk sumber anatomi lanjutan, anda perlu mencari kertas penyelidikan!
Adakah sebarang sumber yang anda boleh cadangkan untuk mencari rujukan wajah yang baik? Kami sedang membina AI perbualan. Saya mengendalikan animasi, ekspresi, dan gerakan rehat badan. Kami kebanyakannya melakukan kerja secara manual dan watak-watak kami sering kelihatan tidak semula jadi.
Saya Lembaran Cheat FACS dan situs web keseluruhan penuh dengan rujukan untuk ekspresi asas, emosi, dan ucapan. Saya tersedia untuk berkhidmat sebagai perunding. jika anda mahu bantuan menjadikan watak anda kelihatan lebih semula jadi.
Apakah pendekatan terbaik untuk mempelajari FACS? Terdapat banyak maklumat. Adakah terdapat sebarang strategi atau teknik untuk mempelajarinya dengan lebih cekap?
Pendekatan terbaik ialah membahagikan wajah kepada bahagian-bahagian, contohnya kening, mata, bahagian tengah wajah, dan bahagian bawah wajah. Pastikan anda mempelajari setiap bahagian dengan betul pada kali pertama. Laman web ini dibina untuk tujuan itulah. Setelah anda mempunyai pemahaman asas tentang FACS, langkah seterusnya ialah bersabar. Segalanya akan menjadi jelas dari masa ke masa dengan mengekalkan pemerhatian yang teliti.
Saya telah mempelajari wajah selama lebih 13 tahun dan masih keliru tentang beberapa perkara. Malah ahli anatomi pun sukar mencapai persetujuan mengenai isu-isu tertentu berkaitan klasifikasi dan pecahan otot muka; jadi ingatlah perkara itu apabila anda berasa kecewa atau terbeban!
Emosi, Tingkah Laku, & Budaya
Bagaimana FACS membantu kita mengenali emosi manusia sebenar?
FACS membantu kita memecahkan ekspresi wajah dan mengenal pasti otot mana yang digunakan; ia membantu kita mengenali corak dan mengenal pasti apa yang berlaku pada wajah pada masa yang berbeza dan dalam situasi yang berbeza.
Adakah terdapat keseimbangan antara memecahkan elemen seni dan kemudahan penggunaan untuk menyatakan emosi?
Banyak ekspresi emosi muka yang biasa berkongsi tindakan muka yang sama; jadi ia bergantung pada projek. Dalam beberapa kes, menggabungkan perkara-perkara sebagai set emosi akan menjadi kekok dan terhad. Dalam kes lain, ia mungkin berguna.
Adakah terdapat perbezaan budaya dalam FACS? Pasti ada beberapa perbezaan dalam ekspresi dan penyampaian emosi.
FACS adalah sistem yang menerangkan pergerakan wajah berasaskan otot. Walaupun kita semua mempunyai perbezaan dalam bentuk, saiz, kehadiran, konfigurasi, dan kekuatan otot wajah – otot anda tidak berubah berdasarkan budaya anda; bagaimanapun, tindakan wajah yang anda gunakan untuk menyatakan diri anda akan berbeza, dan variasi tersebut boleh diukur melalui FACS. Keupayaan untuk mengenal pasti corak dan perbezaan dalam tingkah laku wajah adalah sebab FACS dibangunkan pada mulanya!
Anatomi
Bolehkah anda bercakap tentang bagaimana otot muka menghasilkan ekspresi tertentu? Adakah semua otot itu bersambung dengan tulang, atau adakah sebahagiannya bersambung dengan otot lain atau fasia? Apakah beberapa interaksi otot yang lebih kompleks yang terlibat?
Ya, saya boleh bercakap tentang ini berhari-hari dan mempunyai beberapa penulisan mengenai topik ini di seluruh laman web ini. Tidak, tidak semua otot muka bersambung dengan tulang. Ada yang bersambung; ada yang tidak. Terdapat pelbagai variasi dari segi cara otot muka bersambung. Oleh kerana variasi otot muka adalah salah satu topik penyelidikan kegemaran saya, saya telah mengumpulkan perpustakaan maklumat mengenai kepelbagaian muka; bagaimanapun, disebabkan masa yang banyak dihabiskan untuk memperoleh badan penyelidikan ini, saya menahan penemuan saya untuk kuliah peringkat lanjutan atau klien. Dengan itu – saya merancang untuk membuat helaian rujukan yang menerangkan asal dan sisipan setiap otot muka di sebalik setiap aksi muka. Semoga itu membantu 🙂!
FACS adalah sistem yang agak lengkap didokumentasikan dan dibina berdasarkan otot, tetapi sukar untuk mencari maklumat tentang lapisan di atas otot. Adakah anda mempunyai sebarang nasihat tentang bagaimana kami boleh mempelajari lebih lanjut tentang perkara seperti bantal lemak muka dan pergerakan atau kelonggaran kulit?
Amin dengan itu! Memang terdapat kekurangan sumber yang mudah diakses mengenai topik-topik yang anda terangkan. Saya peminat pengamal estetika, Tim Pearce. Dia mempunyai beberapa yang hebat pembongkaran lemak muka di YouTube beliau Saluran. Terdapat banyak kertas anatomi yang baik juga. Anda tidak akan silap dengan kekuatan pemerhatian dan mendokumentasikan contoh anda sendiri. Apabila melihat diagram anatomi muka, sentiasa ingat bahawa ia adalah perwakilan yang disederhanakan bagi perkara yang mempunyai variasi yang besar; inilah sebabnya memerhati orang dalam dunia semula jadi dan membaca kertas penyelidikan boleh menjadi sangat bermanfaat.
Animasi
Apabila melakukan FACS untuk animasi wajah subjek, adakah anda perlu mencipta set FACS tersuai untuk setiap identiti bagi memaksimumkan keaslian?
Jika watak anda berada pada hujung spektrum yang lebih realistik, ia boleh menjadi sangat berkesan untuk mencipta pilihan variasi bagi bentuk ekspresi. Sebagai contoh, Dahi kita semua berkerut dengan cara yang berbeza apabila kita mengangkat kening.. Walaupun semua angkatan kening penuh melibatkan otot angkat kening dalam dan otot angkat kening luar, cara otot angkat kening dalam dan otot angkat kening luar diekspresikan pada setiap wajah akan mempunyai ciri unik. Terdapat beberapa cara untuk mengkategorikan dan mengelompokkan perbezaan ini bagi mencipta kepelbagaian dan pilihan. Saya pernah bekerjasama dengan studio untuk membina penyelesaian seperti ini sebelum ini dan berbesar hati untuk melakukannya sekali lagi. Sila ajukan projek kepada saya di facetheFACS@melindaozel.com
Apakah proses tipikal untuk menganimasikan wajah 3D selepas mempunyai peta FACS? Bolehkah anda bermula dengan video seseorang sedang bercakap -> mengekstrak peta penanda wajah padat -> menghasilkan wajah 3D yang dianimasikan?
Sebagai bukan animator, saya tidak dapat menjawab apakah proses tipikalnya; namun, saya boleh katakan bahawa cubaan automatik untuk mencipta semula ucapan daripada video orang bercakap sentiasa mempunyai kesilapan yang halus – tetapi sangat boleh dipercayai – bagi pelbagai bentuk bibir yang diperlukan untuk pertuturan.
Apakah kesilapan biasa yang anda lihat pasukan animasi lakukan apabila mengadaptasi rig gaya FACS ke dalam aliran kerja manusia digital?
Bentuk FACS yang tidak tepat adalah isu terbesar. Isu besar lain termasuk: 1. tidak mengambil kira pergerakan sekunder dan tersier sesebuah bentuk – contohnya mengekalkan pergerakan terlalu terasing dan kaku, 2. memecahkan pergerakan asas untuk memberi lebih kawalan kepada animator – kemudian animator terlupa menyatukan semula bahagian-bahagian itu kemudian apabila menggerakkan ekspresi. Beberapa isu yang lebih halus termasuk ketidakpadanan antara kedutan dan pergerakan, pergerakan pada permukaan tidak mengambil kira perubahan kedalaman, dan sebagainya.
Adakah terdapat apa-apa yang “mengejutkan” yang anda temui dalam kajian anda yang anda harap lebih ramai animator sedar? Adakah terdapat sebarang prinsip FACS yang anda rasa sering diabaikan oleh animator baharu?
Saya sentiasa menemui perkara yang mengejutkan! Dari segi penemuan yang saya harap lebih ramai animator sedar – sebenarnya saya berharap animator sedar tentang prinsip asas pergerakan wajah. Ia satu halangan besar apabila seorang animator jahil tentang mekanik wajah asas dan tidak dapat berkomunikasi keperluannya dengan berkesan kepada jabatan lain, seperti rigging.
Adakah terdapat unit aksi ‘sub’ atau unit aksi yang lebih kecil yang telah ditakrifkan oleh animator untuk memecahkan perkara dengan lebih terperinci?
Terdapat banyak unit aksi “sub” yang meragukan yang dibuat untuk kemudahan penggunaan. Saya katakan “meragukan,” kerana jika unit sub ini tidak dirancang dengan teliti dan digunakan dengan berhati-hati, ia boleh menyebabkan pergerakan wajah yang tidak semula jadi.
Mengenai pecahan yang sah mengikut anatomi, saya pasti ia wujud. Saya terpaksa memecahkan senarai unit tindakan kecil saya sendiri untuk membantu mendefinisikan pergerakan pertuturan dengan lebih baik. Saya telah dihubungi oleh animator yang mengatakan mereka telah memecahkan pergerakan yang sama untuk mencipta pertuturan yang realistik. Salah satu unit tindakan kecil kritikal yang saya tambah ke dalam sumber FACS saya ialah satu bentuk yang saya panggil “pengencang bibir menegak.” Anda boleh Googlenya atau carinya di laman saya Lembaran Cheat FACS untuk mengetahui lebih lanjut.
Pengikatan tali
Adakah kebanyakan rigger mencipta rig FACS menggunakan bentuk campuran atau sendi?
Mereka yang pernah saya bekerjasama kebanyakannya menggunakan blend shapes. Blend shapes memberikan hasil yang lebih berkualiti tetapi boleh menjadi mahal dan besar saiznya. Joints pula lebih murah tetapi kelihatan lebih murahan.
Saya tidak pasti bagaimana untuk merumuskan soalan ini dengan tepat… Dengan mengambil kira bahawa tujuan rig kawalan adalah untuk mempermudah gerakan kompleks supaya seorang animator dapat bekerja dengan cepat dan cekap (kalau tidak kita cuma akan menganimasikan titik-titik) – FACS nampaknya menekankan pemecahan kepada kumpulan otot individu (pada tahap anatomi). Bagaimana anda fikir animator boleh mengawal kumpulan otot kompleks dengan tepat tetapi juga ‘dengan mudah’?
Kombinasi bentuk yang sesuai perlu dibuat secara kes demi kes. Ia bergantung pada konteks – seperti reka bentuk watak, tingkah laku watak, penonton sasaran, dan sebagainya. Saya ingin bekerjasama dengan seorang rigger untuk mencipta alat yang dapat membantu animator membina bentuk kompleks bagi senario tertentu.
Saya pernah bekerja pada satu episod Marvel's “What If?” untuk watak yang hanya mempunyai lima bentuk pada rig muka. Adakah anda fikir terdapat stylization yang boleh digunakan dengan FACS yang lebih sedikit untuk menyampaikan pelbagai emosi?
Menakjubkan hanya ada 5 bentuk pada rig wajah! Itu memberi perspektif yang berbeza tentang banyak perkara. Saya rasa stylization boleh menggunakan lebih sedikit bentuk FACS. Ia bergantung pada watak. Sebagai contoh, emoji tidak mempunyai hidung; jadi itu mengurangkan beberapa bentuk. Jika anda ingin menganimasikan Hello Kitty, anda tidak perlu risau tentang bentuk mulut atau kening. Pada sesetengah manusia bergaya, anda boleh mengeluarkan beberapa bentuk yang kelihatan cukup serupa dengan bentuk lain. Sekali lagi, ia bergantung!
Apa yang anda rasakan 3–5 AU paling penting dan berguna untuk membina watak asas (mungkin sesuatu seperti koleksi batu kecil) untuk mengekspresikan / memberi emosi / “berbicara”?
LOL. Batu? Jika ia hanya bercakap: beberapa ekspresi kening dan beberapa gerakan mulut yang mudah. Untuk saya memberitahu anda lebih lanjut, anda perlu menjadi seorang klien!
Apakah aliran kerja yang disyorkan untuk bekerja dengan rig FACS?
Buat senarai semak. Sediakan dokumentasi di tangan. Terdapat begitu banyak ekspresi dan pilihan sehingga mudah untuk terlupa perkara-perkara atau menjadi berulang dengan pergerakan yang sama.
Apakah ungkapan utama (AU) yang akan anda gunakan jika anda ingin mencipta sistem bentuk campuran yang paling dioptimumkan (contohnya, jika anda mempunyai permainan dengan sumber yang sangat terhad)? Seberapa banyak sistem ini boleh anda kurangkan pada bentuk paling asasnya?
Bergantung pada permainan. Permainan itu tentang apa? Bagaimana rupa watak-wataknya? Apa yang anda mahu penonton anda rasakan dan alami?
Pemodelan
Bagaimana FACS berkaitan dengan bentuk campuran? Dan adakah unit tindakan mesra prestasi untuk permainan?
Bentuk Blend biasanya berdasarkan bentuk FACS atau gabungan pelbagai bentuk FACS. Banyak syarikat permainan menggunakan FACS untuk teknologi dan animasi mereka. Anda boleh menyediakan pengawal yang mewakili unit tindakan.
Adakah terdapat nuansa khusus dalam menggunakan FACS apabila mencipta watak yang bergaya namun realistik seperti Alita dari Alita Battle Angel?
Sudah tentu. Setiap kali anda mengubah struktur muka, terdapat cabaran dalam menterjemahkan pergerakan dan memindahkan penanda muka penting.
Model pemodel wajah manakah yang mempunyai representasi FACS paling tepat? Saya biasa dengan Character Creator dan FaceBuilder.
Kini saya menyediakan penilaian alat atas dasar keperluan untuk pelanggan. Sila hubungi saya jika anda ingin bekerjasama: facetheFACS@melindaozel.com
VFX
Dalam dunia animasi/VFX, kami sering bekerja dengan watak yang parah dan cacat. Adakah anda telah mengkaji kes kecederaan dan bagaimana ia boleh menjejaskan FACS?
Saya telah mengkaji beberapa keadaan kecederaan dan penyakit terpilih yang mempengaruhi ekspresi wajah. Setakat ini, kajian paling banyak yang telah saya lakukan adalah mengenai sesuatu yang dipanggil globe luxation – satu keadaan di mana mata anda boleh menonjol dengan ketara keluar dari rongga mata (iaitu terkeluar dari wajah anda). Ia boleh disebabkan oleh penyakit tiroid atau trauma kepala. Terdapat begitu banyak kes menarik lain untuk dikaji. Saya jalani satu hari pada satu masa! Jika ada jenis parut atau kecederaan tertentu yang anda ingin lihat, emel saya di facetheFACS@melindaozel.com
Adakah anda mempunyai sebarang petua untuk mengelakkan perasaan “aneh” pada haiwan yang bercakap, seperti cara menerapkan pergerakan antropomorfik tanpa menimbulkan rasa ganjil? Sebagai contoh, perbezaan antara filem Planet of the Apes dan Lion King?
Jika anda menjadikan seekor singa kelihatan persis seperti singa tetapi bercakap dan menyanyi Sama seperti manusia, ia akan kelihatan pelik. Tiada banyak yang boleh anda lakukan selain berkompromi pada realisme. Secara peribadi, saya berharap trend meniru klasik animasi lama menjadi semula jadi fotorealistik akan berhenti. Di samping perasaan peribadi, jika saya memakai topi kerja, terdapat beberapa helah dan kompromi yang boleh dilakukan untuk mengurangkan rasa pelik itu – tetapi saya tidak fikir ia boleh dihapuskan sepenuhnya. Bagi Planet, ia jauh lebih mudah untuk menganimasikan haiwan dengan ciri-ciri serupa manusia.
Adakah terdapat bentuk/postur manusia FACS tertentu yang anda fikir industri VFX sukar untuk capai dalam watak fotorealistik?
Yang paling ketara yang saya lihat ialah pembangkit pipi dan penyekuk hidung; terdapat banyak bentuk halus lain yang juga boleh diperbaiki.
Teknologi
Bagaimana anda membandingkan FACS dengan apa yang dilakukan dalam pembelajaran mendalam?
Kebanyakan syarikat penjejakan muka dan penjejakan emosi bergantung kepada FACS untuk pembelajaran mesin. Mereka menggunakan FACS untuk merancang saluran data mereka. Mereka mengumpul data dengan ekspresi berasaskan FACS. Mereka melatih mesin mereka dengan pengelasan berasaskan FACS, dan sebagainya. Walaupun anda tidak menggunakan pendekatan berasaskan FACS, anda masih memerlukan FACS untuk mengenal pasti dan berkomunikasi kawasan kegagalan bagi menilai keperluan data untuk memperbaiki teknologi tersebut.
Adakah terdapat sebarang set data FACS sedia ada yang boleh kami gunakan untuk melatih model pembelajaran mesin dengan wajah dan ucapan?
Berdasarkan pengalaman saya bekerja dalam teknologi penjejakan wajah, kebanyakan set data dipenuhi dengan data tidak tulen. Anda perlu dapat meneliti data tersebut dan membersihkan banyak sampah. Jika anda mempunyai sumber, disyorkan untuk mewujudkan sistem pengumpulan dan pelabelan data dalaman. Jika anda sedang membina pasukan data anda sendiri, sila baca Bias dalam Penjejakan Emosi.
Adakah anda mengesyorkan mana-mana aplikasi yang dapat mengekstrak FACS dengan mantap? Bolehkah anda mengesyorkan mana-mana aplikasi untuk ekstraksi FACS?
Jika dengan aplikasi yang mengekstrak FACS anda bermaksud – pengesan/penjejak FACS automatik – saya katakan tidak. Saya tidak mengesyorkan mana-mana aplikasi dengan kuat. Sesetengah aplikasi boleh mengesan ekspresi yang sangat mudah dan berintensiti tinggi; bagaimanapun, mereka sering gagal mengesan ekspresi yang halus atau berlapis. Saya rasa kita masih jauh daripada sesuatu yang benar-benar mantap, terutamanya disebabkan kecuaian data oleh kebanyakan syarikat teknologi terkemuka. Baca lagi di sini dan di sini.
iPhones mempunyai 52 ekspresi, adakah itu mencukupi untuk animasi yang baik? Jika tidak, bagaimana anda menggunakan iPhone untuk menambah lebih banyak bentuk FACS?
Adakah anda mahu watak yang separa bergaya hingga sangat bergaya dengan gerakan asas? Jika ya, ia mungkin boleh. Jika anda mahu watak yang lebih fotorealistik dan ekspresif, ia tidak akan membawa anda ke tahap kualiti yang anda perlukan. Sebagai seseorang yang lebih fokus pada pengamatan dan kritikan, saya tidak dapat memberitahu anda cara menambah lebih banyak bentuk FACS; bagaimanapun, saya sedia untuk perundingan jika anda ingin memberitahu saya keperluan watak anda / apa yang anda ingin capai dari segi ekspresi / bentuk apa yang perlu anda tambah untuk mendapatkan apa yang anda mahukan: facetheFACS@melindaozel.com
Kita sedang menyaksikan ledakan avatar langsung 3D, tetapi mereka kekurangan banyak ekspresi wajah. Bagaimana anda fikir kita boleh meningkatkan persembahan manusia digital secara masa nyata?
Terdapat dua bahagian dalam hal ini:
1. Teknologi itu.Teknologi penjejakan wajah belum sepenuhnya berada di tahap yang kita inginkan. Avatar langsung yang berjaya boleh dihasilkan dengan mengharmonikan teknologi dengan seni. Penyelidikan dan pemerhatian meluas perlu dijalankan untuk menilai bagaimana teknologi penjejakan bertindak balas terhadap pelbagai wajah. Selain itu, matlamat avatar perlu dinilai. Berdasarkan konteks, ekspresi apakah yang menjadi keutamaan? Bergantung pada situasi penggunaan avatar, pelbagai ekspresi akan mempunyai tahap keutamaan yang berbeza.
2. Seni. Walaupun teknologi itu belum berada di tahap yang kita mahukan, anda boleh meniru sebahagian daripadanya melalui seni. Meniru melalui aspek seni boleh dilakukan setelah anda mempunyai idea yang jelas tentang apa yang tidak berfungsi dalam teknologi dan apa yang anda ingin keutamakan untuk ekspresi avatar anda. Ketika saya di Meta, saya bekerja dengan intensif menggunakan data dan mengkaji bagaimana teknologi itu berfungsi pada pelbagai wajah. Keupayaan untuk mengenal pasti kekurangan tersebut membolehkan saya bekerjasama dengan berkesan dengan seorang pemodel untuk menyembunyikan isu berulang melalui aspek seni. Kebanyakan avatar yang kelihatan berjaya dicapai dengan menyembunyikan isu teknikal melalui seni.
Bagaimana aksen yang berbeza boleh disokong oleh FACS, dan bagaimana sebutan yang berbeza mempengaruhi ekspresi/gerakan wajah bagi watak bergaya?
Unit bunyi terkecil yang bermakna dalam bahasa lisan dipanggil fonem. Bahasa yang berbeza terdiri daripada set fonem yang berbeza. Dalam seni dan teknologi pertuturan, fonem dikelompokkan berdasarkan rupa mereka semasa dihasilkan. Dengan kata lain, fonem dikelompokkan berdasarkan bentuk umum yang dibentuk oleh mulut kita untuk menghasilkan bunyi tersebut. Fonem yang dikelompokkan secara visual ini dirujuk sebagai visem. Satu contoh fonem berbeza yang membentuk satu visem tunggal ialah bunyi bilabial: B, M, dan P. Walaupun B, M, dan P adalah fonem berbeza, apabila kita menghasilkan bunyi-bunyi tersebut, bibir kita pada dasarnya mengambil konfigurasi yang sama. Penghasilan bunyi B, M, dan P kelihatan sama; oleh itu, B, M, dan P membentuk satu visem. Bentuk FACS boleh digunakan untuk mewakili visem secara kasar, walaupun butiran yang lebih halus mungkin terlepas (dibincangkan di akhir jawapan ini).
Aksen timbul apabila fonem yang berbeza digunakan pada perkataan yang sama. Sebagai contoh, pertimbangkan perkataan “car.” Versi Bahasa Inggeris Amerika menyebut bunyi “a” dalam “car” secara berbeza daripada versi Bahasa Inggeris British; oleh itu, Bahasa Inggeris Amerika menggunakan fonem yang berbeza. Selain itu, versi Bahasa Inggeris Amerika menyebut bunyi "r" manakala versi Bahasa Inggeris British tidak.
Walaupun “car” adalah perkataan yang sama dengan makna yang sama dalam Bahasa Inggeris Amerika dan British, sebutannya terdiri daripada fonem yang berbeza bergantung pada jenis Bahasa Inggeris yang digunakan.
Jika bentuk FACS digunakan untuk membentuk rangka visem, dan satu perkataan yang diucapkan dengan loghat berbeza terdiri daripada fonem yang berbeza, maka perkataan itu juga sering terdiri daripada visem yang berbeza. Formula visem yang berbeza bermakna bentuk FACS yang berbeza boleh digunakan pada perkataan yang sama di bawah loghat yang berbeza. Pemecahan ini bermakna sangat penting untuk mempertimbangkan bunyi pertuturan dan pilihan fonem dalam perkataan – bukan huruf yang membentuk perkataan itu sendiri.
Isu utama dengan FACS dan pertuturan akan timbul daripada fonem yang dihasilkan di luar mekanik ekspresi wajah – contohnya bahasa guttural. Selain itu, FACS secara amnya mempunyai beberapa pautan yang hilang apabila berkaitan bentuk pertuturan – walaupun untuk Bahasa Inggeris Amerika. Kekurangan inilah sebabnya saya telah mentakrifkan unit sub-tindakan seperti “pengencang bibir menegak” dan “pembentuk lekukan paksi-Y.” (Lihat Lembaran Cheat FACS untuk butiran.
Kerja Saya
Adakah anda melakukan senaman muka? Jika ya – berapa kerap?
Saya berlatih hampir setiap hari. Bergantung pada kawasan muka yang saya pelajari pada masa itu, apa yang saya berlatih berubah. Saya tidak menjalani keseluruhan rangkaian tindakan FACS setiap hari, tetapi saya pasti sentiasa menggerakkan beberapa otot muka!
Apakah proses untuk mendapatkan ulasan portfolio?
Lihat milik saya Ulasan Portfolio halaman 😀
Adakah anda memainkan sebarang peranan dengan MetaHumans Epic?
Saya telah melakukannya! Saya bekerjasama dengan beberapa pasukan mereka untuk memperbaiki rig melalui latihan dan perundingan anatomi wajah. Keputusannya sepatutnya dapat dilihat apabila keluaran produk yang lebih baru dikeluarkan.
Secara spontan, adakah terdapat mana-mana filem atau permainan video yang andaundingkan dan anda amat banggakan?
Ya! Saya sangat bangga telah menjadi sebahagian daripada dua pelancaran filem teras AI yang penting. Saya bekerja dalam proses pemudaan Tom Hanks, Robin Wright, dan Paul Bettany dalam filem Robert Zemeckis. Di sini, dan saya telah bekerja pada teknologi sinkronisasi bibir untuk Pantau langit. Saya juga berbangga dapat bekerja pada reka bentuk emoji untuk Meta, produk yang digunakan oleh lebih daripada satu bilion orang!
Adakah terdapat projek yang lebih bermakna bagi anda berbanding yang lain (dramatik/komedi, bergaya/fotorealistik, VR/2D)?
Sebagai seorang perunding, saya menikmati kedua-dua projek bergaya dan fotorealistik. Setiap satunya mempunyai cabaran tersendiri. Begitu juga dengan drama dan komedi! Sebagai penonton, saya lebih suka komedi dan projek bergaya.
Pelbagai
Bagaimana anda akan mendekati ekspresi wajah zombi?
Saya akan memperuntukkan ekspresi wajah zombi untuk pergerakan fungsi yang diperlukan untuk makan dan menyerang, kerana dalam sastera zombi klasik itulah terutamanya yang mereka lakukan! Rahang dan mulut akan menjadi keutamaan. Anda juga boleh mengubah cara pergerakan tersebut berfungsi berdasarkan tahap kemerosotan yang berbeza.
Sebagai jurugambar potret, saya tertanya-tanya di manakah FACS sesuai dalam kerja saya. Adakah ia berguna untuk merancang sebelum sesi penggambaran atau menganalisis imej akhir untuk melihat mana satu yang paling baik menyampaikan emosi yang anda inginkan? Adakah FACS akan menghilangkan kejujuran?
Sebagai seorang jurugambar, saya tidak akan mengatakan anda perlu menjadi pakar FACS, tetapi mempunyai mata untuk mengesan ekspresi kaku, palsu atau tidak selesa boleh berguna terutamanya apabila (1) memutuskan rakaman mana yang hendak dipilih untuk pelanggan anda dan (2) membantu model anda kelihatan lebih santai.
Saya pernah menjadi model untuk jurugambar potret, dan kesedaran wajah yang baik membolehkan saya berpose dengan lebih baik. Sebagai contoh, saya menyedari perkara seperti – menahan pose terlalu lama mengaktifkan otot tambahan yang saya tidak mahu muncul dalam gambar saya; jadi saya akan memastikan saya mempunyai komunikasi yang baik dengan jurugambar saya / tahu bila mereka boleh mengambil gambar. Mengetahui bila mereka akan mengambil gambar membantu saya membuat pose pada masa yang tepat dan menjadikan ekspresi kelihatan lebih semula jadi. Saya juga dapat mengurangkan ekspresi gugup dengan mengendurkan wajah apabila saya merasakan ia menegang.
Perkara yang serupa juga boleh dilakukan di pihak jurugambar. Jika anda tidak secara semula jadi mahir membaca ekspresi atau mood orang, FACS mungkin sangat bermanfaat. Saya telah bekerjasama dengan ramai jurugambar yang tidak mempunyai mata semula jadi untuk mengesan ketidakselesaan dalam pose, dan mereka pasti boleh menggunakan sedikit pengetahuan teknikal FACS.