Yüz ifadesi ve FACS sorularınız yanıtlandı!
Aşağıda Yüz Eylem Kodlama Sistemi (FACS) ve yüz ifadeleri ile ilgili sık ve seyrek sorulan soruların bir karışımı yer almaktadır. Cevaplar büyük ölçüde animatörler, modelciler, teçhizatçılar ve diğer sanatçıların yanı sıra yüz izleme teknolojisi ve dijital insanlar üzerinde çalışan araştırmacılar ve mühendislere yöneliktir. Çok fazla metin olduğundan, bölümlere göre göz atmanız veya anahtar kelimeleri aramak için Ctrl+F tuşlarını kullanmanız önerilir.
FACS Temelleri
FACS (Facial Action Coding System) nedir?
FACS veya Facial Action Coding System, insan yüzünün görünür hareketlerini adlandırmak ve tanımlamak için tasarlanmış bir sınıflandırma sistemidir. FACS anatomik temelli olduğundan ve ayrıntılı bir şekilde belgelendiğinden, karmaşık yüz ifadelerini objektif ve standart bir şekilde parçalara ayırmamızı sağlar.
Tam açıklama yazısı yakında geliyor!
Öğrenme ve Çalışma İpuçları
Yeni başlayanlara nerede FACS eğitimi almalarını önerirsiniz?
Duruma göre değişir. Eğer sanatçıysanız, bu web sitesi aracılığıyla FACS'yi öğrenebilirsiniz, benim FACS Hile Sayfası, FACS Kılavuzu veya benim FACS Cram Session; ancak, farklı bir kitleye yönelik olarak hazırlanmış 500 sayfalık bir ders kitabını okumak için zaman ve para ($350) harcamaya hazır değilseniz, resmi FACS Kılavuzunda paranızın karşılığını tam olarak alamayabilirsiniz. Kılavuz, sanatçılar için o kadar fazla ilgili bilgi içermeyecektir., çünkü kullanıcıların yapılandırılmış araştırma yöntemleriyle yüz hareketlerini kodlamayı öğretmek için özel olarak tasarlanmıştır.
Davranışsal araştırma yapmak isteyen bir akademisyen veya teknoloji uzmanıysanız, FACS El Kitabı aracılığıyla FACS'yi resmi olarak inceleyin ve eksik görselleri aşağıdakilerle tamamlayın web sitem, FACS Hile Sayfası, ya da benim FACS Cram Session. Akademik araştırmacılar için Erika Rosenberg, hevesli yüz kodlayıcıları için atölye çalışmaları düzenlemektedir.
FACS çok karmaşık görünüyor. Benim gibi öğrenciler nereden ve nasıl başlamalı?
FACS karmaşık görünebilir, ancak gerçek yüz daha da karmaşıktır. Ben yarattım FACS ile YüzleşinÇünkü FACS El Kitabı yoğun olabilir ve dışarıda erişilebilir (veya kaliteli) kaynaklar yoktur. Yukarıda belirtildiği gibi, web sitemdeki kaynaklardan yararlanabilirsiniz, hem ücretsiz ve ödenmiş. Ayrıca daha fazla ücretsiz referans, ipucu ve bilgilendirici gönderi için sosyal medya hesaplarımı takip edebilirsiniz (Instagram: @manicexpression / Twitter: @melindaozel / LinkedIn).
FACS İncil'i var mı? Farklı FACS AU'larının (eylem birimleri) referanslarını nerede bulabilirim?
Gerçek FACS kılavuzu FACS El Kitabı'dır, ancak ben her zaman kendi FACS Hile Sayfası! Bu sayfa temel AU'ları sergilemek için tasarlanmıştır. Şunlar için kombinasyon şekillerim mevcut Premium Üyelerve tüm sosyal hesaplarımda sık sık ücretsiz referanslar yayınlıyorum (Instagram: @manicexpression / Twitter: @melindaozel / LinkedIn). Belirli AU kombinasyonlarını talep etmek için bu sayfanın altındaki formu doldurun.
Sanatçıların ürünlere bakarken bunalmamalarına yardımcı olacak herhangi bir FACS ile Yüzleşin Dil mi? Daha yeşil sanatçılar için, aynı anda çok fazla şekli tetikleyerek hızla sürüklendiklerini fark ederler, bu da karşı canlandırmaya neden olabilir.
Yüzün bölümleri ile başlayın. Kaşlarla başlayın - bunlar en kolay olanlarıdır. FACS isimlerine dikkat edin; ilk başta korkutucu gelebilirler, ancak isimlerinin hareketlerinin tanımını verdiğini fark ettiğinizde, arkadaşınız olurlar! Örneğin - "İç kaş kaldırıcı" ne anlama geliyor? Kaşınızın iç kısmının kalktığı anlamına gelir! FACS ile birlikte temel anatomi çalışın. Şekilleri kendi yüzünüzde uygulama pratiği yapın. Gerçek hayatta ve film / dizi / sosyal medya videoları izlediğinizde hareketleri gözlemlemeye başlayın. Ağız temelli hareketleri en sona saklayın.
Aynı anda çok fazla şekli tetikleyerek kendinizi kaptırmaya gelince - yüz anatomisi ve FACS hakkında temel bir anlayışa sahip olmak, doğal dünyada meydana gelen yaygın hareketleri ve kombinasyonları incelemenizi sağlayacaktır. Gerçek dünya gözlemleri, neyi ne zaman tetikleyeceğinize dair stratejinizi yönlendirmenize yardımcı olacaktır.
FACS'de yetkin olmak için favori kaynaklarınız / eğitimleriniz nelerdir?
Ben yarattım FACS ile Yüzleşin, çünkü resmi FACS Kılavuzu dışındaki kaynaklar neredeyse her zaman yanlış bilgi ve referanslar içerir. Kılavuzun kendisi de bazı yüz hareketleri konusunda belirsiz olabilir. “Dudak sıkma”, “burun-ağız çizgisi derinleştirme”, “burun deliği sıkıştırma” gibi hareketleri gerçekten anlamak için yıllarca kendi kendime çalışıp gözlemledim. Bu web sitesinin amacı, FACS ile ilgili karışıklıkları en aza indirmek ve yanlış yüz haberleriyle mücadele etmektir.
FACS El Kitabı ve Zürih Etkileşim ve İfade Laboratuvarı'nda staj yaptığım süre boyunca mentorlarım Willibald Ruch, Tracey Platt ve Jennifer Hofmann sayesinde FACS konusunda yeterince yetkin hale geldim. Ondan sonra öğrendiğim her şey deneyim, uygulama ve gerçek dünya gözlemlerinden geldi.
Anatomi konusunda yeni başlayanlar için şu kaynakları öneririm:
- İnsanın Yüzü ve Mimik Dili Carl-Herman Hjortsjö tarafından yazılmıştır. Bu ücretsiz, indirilebilir kitap, FACS ve yüz anatomisini anlamak isteyenler için sanatçı dostu bir kaynaktır. Hjortsjö, FACS'ın büyükbabası sayılabilir. Yüz anatomisi ve yüz hareketleri çalışmalarına yaptığı katkılar olmasaydı, FACS şu anki halinin çok küçük bir parçası olurdu. FACS'ın büyük bir kısmı Hjortsjö'nun çalışmalarından alınmıştır, ancak kendisi bu konuda yeterince takdir görmemiştir.
- Sanatçılar için İnsan Anatomisi: Biçimin Unsurları Eliot Goldfinger tarafından. Bu kitabın yüz kaslarını etkili ama basit bir şekilde açıklamasına bayılıyorum. Karşılaştığım en net, en doğru kitap ve aslında yüz kaslarının çeşitliliğini de kabul ediyor. İleri düzey anatomi kaynakları için araştırma makalesi avına çıkmanız gerekecek!
İyi yüz referansları bulmak için önerebileceğiniz herhangi bir kaynak var mı? Konuşan yapay zeka geliştiriyoruz. Animasyon, ifade ve vücut hareketleri üzerinde çalışıyorum. Çalışmalarımızı çoğunlukla manuel olarak yapıyoruz ve karakterlerimiz genellikle doğal görünmüyor.
Benim FACS Hile Sayfası ve tüm web sitesi temel ifadeler, duygular ve davranışlar için referanslarla doludur. konuşma. Danışmanlık hizmetleri veriyorum. Karakterlerinizin daha doğal görünmesi için yardım istiyorsanız.
FACS öğrenmek için en iyi yaklaşım nedir, çok fazla bilgi var. Bunları daha verimli bir şekilde öğrenmek için herhangi bir strateji veya teknik var mı?
En iyi yaklaşım, yüzü bölümlere ayırmaktır, örneğin kaşlar, gözler, yüzün orta kısmı, yüzün alt kısmı. Her bölümü ilk seferinde doğru bir şekilde öğrendiğinizden emin olun. Bu web sitesi tam da bu amaçla oluşturulmuştur. FACS'yi temel düzeyde öğrendikten sonra, bir sonraki adımınız sabırlı olmak olmalıdır. Zamanla, dikkatli bir gözle bakarak her şey anlam kazanacaktır.
13 yılı aşkın bir süredir yüzü inceliyorum ve hala bazı konularda kafam karışık. Anatomistler bile yüz kaslarının sınıflandırılması ve ayrıştırılmasıyla ilgili bazı konularda anlaşmakta zorlanıyor; bu yüzden bir dahaki sefere kendinizi sinirli veya bunalmış hissettiğinizde bunu unutmayın!
Duygular, Davranış ve Kültür
FACS gerçek insan duygularını tanımamıza nasıl yardımcı olur?
FACS, yüz ifadelerini parçalara ayırmamıza ve hangi kasların kullanıldığını tam olarak belirlememize yardımcı olur; kalıpları tanımamıza ve farklı zamanlarda ve farklı durumlarda yüzde neler olduğunu belirlememize yardımcı olur.
Sanatta bir şeyleri parçalara ayırmak ile duyguları ifade etmek için kullanım kolaylığı arasında bir denge var mı?
Birçok yaygın duygu ifadesi aynı yüz hareketlerini paylaşır; bu yüzden projeye bağlıdır. Bazı durumlarda duygu setleri olarak bir araya getirmek hantal ve sınırlayıcı olacaktır. Diğer durumlarda ise faydalı olabilir.
FACS'de kültürel farklılıklar var mı? İfadelerde ve duygu sunumunda bazı farklılıklar olmalı.
FACS, kas tabanlı yüz hareketlerini tanımlayan bir sistemdir. Hepimizin yüz kaslarının şekilleri, boyutları, varlıkları, konfigürasyonları ve güçleri farklı olsa da - kaslarınız kültürünüze bağlı olarak değişmez; ancak, kendinizi ifade etmek için hangi yüz hareketlerini kullandığınız değişecektir ve bu varyasyonlar FACS aracılığıyla ölçülebilir. Yüz davranışlarındaki kalıpları ve farklılıkları belirleme yeteneği, FACS'in ilk etapta geliştirilme nedenidir!
Anatomi
Yüz kaslarının belirli ifadeleri nasıl ürettiğinden bahsedebilir misiniz? Kasların hepsi kemiğe mi bağlanır, yoksa bazıları diğer kaslara veya fasyaya mı bağlanır? Daha karmaşık kas etkileşimlerinden bazıları nelerdir?
Evet, bu konu hakkında günlerce konuşabilirim ve bu sitede bu konuyla ilgili birden fazla yazım var. Hayır, tüm yüz kasları kemiğe bağlı değildir. Bazıları öyle, bazıları değil. Yüz kaslarının nasıl bağlandığı konusunda tonlarca çeşitlilik vardır. Yüz kaslarının çeşitliliği en sevdiğim araştırma konularından biri olduğu için, yüz çeşitliliği hakkında bir bilgi kütüphanesi derledim; ancak, bu araştırmayı elde etmek için harcanan yoğun zaman nedeniyle, bulgularımı ileri düzey dersler veya müşteriler. Bununla birlikte, her yüz hareketinin ardında yatan her bir yüz kasının kökenini ve yerini gösteren bir kopya kağıdı hazırlamayı planlıyorum. Umarım bu yardımcı olur 🙂 !
FACS, kaslar etrafında inşa edilmiş oldukça iyi belgelenmiş bir sistemdir, ancak kasların üstündeki katmanlar hakkında bilgi bulmak zordur. Yüzdeki yağ yastıkları ve cildin kayması veya sarkması gibi şeyler hakkında nasıl daha fazla bilgi edinebileceğimize dair bir tavsiyeniz var mı?
Amin! Bahsettiğiniz konularda kesinlikle erişilebilir kaynaklar eksik. Estetik uzmanı Tim Pearce'ın hayranıyım. Harika işleri var. YouTube kanalında yüz yağlarının parçalanması kanalı. Ayrıca birçok iyi anatomi makalesi de bulunmaktadır. Gözlem gücü ve kendi örneklerinizi belgelemekle asla yanlış yapmazsınız. Yüz anatomisi diyagramlarına bakarken, bunların büyük çeşitlilik gösteren şeylerin basitleştirilmiş temsilleri olduğunu daima unutmayın; bu nedenle, doğal ortamda insanları gözlemlemek ve araştırma makalelerini okumak son derece faydalı olabilir.
Animasyon
Deneklerin yüz animasyonu için FACS yaparken, doğallığı en üst düzeye çıkarmak için her kimlik için özel bir FACS seti oluşturmanız gerekiyor mu?
Karakterleriniz daha gerçekçi bir yelpazedeyse, ifade şekilleri için çeşitlilik seçenekleri oluşturmak çok etkili olabilir. Örneğin, kaşlarımızı kaldırdığımızda alınlarımız farklı şekilde kırışır. Tam kaş kaldırma hareketinin tamamı iç kaş kaldırıcı + dış kaş kaldırıcı hareketlerini içerir, ancak iç kaş kaldırıcı + dış kaş kaldırıcı hareketlerinin her yüzünde ifade edilme şekli kendine özgü özellikler taşır. Bu farklılıkları sınıflandırmak ve gruplandırmak için çeşitli yöntemler vardır ve bu da çeşitlilik ve seçenekler yaratır. Geçmişte stüdyolarla bu tür çözümler geliştirmek için çalıştım ve bunu tekrar yapmaktan memnuniyet duyarım. facetheFACS@melindaozel.com adresinden bana proje önerilerinizi iletebilirsiniz.
Bir FACS haritasına sahip olduktan sonra 3D yüzü canlandırmak için tipik süreç nedir? Konuşan kişinin videosundan -> yoğun yüz işaret haritasını çıkarabilir misiniz -> 3D animasyonlu yüz?
Animatör olmayan biri olarak, tipik sürecin ne olduğunu cevaplayamam; ancak, konuşan insanların videolarından konuşmayı yeniden yaratmaya yönelik otomatik girişimlerin, konuşma için gerekli çeşitli dudak oluşumları için her zaman nüanslı - ancak oldukça güvenilir - hatalara sahip olduğunu söyleyebilirim.
Animasyon ekiplerinin FACS tarzı bir teçhizatı dijital insan boru hattına adapte ederken yaptıkları yaygın hatalar nelerdir?
Yanlış FACS şekillerine sahip olmak en büyük sorundur. Diğer büyük sorunlar şunlardır: 1. Bir şeklin ikincil ve üçüncül hareketlerinin hesaba katılmaması - örneğin hareketin çok izole ve katı tutulması, 2. Animatörlere daha fazla kontrol sağlamak için temel bir hareketin parçalara ayrılması - daha sonra animatörlerin ifadeleri yönlendirirken parçaları yeniden birleştirmeyi hatırlamaması. Daha ince bazı sorunlar arasında kırışıklıklar ve hareket arasındaki uyumsuzluklar, derinlik değişikliklerini hesaba katmayan yüzey seviyesi hareketi vb. sayılabilir.
Çalışmalarınızda keşfettiğiniz ve daha fazla animatörün farkında olmasını istediğiniz "şaşırtıcı" bir şey var mı? Yeni animatörler tarafından gözden kaçırıldığını düşündüğünüz FACS ilkeleri var mı?
Her zaman şaşırtıcı şeyler keşfediyorum! Daha fazla animatörün farkında olmasını dilediğim keşifler açısından - aslında animatörlerin yüz hareketinin temel ilkelerinin farkında olmasını dilerdim. Bir animatörün temel yüz mekaniğinden bihaber olması ve ihtiyaçlarını donanım gibi diğer departmanlara etkili bir şekilde iletememesi büyük bir engel.
İşleri daha da parçalara ayırmak için animatörler tarafından tanımlanan 'alt' eylem birimleri veya daha küçük eylem birimleri var mı?
Kullanım kolaylığı amacıyla yapılmış birçok yarım yamalak "alt" eylem birimi vardır. "Yarım yamalak" diyorum, çünkü bu alt birimler iyi düşünülmez ve dikkatli kullanılmazsa, doğal olmayan yüz hareketlerine neden olabilirler.
Anatomi ile uyumlu meşru dökümlere gelince, eminim vardır. Konuşma hareketlerini daha iyi tanımlamaya yardımcı olmak için kendi alt eylem birimleri listemi parçalamak zorunda kaldım. Animatörler bana ulaşıp gerçekçi bir konuşma yaratmak için aynı hareketleri parçalara ayırdıklarını söylediler. FACS kaynaklarıma eklediğim kritik alt eylem birimlerinden biri de "dikey dudak sıkılaştırıcı" adını verdiğim bir şekil. Google'da ya da benim FACS Hile Sayfası daha fazlasını öğrenmek için.
Arma
Çoğu teçhizatçı FACS teçhizatını karışım şekilleri veya eklemler kullanarak mı oluşturur?
Birlikte çalıştıklarım çoğunlukla karışım şekilleri kullanıyor. Karışım şekilleri size daha kaliteli sonuçlar verir ancak maliyetli ve hantal olabilir. Eklemler daha ucuz ama aynı zamanda daha ucuz görünüyor.
Soruyu tam olarak nasıl ifade edeceğimden emin değilim... Bir kontrol donanımının amacının, bir animatörün hızlı ve verimli çalışabilmesi için karmaşık hareketleri basitleştirmek olduğunu akılda tutarak (aksi takdirde sadece verte'leri canlandırıyor olurduk) - FACS, şeyleri bireysel kas gruplarına (anatomik seviye) ayırmayı vurguluyor gibi görünüyor. Sizce animatörler karmaşık kas gruplarını doğru ve aynı zamanda 'uygun' bir şekilde nasıl kontrol edebilirler?
Uygun şekil kombinasyonlarının duruma göre yapılması gerekecektir. Bu, karakter tasarımı, karakter davranışı, istenen izleyici kitlesi vb. gibi bağlama bağlıdır. Belirli senaryolar için karmaşık şekil oluşturma konusunda animatörlere yardımcı olabilecek araçlar oluşturmak için bir rigger ile çalışmayı çok isterim.
Marvel'ın "What If?" dizisinin bir bölümünde, yüz donanımında yalnızca 5 şekil bulunan bir karakter üzerinde çalıştım. Sizce çeşitli duyguları aktarmak için daha az FACS ile idare edebilecek bir stilizasyon var mı?
Yüz teçhizatında sadece 5 şekil olması şaşırtıcı! Bu pek çok şeyi perspektif içine koyuyor. Bence stilizasyon daha az FACS şekliyle de yapılabilir. Bu karaktere göre değişir. Örneğin, Emojilerin burunları yok; bu da birkaç şekli ortadan kaldırıyor. Hello Kitty'yi canlandırmak isteseydiniz, ağız veya kaş şekilleri konusunda endişelenmenize gerek kalmazdı. Bazı stilize insanlarda, diğer şekillere yeterince benzeyen bir avuç şekli kaldırabilirsiniz. Yine, duruma göre değişir!
Temel bir karakter (belki küçük bir taş koleksiyonu gibi bir şey) inşa etmek, ifade etmek / duygu vermek / "konuşmak" için en önemli ve yararlı 3-5 AU'nun ne olduğunu düşünüyorsunuz?
LOL. Taş mı? Eğer sadece konuşuyorsanız: bazı kaş ifadeleri ve bazı basit ağız hareketleri. Size daha fazlasını anlatabilmem için müşteri!
FACS teçhizatlarıyla çalışmak için önerilen iş akışı nedir?
Kontrol listeleri hazırlayın. Elinizin altında belgeler bulundurun. O kadar çok ifade ve seçenek var ki, bazı şeyleri unutmak / aynı hareketleri tekrarlamak kolay olabilir.
En optimize karışım şekli sistemini yapmak isteseydiniz (örneğin, çok sınırlı kaynaklara sahip bir oyununuz varsa) hangi ana ifadeleri (AU'lar) kullanırdınız? Bu sistemi en temel haliyle ne kadar azaltabilirdiniz?
Oyuna göre değişir. Oyun ne hakkında? Karakterler neye benziyor? İzleyicilerinizin ne hissetmesini ve deneyimlemesini istiyorsunuz?
Modelleme
FACS karışım şekilleri ile nasıl ilişkilidir? Ve aksiyon birimleri oyunlar için performans dostu mu?
Karışım şekilleri tipik olarak FACS şekillerine veya çeşitli FACS şekillerinin bir kombinasyonuna dayanır. Birçok oyun şirketi teknoloji ve animasyon için FACS kullanır. Eylem birimlerini temsil eden kontrolörler ayarlayabilirsiniz.
Alita Battle Angel'daki Alita gibi stilize ama gerçekçi bir karakter yaratırken FACS kullanmanın nüansları var mı?
Tabii ki. Yüzün yapısını değiştirdiğiniz her zaman, hareketlerin nasıl tercüme edileceği ve önemli yüz işaretlerinin nasıl taşınacağı konusunda zorluklar vardır.
Hangi yüz oluşturma modelleyicisi en doğru FACS temsillerine sahiptir? Character Creator ve FaceBuilder'ı biliyorum.
Bugünlerde araçları değerlendirmeyi müşterilerim için ihtiyaca göre ayırıyorum. Birlikte çalışmak isterseniz bana ulaşmaktan çekinmeyin: facetheFACS@melindaozel.com
VFX
Animasyon / VFX dünyasında, genellikle yaralı / şekli bozulmuş karakterler üzerinde çalışırız. Yaralanma vakalarını ve bunların FACS'yi nasıl etkileyebileceğini incelediniz mi?
Yüz ifadelerini etkileyen bir dizi yaralanma ve hastalık durumunu inceledim. Şimdiye kadar en çok araştırma yaptığım konu, gözlerin göz çukurlarından önemli ölçüde dışarı çıkması (yani yüzünüzden dışarı fırlaması) durumu olan globus lüksasyonu. Bu durum tiroid hastalığı veya kafa travması nedeniyle ortaya çıkabilir. İncelenmesi gereken pek çok ilginç vaka var. Her günü tek tek ele alıyorum! Görmek istediğiniz belirli yara izi veya yaralanma türleri varsa, bana e-posta gönderin: facetheFACS@melindaozel.com
Konuşan hayvanlarda "tekinsiz" hislerden kaçınmak için herhangi bir ipucunuz var mı, örneğin antropomorfik hareketlerin garip hisler yaratmadan nasıl uygulanacağı gibi? Örneğin Maymunlar Cehennemi ile Aslan Kral filmleri arasındaki fark gibi?
Eğer bir aslanı tam olarak aslan gibi gösterirseniz ama konuşur ve şarkı söyle tıpkı bir insan gibi, bu garip olacaktır. Gerçekçilikten ödün vermekten başka yapabileceğiniz pek bir şey yok. Şahsen, eski animasyon klasiklerinin fotogerçekçi yeniden yapımlarına dönüştürülmesi eğiliminin sona ermesini diliyorum. Kişisel duygularımı bir kenara bırakırsak, işimi düşünürsek, bu tuhaflığı azaltmak için yapılabilecek bir dizi hile ve ödün vardır, ancak bunun tamamen ortadan kaldırılabileceğini sanmıyorum. Planet'e gelince, insanlara benzer yeteneklere sahip hayvanları antropomorfize etmek çok daha kolaydır.
VFX endüstrisinin fotogerçek karakterlerde ulaşmakta zorlandığını düşündüğünüz belirli FACS insan şekilleri / pozları var mı?
Gördüğüm en dikkat çekici olanlar yanak kaldırıcı ve burun kırıştırıcı; iyileştirilebilecek başka birçok ince şekil de var.
Teknoloji
FACS ile derin öğrenmede yapılanları nasıl karşılaştırırsınız?
Çoğu yüz izleme ve duygu izleme şirketi, makine öğrenimi için FACS'ye güveniyor. Veri hatlarının haritasını çıkarmak için FACS kullanıyorlar. FACS tabanlı ifadelerle veri toplarlar. Makinelerini FACS tabanlı sınıflandırma vb. ile eğitirler. FACS tabanlı bir yaklaşım kullanmasanız bile, teknolojiyi geliştirmek için veri ihtiyaçlarını değerlendirmek amacıyla başarısızlık alanlarını belirlemek ve iletmek için FACS'ye ihtiyacınız vardır.
Yüz ve konuşma ile bir makine öğrenimi modelini eğitmek için kullanabileceğimiz mevcut FACS veri kümeleri var mı?
Teknoloji alanında yüz takibi üzerine çalışırken gördüğüm kadarıyla, çoğu veri kümesi saf olmayan verilerle dolu. Verileri inceleyebilmeniz ve pek çok çöpü temizleyebilmeniz gerekir. Kaynaklarınız varsa, kurum içi veri toplama ve etiketleme sistemleri oluşturmanız önerilir. Kendi veri ekiplerinizi oluşturuyorsanız, lütfen okuyun Duygu Takibinde Önyargı.
FACS'yi sağlam bir şekilde çıkaran herhangi bir uygulama öneriyor musunuz? FACS ekstraksiyonu için herhangi bir uygulama önerebilir misiniz?
FACS çıkaran uygulamadan kastınız - otomatik bir FACS dedektörü / izleyicisi ise - hayır derim. Herhangi bir uygulamayı kesinlikle tavsiye etmiyorum. Bazı uygulamalar çok basit, yüksek yoğunluklu ifadeleri tespit edebilir; ancak genellikle ince veya katmanlı ifadeleri tespit etmekte başarısız olurlar. Özellikle önde gelen teknoloji şirketlerinin çoğunun veri ihmali nedeniyle, gerçekten sağlam bir şeyden çok uzakta olduğumuzu düşünüyorum. Daha fazla bilgi edinin Burada ve Burada.
iPhone'larda 52 ifade var, bu iyi bir animasyon için yeterli mi? Değilse, daha fazla FACS şekli eklemek için bir iPhone'u nasıl kullanırsınız?
Temel hareketlere sahip yarı stilize edilmiş veya çok stilize edilmiş bir karakter mi yaratmak istiyorsunuz? Öyleyse, bu yeterli olabilir. Daha fotogerçekçi ve ifade gücü yüksek karakterler yaratmak istiyorsanız, bu size ihtiyacınız olan kalite düzeyine ulaştırmayacaktır. Daha çok gözlem ve eleştiri tarafında olan biri olarak, daha fazla FACS şekli eklemeyi size anlatamam; ancak, karakterleriniz için neye ihtiyacınız olduğunu, ifade gücü açısından neyi başarmak istediğinizi, istediğinizi elde etmek için hangi şekilleri eklemeniz gerektiğini bana anlatırsanız, danışmanlık hizmeti verebilirim: facetheFACS@melindaozel.com
Bir 3D canlı avatar patlaması yaşıyoruz, ancak çok fazla yüz ifadesi eksik. Sizce gerçek zamanlı dijital insan performanslarını nasıl geliştirebiliriz?
Bunun iki kısmı var:
1. Teknoloji. Yüz izleme teknolojisi tam olarak olmasını istediğimiz yerde değil. Başarılı canlı avatarlar, teknolojiyi sanatla uyumlu hale getirerek yapılabilir. İzleme teknolojisinin farklı yüzlere nasıl tepki verdiğini değerlendirmek için kapsamlı araştırma ve gözlem yapılması gerekiyor. Ayrıca avatarların hedeflerinin de değerlendirilmesi gerekiyor. Bağlama bağlı olarak hangi ifadeler önceliklidir? Avatarların kullanıldığı durumlara bağlı olarak, farklı ifadeler farklı öncelik seviyelerine sahip olacaktır.
2. Sanat. Teknoloji olmasını istediğimiz yerde olmasa da, sanat yoluyla bunun çoğunu taklit edebilirsiniz. Teknolojide neyin işe yaramadığına ve avatar ifadelerinizde nelere öncelik vermek istediğinize dair net bir fikriniz olduğunda bunu sanat yoluyla taklit edebilirsiniz. Meta'dayken veriler üzerinde yoğun bir şekilde çalıştım ve teknolojinin farklı yüzlerde nasıl performans gösterdiğini inceledim. Bu eksiklikleri tespit edebilmek, sanat tarafında yinelenen sorunları maskelemek için bir modelciyle etkili bir şekilde çalışmamı sağladı. En başarılı görünen avatarlar, sanatın teknoloji sorunlarını maskelemesiyle elde edilir.
Farklı aksanlar FACS tarafından nasıl desteklenebilir ve farklı telaffuzlar stilize karakterler için yüz ifadelerini / hareketlerini nasıl etkiler?
Konuşulan bir dildeki en küçük anlamlı ses birimlerine fonem denir. Farklı diller farklı sesbirim kümelerinden oluşur. Sanat ve konuşma tekniğinde, sesbirimler üretildiklerinde nasıl göründüklerine göre gruplandırılır. Başka bir deyişle, fonemler ağızlarımızın onları üretmek için oluşturduğu genel şekillere göre gruplandırılır. Bu görsel olarak gruplandırılmış fonemler şu şekilde adlandırılır visemes. Tek bir vizem oluşturan farklı fonemlere örnek olarak bilabial sesler verilebilir: B, M ve P farklı fonemler olmalarına rağmen, bu sesleri ürettiğimizde dudaklarımız esasen aynı konfigürasyonu alır. B, M ve P'nin üretimi aynı görünür; bu nedenle B, M ve P tek bir vizemi oluşturur. FACS şekilleri bir görüntüyü kabaca temsil etmek için kullanılabilir, ancak daha ince ayrıntılar eksik olabilir (bu cevabın sonunda tartışılmıştır).
Aksanlar, aynı kelimeye farklı fonemler uygulandığında ortaya çıkar. Örneğin, "araba" kelimesini düşünün. Amerikan İngilizcesi versiyonu car kelimesindeki "a" harfini İngiliz İngilizcesi versiyonundan farklı telaffuz eder; bu nedenle Amerikan İngilizcesi farklı bir fonem kullanır Ayrıca, Amerikan İngilizcesi versiyonu "r" harfini telaffuz ederken İngiliz İngilizcesi versiyonu telaffuz etmez.
"Araba" hem Amerikan hem de İngiliz İngilizcesinde aynı anlama gelen aynı kelime olmasına rağmen, telaffuzu hangi İngilizcenin kullanıldığına bağlı olarak farklı fonemlerden oluşur.
Eğer FACS şekilleri bir visemin iskeletini oluşturmak için kullanılıyorsa ve farklı aksanlarla telaffuz edilen bir kelime farklı fonemlerden oluşuyorsa, o zaman bu kelime de genellikle farklı visemlerden oluşur. Değişken viseme formülü, farklı aksanlar altında aynı kelimelere farklı FACS şekillerinin uygulanabileceği anlamına gelir. Bu parçalanma, sözcükleri oluşturan harfleri değil, konuşma seslerini ve sözcüklerin fonemik seçeneklerini dikkate almanın çok önemli olduğu anlamına gelir.
FACS ve konuşma ile ilgili temel sorunlar, yüz ifadesi mekanizmasının dışında üretilen fonemlerden kaynaklanacaktır – örneğin gırtlaksı diller. Ayrıca, FACS genel olarak, konuşma şekilleri konusunda birkaç eksik bağlantıya sahiptir – Amerikan İngilizcesi için bile. Bu eksiklik, “dikey dudak sıkılaştırıcı” ve “y ekseni çukurlaştırıcı” gibi alt eylem birimlerini tanımlamamın nedenidir. (Bkz. FACS Hile Sayfası detaylar için).
Benim İşim
Yüz egzersizleri yapıyor musunuz? Evet ise - ne sıklıkla?
Neredeyse her gün pratik yapıyorum. O sırada yüzün hangi bölgesi üzerinde çalıştığıma bağlı olarak, çalıştığım şey değişiyor. Her gün tüm FACS hareketlerini yapmıyorum ama kesinlikle her zaman bir yüz kasını çalıştırıyorum!
Portföy incelemesi alma süreci nedir?
Benim Portföy İncelemesi sayfa 😀
Epic'in MetaHumans'ında herhangi bir rol oynadınız mı?
Ben yaptım! Yüz anatomisi eğitimi + danışmanlık yoluyla teçhizatı geliştirmek için bazı ekipleriyle birlikte çalıştım. Sonuçlar, ürünün daha sonraki bir sürümü çıktığında görülebilecektir.
Aklınıza gelenler arasında, danışmanlığını yaptığınız ve özellikle gurur duyduğunuz bir film ya da video oyunu var mı?
Evet! Yapay zeka destekli iki önemli filmin yapımında yer almış olmaktan büyük gurur duyuyorum. Robert Zemickis'in filminde Tom Hanks, Robin Wright ve Paul Bettany'nin yaşlarını geri alma çalışmalarına katıldım. İşte, ve dudak senkronizasyonu teknolojisi üzerinde çalıştım. Gökyüzünü İzle. Ayrıca, bir milyardan fazla kişinin kullandığı Meta için Emoji tasarımı üzerinde çalışmaktan gurur duydum!
Size diğerlerinden daha çok hitap eden projeler var mı (dramatik/komedi, stilize/fotorealistik, VR/2D)?
Bir danışman olarak hem stilize hem de fotoreal projelerden keyif alıyorum. Her ikisinin de kendine has zorlukları var. Drama ve komedi için de aynı şey geçerli! Bir izleyici olarak komediyi ve stilizasyonu daha çok seviyorum.
Çeşitli
Zombi yüz ifadelerine nasıl yaklaşırdınız?
Zombi yüz ifadelerini yemek yemek ve saldırmak için gereken işlevsel hareketlere ayırırdım, çünkü klasik zombi edebiyatında esas olarak yaptıkları şey budur! Çene ve ağız öncelikli olacaktır. Ayrıca bu hareketlerin nasıl çalıştığını farklı bozulma seviyelerine göre değiştirebilirsiniz.
Bir portre fotoğrafçısı olarak, FACS'nin işime nasıl uyacağını merak ediyorum. Bir fotoğraf çekimini önceden planlamak veya peşinde olduğunuz duyguyu en iyi hangisinin yansıttığını görmek için son görüntüleri analiz etmek faydalı olur mu? FACS dürüstlüğü ortadan kaldırır mı?
Bir fotoğrafçı olarak, FACS ustası olmanız gerektiğini söyleyemem, ancak sert / sahte / rahatsız edici ifadeler için bir göze sahip olmak, özellikle (1) müşterileriniz için hangi çekimleri seçeceğinize karar verirken ve (2) modellerinizin daha rahat görünmesine yardımcı olurken yararlı olabilir.
Eskiden portre fotoğrafçıları için modellik yapardım ve iyi bir yüz farkındalığına sahip olmak daha iyi poz vermemi sağlardı. Örneğin, bir pozu çok uzun süre tutmanın çekimimde olmasını istemediğim ek kasları harekete geçirdiği gibi şeyleri fark ettim; bu yüzden fotoğrafçımla iyi bir iletişim kurduğumdan / çekimi ne zaman yapabileceklerini bildiğimden emin olurdum. Çekimi ne zaman yapacaklarını bilmek, pozu doğru zamanda vermeme ve ifadenin daha doğal görünmesine yardımcı oldu. Ayrıca gerildiğini hissettiğimde yüzümü gevşeterek gergin ifadeleri azaltabildim.
Benzer şeyler fotoğrafçı tarafında da yapılabilir. İnsanların ifadelerini / ruh hallerini okuma konusunda doğal olarak yetenekli değilseniz, FACS özellikle faydalı olabilir. Pozlardaki rahatsızlığı ayırt etmek için doğal bir göze sahip olmayan birçok fotoğrafçıyla çalıştım ve kesinlikle bazı teknik FACS bilgilerini kullanabilirlerdi.