Převod ARKitu na FACS Tahák
- Melinda Ozel
- Vydáno: 1. května 2022
- Aktualizováno: 16. února 2025
Vítejte v taháku ARKit to FACS! Zde najdete rozpis, jak převést tvary obličeje ze systému ARKit na jejich ekvivalenty v systému FACS (Facial Action Coding System). Vzhledem k obtížím při rozlišování podobných tvarů FACS a také kvůli nedostatku jasných vysvětlení v devkitu společnosti Apple existuje mnoho chybných překladů ARKitu do FACS. Dávejte si pozor. Tento průvodce má za cíl vyjasnit nejasnosti a napravit časté omyly!
Přejděte dolů a přejděte rovnou na Cheat Sheet.
Potíže se sadami nástrojů pro vývoj rozšířené reality
Pokud vy nebo váš tým používáte open-source sady pro sledování obličeje k:
- animovat obličeje
- překrytí virtuálního obsahu
- vytvářet události založené na výrazu
. . zjistit, co je co, může být náročné - zejména pokud vy nebo váš tým nemáte silné zázemí v:
- výrazy obličeje
- sledování obličeje
- systém FACS (Facial Action Coding System).
Nejasně definované pojmy
Sady pro vývoj softwaru pro sledování obličeje (SDK) mohou být z mnoha důvodů matoucí. Velkou měrou k tomuto zmatku přispívá nedostatek podrobné dokumentace, která je uživatelům k dispozici.
Lidská mimika je složitá a plná nuancí. Pochopit, jak rozpoznat a rozdělit výrazy, není vždy jednoduché ani intuitivní. Navzdory této skutečnosti poskytují sady pro sledování obličeje ve svých knihovnách často pouze minimalistické definice tvarů výrazů.
Minimálně definované tvary výrazů:
- vytváří prostor pro chybnou interpretaci ze strany uživatele.
- zvyšují pravděpodobnost, že si uživatelé spletou podobně vypadající tvary.
- omezit možnosti uživatele účinně používat produkt.
Obcházení nejasností
Tvary výrazu ve většině produktů pro sledování obličeje (navzdory jejich názvům) jsou primárně založeny na FACS. Pro ty, kteří mohou být skeptičtí: Pokud tedy sada pro tvorbu obličeje zcela nezničila základy anatomie lidského obličeje, všechny tvary budou mít ekvivalenty FACS.
Pokud chcete lépe porozumět produktům pro sledování obličeje, které používáte, měli byste se seznámit s FACS.
Pojmenování FACS je standardizované. FACS je konzistentní. Každý tvar FACS má podrobný, dobře definovaný a důkladně prozkoumaný popis. Pokud se dobře orientujete v systému FACS, můžete se vybavit nástroji, které potřebujete ke kompenzaci nejednoznačnosti většiny expresních knihoven.
Pokud chcete mít přehled o tvarech výrazů obličeje v ARKitu, je tento dokument určen právě vám, ať už jste znalí FACSu, nebo ne 🙂
Průvodce
RYCHLÁ TABULKA
Štítek ARKit
odpovídající název (názvy) FACS
odpovídající sval(y)
odkaz
browInnerUp
AU 1 - vnitřní zvedák obočí
frontalis, mediální část
browOuter (vlevo a vpravo)
AU2 - vnější obočí
frontalis, laterální část
browDown (vlevo a vpravo)
AU4 - snižovač obočí
corrrugator supercilii, depressor supericilii, procerus
eyeWide (vlevo a vpravo)
AU5 - nástavec na horní víčko
levator palpebrae superioris
cheekSquint (vlevo a vpravo)
AU6 - zvedák na tváře
orbicularis oculi, orbitální část
eyeSquint (vlevo a vpravo)
AU7 - utahovák víka
orbicularis oculi, palpebrální část
eyeBlink (vlevo a vpravo)
AU45 - blikání
uvolnění levator palpebrae superioris a kontrakce palpebrální části orbicularis oculi.
eyeLookUp (vlevo a vpravo)
M63 - oči vzhůru
horní přímý a dolní šikmý sval**
eyeLookDown (vlevo a vpravo)
M64 - oči dolů
dolní přímý a horní šikmý sval**
eyeLookIn (vlevo a vpravo)
AU66 - křížové oko (pokud se použije na obě oči současně); jinak musí být eyeLookInLeft spárováno s eyeLookOutRight pro pohled doprava (FACS M62), zatímco eyeLookInRight musí být spárováno s eyeLookOutLeft pro pohled doleva (FACS M61).
mediální rektus**
crosseye
pohled doprava
eyeLookOut (vlevo a vpravo)
AU65 - valoun (při aplikaci na obě oči najednou); viz výše pro pohled vlevo a vpravo.
laterální rektus**
walleye
POZNÁMKA: Ve skutečnosti jsem nemohl udělat valacha, tak jsem si ve Photoshopu upravil pravé oko na obrazovce. Nepoužívejte to jako nějakou legální referenci lol. (Je vidět, že se vnitřní oční dráha nepřirozeně posunula.)
pohled doleva
noseSneer (vlevo a vpravo)
AU9 - vráska na nose
levator labii superioris alaeque nasi
mouthUpper (vlevo a vpravo)
AU10 - zvedák horního rtu
levator labii superioris
mouthSmile (vlevo a vpravo)
AU12 - stahovák rohů rtů
zygomaticus major
mouthDimple (vlevo a vpravo)
AU14 - dimpler
buccinator
mouthFrown (vlevo a vpravo)
AU15 - objímka na rohy rtů
depressor aguli oris
mouthLowerDown (vlevo a vpravo)
AU16 - depresor spodního rtu
depressor labii inferioris
ústaPokrčení ramenHorní
AU17 - zvedák brady - horní dělení
sekundární účinek mentalis
KRITICKÁ POZNÁMKA: mouthShrugUpper je **PODMÍNKOU mouthShrugLower a je použitelná pouze tehdy, když se rty již dotýkají nebo se budou dotýkat vzhledem k intenzitě mouthShrugLower.
Tento rozdíl mi potvrdili bývalí členové společnosti FaceShift (společnost, která vytvořila původní tvary obličejů, z nichž ARKit vychází, než ji Apple odkoupil).
Pokud používáte sadu ICT-FaceKit, přivlastnili si tvar mouthShrugUpper jako "horní rty" a skutečné tvary "horní rty", mouthUpperUp_L a mouthUpperUp_R, chybně přeložili jako "prohloubení nosoretní rýhy".
ústaPokrčení ramenDolní část
AU17 - zvedák brady - spodní rozdělení
mentalis
Viz POZNÁMKA výše v části ÚstaRukávyHorní.
cheekPuff
AD34 - obláček
buccinator
mouthPucker
AU18 - rty
incisivus labii superioris, incsivus labii inferioris
mouthStretch (vlevo a vpravo)
AU20 - nosítka na rty
risorius
mouthFunnel
AU22 - nálevka na rty
orbicularis oris
ÚstíPress (vlevo a vpravo)
AU24 - lis na rty
orbicularis oris
mouthClose
AU8, ale viz poznámky v Komplexní průvodce.
orbicularis oris, ale viz poznámky v části Komplexní průvodce.
mouthRoll (horní a dolní)
AU28 - sání rtů
orbicularis oris
jawOpen
AU26 - pokles čelisti nebo AU27 - roztažení úst
(AU26) uvolnění žvýkacích, spánkových a vnitřních pterygoidních svalů nebo (AU27) postranních pterygoidních a suprahyoidních (předních digastrických, geniohyoidních a mylohyoidních) svalů.
čelist (levá a pravá)
AD30 - čelist na stranu
pterygoidy a temporalis
jawForward
AD29 - tah čelistí
pterygoidy a žvýkací sval
** = Označuje přílišné zjednodušení svalových korelátů. Například svaly související s pohledem jsou mnohem složitější než "superior rectus = oči se dívají vzhůru". Spíše spolupracují v systému relativity. Pro účely této příručky jsou však pohyby přiřazeny k nejrelevantnějším a nejideálnějším svalům.
DALŠÍ POZNÁMKY
ARKitu chybí některé důležité akce pro každodenní vyjadřování a emoce. Mezi chybějící oficiální tvary FACS patří:
- AU11 - prohloubení nosoretní rýhy - zygomaticus minor
- AU13 - stahovák ostrých hran - levator anguli oris
- AU23 - zpevňovač rtů - orbicularis oris
- AU38 - dilatátor nosních dírek - dilatátor naris
- AU39 - kompresor nosních dírek - depressor septi & transverse nasalis
Další chybějící tvary:
- vertikální utahovák rtů - orbicularis oris - *Další informace naleznete v tabulce FACS Cheat Sheet.
DALŠÍ ZDROJE
- Další odkazy a informace o systému FACS (Facial Action Coding System) naleznete na stránce Tahák FACS.
- Podívejte se na můj příspěvek o spolupráci s produktovou designérkou Pooyou Deperson: Základní průvodce vytvářením 52 obličejových blendshapes v ARKitu! Tento průvodce (za což patří velké poděkování Pooyi) je plný vizualizací, které jasně ilustrují funkci obličejových blendshapes ARKitu.
