ARKitからFACSへ:ブレンドシェイプ・チートシート

ARKit to FACSチートシート

ARKit to FACS Cheat Sheetへようこそ!ここでは、ARKitの顔形状をFacial Action Coding System (FACS)に変換する方法を説明します。似たようなFACSシェイプを区別するのは難しく、Appleのdevkitに明確な説明がないため、ARKitからFACSへの誤訳が多く出回っています。ご注意ください。このガイドは、混乱を解消し、よくある誤解を解くことを目的としています!

下にスクロールしてカンニングペーパーをご覧ください。

AR開発ツールキットの難しさ

あなたやあなたのチームがオープンソースのフェイストラッキングキットを使用している場合。

  • 生気のある顔
  • オーバーレイ仮想コンテンツ
  • 式ベースのイベントを作成する
  •  

.を把握することは、特にあなたやあなたのチームに強力なバックグラウンドがない場合、困難な場合があります。

  • 表情
  • 顔面追跡
  • 顔動作符号化システム(FACS
  •  

曖昧に定義された用語

フェイストラッキングソフトウェア開発キット(SDK)は、いくつかの理由で混乱を招く可能性があります。この混乱の大きな原因は、ユーザーが利用できる詳細なドキュメントが不足していることです。

人間の表情は複雑で、ニュアンスに富んでいます。表情を識別し、分解する方法を理解することは、必ずしもシンプルで直感的なものではありません。このような現実にもかかわらず、フェイストラッキングキットは、ライブラリに含まれる表情形状の最小限の定義しか提供していないことが多いのです。

最小限の表現形状。

    • は、ユーザーに誤解を与える可能性があります。
    • 似たような形状を混同する可能性が高くなります。
    • ユーザーが製品を効果的に使用する可能性を制限してしまうこと。

曖昧さを回避する

ほとんどのフェイストラッキング製品の表情形状は、(その名前に反して)主にFACSをベースにしています。半信半疑の方もいらっしゃるかもしれません。FACSは解剖学に由来しているので、顔キットが人間の顔の解剖学の基礎を完全に消滅させない限り、すべての形状はFACSに相当するものである。
もし、あなたが使用しているフェイストラッキング製品への理解を深めたいのであれば、FACSについてよく理解しておく必要があります。

FACSのネーミングが標準化されています。FACSは一貫しています。各FACSの形状は、詳細で、よく定義された、深く研究された記述を持っています。FACSに精通していれば、ほとんどの発現ライブラリーの曖昧さを補うために必要なツールを自分で装備することができます。

FACSに詳しい人もそうでない人も、ARKitの顔の表情の形状を分かりやすく知りたいなら、この資料がおすすめです🙂。

ガイド

QUICK TABLE

ARKitラベル

対応するFACS名(複数可)

おうとうきん

参照

ブロウインナーアップ

AU 1 - インナーブロウレイザー

前頭葉, 内側部分

眉をひそめる女

ブロウアウター(左・右)

au2 - 外側の眉毛レイザー

前頭葉、外側部分

眉根を寄せる女

ブローダウン(左・右)

AU4 - 眉毛を下げる

上腸骨波紋、上腸骨下垂体、前腸骨波紋

眉をひそめて怒る女

アイワイド(左・右)

AU5 - 上蓋レイザー

上顎手根膜

目を見開く女性のアップ

チークスクインツ(左・右)

au6 - チークレイザー

眼輪筋

目で笑う女

アイスクインツ(左右)

AU7 - フタ締め

眼輪筋、口蓋部

目を細める女性のアップ

アイブリンク(左・右)

AU45 - 点滅

上唇挙筋の弛緩と眼輪筋の口蓋部の収縮

AU45 - まばたき - 眼輪筋 - GIF - アニメーション - Facial Action Coding System - FACS

eyeLookUp(左・右)

M63 - アイズアップ

上直筋と下斜角筋**。

eyeLookUp - ARKitリファレンス

eyeLookDown(左・右)

M64 - 視線ダウン

下直筋と上斜角筋**。

eyelookdown ARkitリファレンス

eyeLookIn (左と右)

AU66 - クロスアイ(両眼に同時に適用した場合)。それ以外の場合、右方向の視線にはeyeLookInLeftとeyeLookOutRightを対にしなければならず(FACS M62)、左方向の視線にはeyeLookInRightとeyeLookOutLeftを対にしなければなりません(FACS M61)。

内側直腸筋**

左目+右目 - クロス目基準

クロスアイ 

左目+右目 - 右方向への視線

右目 

アイルックアウト(左・右)

AU65 - ワレモノ(両眼に同時に当てた場合)、左向きと右向きの視線は上記参照

外側直腸筋**

セイウチ・リファレンス FACS外向き視線

ウォールアイ

ノート:本物のセイゴは無理なので、スクリーン右目をフォトショップで加工しました。これは正規の参考にはしないでね(笑)。(目の内側の軌道が不自然にずれているのがわかるだろう)。

eyelookinright + eyelookoutleft - 左方向の視線 ARKit

左方視線

ノーズスネア(左・右)

au9 - 鼻のシワ

上唇小帯

AU9 - 鼻のしわ - FACS - フェイシャル・アクション・コーディング・システム - 嫌悪感の基準

マウスアッパー(左・右)

AU10 - 上唇レイザー

上顎前突堤

AU10 - upper lip raiser - FACS - Facial Action Coding System

mouthSmile(左・右)

AU12 - リップコーナープラー

大頬骨

AU12 - リップコーナープーラー - FACS - フェイシャルアクションコーディングシステム

口(左右)

の注釈を参照してください。 包括的なガイド.

の注釈を参照してください。 包括的なガイド.

mouthleft - ARKit リファレンス

マウスディンプル(左・右)

AU14 - ディンプラー

ブチネーター

AU14 - ディンプラーFACS

口角炎(左・右)

AU15 - リップコーナーデプレッサー

ちんこ

AU15-リップコーナーデプレッサー-FACS-Facial Action Coding System

mouthLowerDown(左・右)

AU16 - 下唇抑圧器

下腿部抑圧器

AU16-下口唇圧子-FACS-Facial Action Coding System

マウスシュラッグアッパー

AU17 - アゴ上げアッパー・スプリット

メンタリスによる副次的効果

AU17 - FACSではあごを上げるが、ARKitでは口を閉じる。

重要な注意事項mouthShrugUpperは**mouthShrugLowerの上位互換であり、唇がすでに触れているか、mouthShrugLowerの強度のために触れることになる場合にのみ適用される。

私はこの違いを、FaceShift(アップルが買収する前にARKitの元となる顔のシェイプを作った会社)の元メンバーに確認した。

ICT-FaceKitを使用している場合、彼らはmouthShrugUpperを "upper lip raiser "と誤訳し、実際の "upper lip raiser "シェイプであるmouthUpperUp_LとmouthUpperUp_Rを "nasolabial furrow deepener "と誤訳しています。

マウスシュラッグロワー

AU17 - チンレイザー - ロアスプリット

メンタリス

AU17-FACSではあごを上げるが、ARKitでは口を閉じる

mouthShrugUpperセクションの上記注意事項を参照のこと。

ほっぺた

AD34 - パフ

ブチネーター

cheekPuff - ARKit vs AD34 - パフ - FACS

マウスパッカー

AU18 - リップパッカー

いんしん

AU18 - リップパッカー(キス顔) - FACS - Facial Action Coding System

マウスストレッチ(左・右)

AU20 - リップストレッチャー

リソリウス

唇を伸ばす女性の下顔面のクローズアップ

口ファンネル

AU22 - リップファンネラー

烏骨鶏

AU22 - リップファンネラー - FACS - Facial Action Coding System

マウスプレス(左・右)

AU24 - リッププレッサー

烏骨鶏

AU24 - リッププレッサー - FACS - Facial Action Coding System

マウスクローズ

の注釈を参照のこと。 包括的なガイド.

ARKit口閉じリファレンス AKA FACS AU8 - 唇を合わせる

マウスロール(上・下)

AU28 - 唇の吸引

烏骨鶏

AU28 - 口唇吸引 - 口輪筋 - FACS - Facial Action Coding System

ジョウ・オープン

AU26「顎を下げる」またはAU27「口を伸ばす

(AU26) 咬筋、側頭筋、内翼突筋の弛緩、または (AU27) 外側翼突筋と舌骨上筋(前舌骨筋、舌骨筋、舌骨筋)の弛緩。

AU26 - jaw drop - FACS - Facial Action Coding System(顔面動作コーディングシステム

あご(左・右)

AD30 - アゴが横向き

翼状片と側頭筋

AD30 - アゴが横向き - FACS - Facial Action Coding System

ジョーフォワード

AD29 - ジョー・スラスト

翼突筋と咬筋

AD29 - jaw thrust - FACS - Facial Action Coding System(顔面動作コーディングシステム

** = 筋肉の相関関係を単純化しすぎていることを示す。例えば、視線に関連する筋肉は、「上直筋=目を見上げる」よりもはるかに複雑である。むしろ、相対的なシステムで連動しているのです。しかし、このガイドでは、最も関連性が高く理想的な筋肉に動きを合わせています。

その他の注意事項

ARKitには、日常の表情や感情を表現するための重要なアクションが欠けています。欠けているFACS-officialシェイプは以下の通りです。

  • AU11 鼻唇溝形成器 - 小頬骨筋
  • AU13 尖った唇の引き手 - 挙筋角筋
  • AU23 - 唇の引き締め - 口輪筋
  • AU38 鼻孔拡張器 - ダイレーターナリス
  • AU39 ノストラルコンプレッサー - 鼻副鼻腔圧(depressor septi & transverse nasalis)

その他の欠落している形状。

追加リソース

  • FACS(フェイシャル・アクション・コーディング・システム)の詳細については、以下をご覧ください。 FACSチートシート.

スタジオやチーム向けに設計されています

話しましょう。.

facetheFACS@melindaozel.com