私と一緒に働きませんか
フェイシャルシステムおよびパフォーマンスサービス
映画、ゲーム、AI、ロボット工学分野のチーム向けトレーニングおよびコンサルティング。チーム教育、パイプラインの整合、データインフラ、モデル評価。.
これまで一緒に仕事をしてきたチーム
私が一緒に仕事をしている人々
画面上、モデル内、あるいはロボットにおいて、顔の構築、修正、評価を行うチーム。.
映画・ゲーム
アニメーション、リギング、キャラクター各チーム向け。.
- リグとブレンドシェイプのレビュー
- リップシンクおよび音声システム
- 生き物や人間以外のキャラクターのための表現システム
- FACSおよび顔面解剖学に関するチーム研修
AIと機械学習
顔追跡、アバター、生成型動画モデルを開発しているチーム向け。.
- 発現タクソノミーとアノテーション基準
- アノテーターの研修
- データ収集および取り込みの計画
- モデル出力の専門家によるレビュー：表情とリップシンク
ロボティクス
ヒューマノイドロボットやスタイライズドロボットの顔デザインを手掛けるチーム向け。.
- リアルタイム制御のための表情・ポーズライブラリ
- 形状監査と共同活性化ルール
- リップシンクと発話時の口の動き
- 顔面解剖学およびFACSに関するワークショップ
コンサルティング
顔認識システムの設計、修正、評価を行うチーム向け。.
発現データ
表情データシステムの設計と評価.
- データ収集戦略
- ラベリング・ロジック
- 信頼性の高いトレーニングと分析のためのROMデザイン
リグのアーキテクチャ
表情の信頼性を高めるフェイシャルシステムの設計と補正。.
- リグ、ブレンドシェイプ、矯正の評価
- 形状の粒度、分割、標準的なFACSを超える拡張に関するガイダンス
音声のダイナミクス
音声駆動型フェイシャルモーションシステムの評価と設計。.
- 内部のフォネムおよびヴィゼム戦略
- システム監査
- 自動パイプラインとハイブリッドパイプラインのトレーニング
研修・ワークショップ
フェイシャルシステムを構築するチームのための専門トレーニング。.
- アニメーションおよび技術分野向けのFACS、顔面解剖学、リップシンク指導
- リグ、形状、および顔の動きを評価するための共通言語
- 集中講義から数日間にわたるワークショップまで、さまざまな形式
主な作品
映画・テレビ
ここに トム・ハンクス、ロビン・ライト、ポール・ベタニーのAIによる若返り処理に向け、肖像の提供や若返りのディレクション、およびトレーニングデータの選定・提供を行いました。.
空を見よ AIによるビジュアル吹き替えにおける発話とリップシンクの評価フレームワークおよび品質指標を設計した。.
ジェーン (Apple TV+) 本作に登場するCGチンパンジー「グレイビアード」の表情レパートリーを開発し、300種類以上の感情表現を実現した。詳細は ニューヨーク・タイムズ.
ジジ＆ネイト Axis Studios社のデジタルダブル・カプチン向けに、FACSを用いた発現システムを開発した。これについては、以下のメディアで取り上げられた。 アニメーションUK.
AIと顔追跡
Meta、Quest Proの顔追跡機能 顔追跡チームの創設メンバー。目、口、顔全体の表情分類体系およびアノテーション基準を策定し、それらを大規模に適用する外部委託のアノテーションチームを指導した。データ収集戦略の策定にも携わった。.
特許 共同発明者（以下） アバター・アニメーションにおける3つの特許 および表情の追跡。.
ロボティクス
デフォルメされたロボットの顔 アートチームと共同で、ロボットのAIによる実行時制御を目的としたモジュール式の表情・ポーズライブラリを開発しました。このライブラリは、音声や感情的な文脈に合わせて、AIがリアルタイムで表情を選択・組み合わせる仕組みとなっています。.
機械式ロボットの顔 顔の形状セットの検証を行いました。共同活性化ルールを定義しました。これは、どの形状が同時に発火し得るか、どの組み合わせを推奨または制限すべきか、および発話に使用される形状ラベルを定めたものです。.
テーマパーク向けロボット技術企業 多職種チームを対象に、顔面解剖学とFACSに関する3日間のワークショップを主導した。.
トレーニング
スタジオでのトレーニング Epic Games、ILM、Netflix、Blizzard、Larian、Rodeo FXの各チームに対し、顔の解剖学、FACS、リップシンクに関するトレーニングを実施しました。.
一緒に働くことになるのは誰か
メリンダ・オゼル
私は、アニメーション、AI、ロボティクスの分野を横断して活動するフェイシャルシステムの専門家です。Meta Quest Proの顔追跡チームの創設メンバーであり、アバターアニメーションに関する3件の特許の共同発明者でもあります。映画やテレビでの実績としては、AIを用いた若返り処理などがあります。 ここに, AIリップシンクをオンに 空を見よ, 、および『』に掲載されたCGチンパンジーの300反応からなる発現レパートリー ジェーン.
質問
チームからは通常、どのような問題を持ち込まれますか？
明らかな原因がないのに不自然に見える表情、セリフとずれてしまうリップシンク、アノテーターごとに異なるラベル、そして不気味の谷に陥ってしまうロボットのような顔。.
いつお呼びすればよろしいでしょうか？
できるだけ早い段階で。表現の分類体系、形状セット、キャプチャ計画といった決定事項は、データ収集やリグの構築を始める前に適切に整えておけば、作業も簡単でコストも抑えられます。また、すでに運用中のシステムの修正作業も行っています。.
婚約はどのように始まるのでしょうか？
プロジェクトの内容を把握するための簡単な電話打ち合わせを行います。その後、範囲、成果物、スケジュール、価格を盛り込んだ書面による提案書をお送りいたします。.
ご利用を開始するには、弊社に何をお願いすればよろしいでしょうか？
リグの形状、モデルの出力結果、データサンプル、ロボットの映像など、現在取り組んでいる内容の具体例に加え、目標や制約条件についてもご提示ください。.
作業の料金はどのように決まるのですか？
ほとんどのプロジェクトは、範囲が固定されており、成果物とスケジュールが定められています。継続的な作業や反復的な作業については、時間単位で請求される場合があります。.
成果物にはどのようなものがありますか？
プロジェクトによって異なりますが、アノテーション付きレビューレポート、形状および姿勢の仕様書、アノテーションガイドライン、評価基準、あるいはトレーニング資料や記録映像などです。.
すでに思い描いているプロジェクトはありますか？
あるいは、単に具体的な質問があるだけかもしれません。いずれにせよ、まずはここから始めてください。.
facetheFACS@melindaozel.com