Отказивања уживо курсева (2027): FACS интензивна сесија и механика синхронизације усана

Ради са мном

Системи за лице и услуге перформанси

Обука и консалтинг за тимове у филму, играма, вештачкој интелигенцији и роботици. Едукација тимова, усклађивање радног тока, инфраструктура података и евалуација модела.

Ја сам Мелинда Озел, консултанткиња за системе неге лица. Седиште ми је у Остину, Тексас, али радим на даљину и лично са тимовима широм света.

Тимови са којима сам радио

Клијенти укључују Епик Гејмс, Индустријал Лајт енд Меџик, Родео ФКС, Нетфликс, Мета, Лариан, Близзард, ЕА и Метафизик

Са ким радим

Тимови који граде, поправљају или процењују лица на екрану, у моделима и у роботима.

филм-игре

Филмови и игре

За анимацију, ригирање и тимове за ликове.

фацијална вештачка интелигенција

Вештачка интелигенција за лице

За тимове који развијају моделе за праћење лица, аватаре и генерисање видео записа.

роботика

Роботика

За тимове који дизајнирају изглед за хуманоидне и стилизоване роботе.

За анимацију, ригирање и тимове за ликове

Филмови и игре

Фацијални ригови су сложени системи са многим покретним деловима и многим људима који их тумаче на различите начине. Када се неконзистентности појаве међу ликовима, одељењима или у радној процедури, ретко је очигледно где су настале или како их отклонити. Ја ступам када тимовима треба спољни поглед са анатомском и техничком дубином да би се утврдило где ствари не функционишу и дефинисао пут напред.

Како помажем

  • Прегледи ригова и блендшепова
  • Системи за синхронизацију усна и говор
  • Системи изражавања за створења и нељудске ликове
  • Тимска обука из FACS-а и анатомије лица

Архитектура рига

Дизајн и корекција фацијалних система за експресивну поузданост.

  • Оцењивање ригова, блендшејпова и корекција
  • Упутства за грануларност облика, поделе и проширења изван стандардног FACS-а

Динамика говора

Оценjивање и дизајн система покретања мимике лица говором.

  • Стратегије фонема и визема унутар компаније
  • Системске ревизије
  • Обука за аутоматизоване и хибридне цевоводе

Изабрани радови

Овде Обезбеђен је изглед, упутства за помлађивање и одабрани подаци за обуку за вештачко помлађивање Тома Хенкса, Робин Рајт и Пола Бетанија.

Пазите небо Дизајнирао сам оквир за евалуацију и метрике квалитета за изражавање и синхронизацију усана у АИ визуелном дубировању.

Џејн (Аппле ТВ+) Развијен је репертоар израза за Грејбирда, ЦГ шимпанза из серије: више од 300 емоционалних реакција. Обухваћено у Њујорк тајмс.

Џиџи и Нејт Развијен FACS-базиран систем за експресију дигиталне двоструке капучине студија Axis. Објављено у Анимација УК.

Студијска обука Обезбедио сам обуку из анатомије лица, FACS-а и синхронизације уснана за тимове у Epic Games, ILM, Netflix, Blizzard, Larian и Rodeo FX.

Рачунарски вид, машинско учење и генеративна вештачка интелигенција

Вештачка интелигенција за лице

Тимови који развијају AI за препознавање лица често немају систематске начине за процену понашања. Не могу поуздано да утврде који модел је бољи, зашто изразе не препознаје, или где у току обраде настаје проблем. Дизајнирам оквире за евалуацију који омогућавају дијагностиковање тих одлука, обухватајући процену стања модела, дијагностику података, стандарде за анотацију и интерну документацију која чини те системе употребљивим и након мог одласка.

Како помажем

Не постоје два AI рада за лице која имају исте проблеме. Пре него што било шта предложим, почињем са дијагностиком како бих разумео ваше податке, ваше моделе, ваше случајеве употребе и где су празнине. Одатле ангажмани обично укључују неку комбинацију следећег:

  • Аудитирања модела и података
  • Стратегија анотације и документација
  • Оцењивање добављача и стандардизација
  • Златни сет за развој
  • Аутоматизовани оквири за мерење перформанси

Подаци о експресији

Дизајн и евалуација система података о изразима лица.

  • Стратегија прикупљања података
  • Логика етикетирања
  • Дизајн РОМ-а за поуздану обуку и анализу
  • Таксономије израза и стандарди анотације
  • Обука анотатора
  • Планирање прикупљања и евидентирања података
  • Експертска рецензија моделских излаза: изражавање и синхронизација усна

Опсег и дубина у потпуности зависе од тога где се налазите и шта покушавате да изградите.

Изабрани радови

Мета, Квест Про праћење покрета лица Основни члан тима за праћење лица. Дефинисао таксономију израза и стандарде за анотацију очију, уста и целог лица, и обучавао спољне тимове за анотацију који су их примењивали у великом обиму. Обликовао стратегију прикупљања података.

Пазите небо Дизајнирао сам оквир за евалуацију и метрике квалитета за изражавање и синхронизацију усана у АИ визуелном дубировању.

Овде Обезбеђен је изглед, упутства за помлађивање и одабрани подаци за обуку за вештачко помлађивање Тома Хенкса, Робин Рајт и Пола Бетанија.

Беспрекорна ВИ и Афектива Развио сам оквире за процену модела у Flawless AI и успоставио стандарде за детекцију израза у Affectiva.

Патенти Суизумитељ на три патента у аватар анимацији и праћење израза.

За тимове који дизајнирају лица за хуманоидне и стилизоване роботе

Роботика

Лице робота мора да функционише у реалном времену, у оквиру механичких ограничења, без падања у валу нелагодности.

Како помажем

  • Библиотеке израза и положаја за контролу у реалном времену
  • Обликујте ревизије и правила ко-активације
  • Липсинк и облици говора
  • Радионице о анатомији лица и FACS-у

Изабрани радови

Стилизовано роботско лице Заједно са уметничким тимом развио сам модуларну библиотеку израза и положаја, дизајнирану за контролу у току извршавања од стране вештачке интелигенције робота, која у реалном времену бира и комбинује изразе како би одговарали говору и емоционалном контексту.

Механичко роботско лице Ревидирао сам скуп облика лица. Дефинисао сам правила ко-активације, односно које облике је могуће активирати заједно и које комбинације подстицати или ограничити, као и ознаке облика које се користе за говор.

Компанија за роботику у тематским парковима Водио тродневну радионицу о анатомији лица и FACS-у за мултидисциплинарни тим.

lecture-slides.pdf
Дијаграм мишића orbicularis oculi са предавања о анатомији лица

Обука и радионице

Специјализована обука за тимове који развијају системе за препознавање лица.

  • FACS, анатомија лица и упутства за синхронизацију усана за анимацију и технологију
  • Заједнички језик за оцењивање подешавања, облика и покрета лица
  • Формати од фокусираних предавања до вишедневних радионица

Шта тимови кажу

“Било да је у улози консултанткиње или предавачice, вредност коју она доноси било којој компанији или пројекту је изузетна, и сигуран сам да ћу у будућности поново сарађивати са њом.”

Марк Фланаган
Менаџер за образовање и обуку у анимацији · Радионице са Епик Гејмс и Нетфликс

“Оно у чему она заиста изванредно успева јесте ниво на којем разуме анатомију лица и изразе, како и зашто се сваки облик активира, спаја или раздваја, али и који тон или емоцију треба да пренесе.”

Шенон Томас
Надзорник уметника · Радионице са Близард

“Њена предавања су препуна корисних сазнања и за почетнике и за професионалце.”

Џош Дикарло
Директор за технологију ликова · Радионица са Insomniac Games

Процес пројекта

1. Уводни позив

Са кратким позивом да се разуме пројекат.

2. Предлог

Следим са писаним предлогом који обухвата обим посла, резултате, временски оквир и цену.

3. Рад

У зависности од пројекта: коментарисани извештаји прегледа, спецификације облика и положаја, смернице за анотацију, рубрике за евалуацију или материјали за обуку и снимци.

Пројекти почињу од 1.200 долара.

Већина пројеката има фиксни обим, са утврђеним резултатима и временским оквиром. Трајни или итеративни рад може се наплаћивати по сату.

Мелинда Озел

Са ким бисте радили

Мелинда Озел

Ја сам стручњак за системе за лице који ради у областима анимације, вештачке интелигенције и роботике. Био сам један од оснивача тима за праћење лица у Meta Quest Pro и суизумитељ сам три патента у анимацији аватара. Мој рад у филмовима и на телевизији обухвата коришћење вештачке интелигенције за помлађивање. Овде, АИ синхронизација усна Пазите небо, и репертоар експресије од 300 реакција за ЦГ шимпанзо у Џејн.

Више о мени

Питања

Које проблеме тимови обично доносе?

Изрази који делују помало чудно без очигледног разлога, синхронизација усна које одступа од говора, ознаке које се разликују од једног анотатора до другог и роботска лица која падају у ватру језивости.

Када да те доведемо?

Што раније. Одлуке као што су таксономија израза, скуп облика или план снимања лакше је и јефтиније исправити пре него што се подаци прикупе или се направе ригови. Такође радим на поправци система који су већ у производњи.

Шта вам је потребно од нас да бисте започели?

Примери онога са чим радите, као што су облици опреме, резултати моделирања, узорци података или снимци робота, као и ваши циљеви и ограничења.

Већ имате пројекат на уму?

Или само конкретно питање. У сваком случају, почните овде.

Реците ми о свом тиму, на чему радите, ваш временски оквир и ваш буџет.

Хајде да поразговарамо о вашем пројекту.

Или ми пошаљите имејл на: facetheFACS@melindaozel.com

Дизајнирано за студије и тимове

Хајде да разговарамо.

facetheFACS@melindaozel.com