Odpadnięcia z kursów na żywo (2027): Intensywny kurs FACS i techniki synchronizacji ruchu warg

Pracuj ze mną

Systemy do pielęgnacji twarzy i usługi zabiegowe

Szkolenia i doradztwo dla zespołów zajmujących się filmem, grami, sztuczną inteligencją i robotyką. Szkolenia zespołów, dostosowywanie procesów produkcyjnych, infrastruktura danych oraz ocena modeli.

Nazywam się Melinda Ozel i jestem konsultantką ds. systemów pielęgnacji twarzy. Mieszkam w Austin w Teksasie, ale współpracuję zarówno zdalnie, jak i osobiście z zespołami na całym świecie.

Zespoły, z którymi współpracowałem

Wśród klientów znajdują się takie firmy jak Epic Games, Industrial Light & Magic, Rodeo FX, Netflix, Meta, Larian, Blizzard, EA oraz Metaphysic

Z kim współpracuję

Zespoły zajmujące się tworzeniem, naprawianiem lub ocenianiem twarzy – na ekranie, w modelach oraz w robotach.

filmy i gry

Filmy i gry

Dla zespołów zajmujących się animacją, rigowaniem i postaciami.

facial-ai

Sztuczna inteligencja do rozpoznawania twarzy

Dla zespołów zajmujących się tworzeniem modeli śledzenia twarzy, awatarów oraz generatywnych modeli wideo.

robotyka

Robotyka

Dla zespołów zajmujących się projektowaniem twarzy dla robotów humanoidalnych i stylizowanych.

Dla zespołów zajmujących się animacją, rigowaniem i postaciami

Filmy i gry

Twarze są złożonymi systemami z wieloma ruchomymi częściami i wieloma osobami interpretującymi je w różny sposób. Kiedy niespójności pojawiają się w różnych postaciach, działach lub potokach, rzadko jest oczywiste, gdzie się zaczęły i jak je naprawić. Wkraczam, gdy zespoły potrzebują zewnętrznego oka z anatomiczną i techniczną głębią, aby zdiagnozować, gdzie rzeczy się psują i zdefiniować ścieżkę naprzód.

Jak pomagam

  • Recenzje rigów i blendshape’ów
  • Systemy synchronizacji ruchu warg i mowy
  • Systemy ekspresji dla istot żywych i postaci niebędących ludźmi
  • Szkolenie zespołowe z zakresu FACS i anatomii twarzy

Architektura platformy wiertniczej

Projektowanie i korekta systemów twarzy pod kątem niezawodności ekspresyjnej.

  • Ocena platform, kształtów mieszanych i elementów korygujących
  • Wskazówki dotyczące ziarnistości kształtu, podziałów i rozszerzeń wykraczających poza standardowy FACS

Dynamika mowy

Ocena i projektowanie systemów ruchu twarzy sterowanych mową.

  • Własne strategie dotyczące fonemów i wizemów
  • Audyty systemu
  • Szkolenie w zakresie zautomatyzowanych i hybrydowych potoków

Wybrane prace

Tutaj Dostarczyliśmy wizerunki oraz wytyczne dotyczące odmładzania, a także wyselekcjonowaliśmy dane szkoleniowe do wykorzystania w procesie odmładzania postaci Toma Hanksa, Robin Wright i Paula Bettany’ego za pomocą sztucznej inteligencji.

Obserwuj niebo Opracowałem ramy oceny oraz wskaźniki jakości dotyczące ekspresji i synchronizacji ruchu warg w dubbingowaniu wizualnym opartym na sztucznej inteligencji.

Jane (Apple TV+) Opracowano repertuar mimiki dla Graybearda, komputerowo wygenerowanego szympansa występującego w serialu: ponad 300 reakcji emocjonalnych. Obejmowało to „The New York Times”.

Gigi & Nate Opracowano system ekspresji oparty na technologii FACS dla cyfrowego sobowtóra kapucynki stworzonego przez Axis Studios. Informacje na ten temat pojawiły się w Animation UK.

Szkolenie w studiu Prowadziłem szkolenia z anatomii twarzy, systemu FACS oraz synchronizacji ruchu warg dla zespołów w firmach Epic Games, ILM, Netflix, Blizzard, Larian i Rodeo FX.

Wizja komputerowa, uczenie maszynowe i generatywna sztuczna inteligencja

Sztuczna inteligencja do rozpoznawania twarzy

Zespołom tworzącym sztuczną inteligencję twarzy często brakuje systematycznych sposobów oceny zachowania. Nie są w stanie wiarygodnie stwierdzić, który model jest lepszy, dlaczego wyrażenia się psują lub gdzie w potoku powstaje problem. Projektuję ramy ewaluacyjne, które umożliwiają diagnozowanie tych decyzji, obejmujące ocenę stanu modelu, diagnostykę danych, standardy adnotacji i wewnętrzną dokumentację, dzięki której systemy te są użyteczne po moim odejściu.

Jak pomagam

Żadne dwa potoki sztucznej inteligencji twarzy nie mają takich samych problemów. Zanim cokolwiek zarekomenduję, zaczynam od diagnostyki, aby zrozumieć twoje dane, modele, przypadki użycia i gdzie są luki. Stamtąd zaangażowanie zazwyczaj obejmuje pewną kombinację:

  • Audyty modeli i danych
  • Strategia i dokumentacja adnotacji
  • Ocena i standaryzacja dostawców
  • Rozwój złotego zestawu
  • Zautomatyzowane ramy pomiaru wydajności

Dane dotyczące ekspresji

Projektowanie i ocena systemów danych ekspresji twarzy.

  • Strategia gromadzenia danych
  • Logika etykietowania
  • Konstrukcja ROM zapewniająca niezawodne szkolenie i analizę
  • Taksonomie wyrażeń i standardy adnotacji
  • Szkolenie dla recenzentów
  • Planowanie gromadzenia i rejestrowania danych
  • Ocena wyników modelu przez ekspertów: ekspresja i synchronizacja ruchu warg

Zakres i głębokość zależą całkowicie od tego, gdzie jesteś i co próbujesz zbudować.

Wybrane prace

Meta i Quest Pro – śledzenie twarzy Członek-założyciel zespołu zajmującego się śledzeniem twarzy. Opracował taksonomię wyrazów twarzy oraz standardy adnotacji dla oczu, ust i całej twarzy, a także przeszkolił zewnętrzne zespoły zajmujące się adnotacją, które wdrażały je na szeroką skalę. Opracował strategię gromadzenia danych.

Obserwuj niebo Opracowałem ramy oceny oraz wskaźniki jakości dotyczące ekspresji i synchronizacji ruchu warg w dubbingowaniu wizualnym opartym na sztucznej inteligencji.

Tutaj Dostarczyliśmy wizerunki oraz wytyczne dotyczące odmładzania, a także wyselekcjonowaliśmy dane szkoleniowe do wykorzystania w procesie odmładzania postaci Toma Hanksa, Robin Wright i Paula Bettany’ego za pomocą sztucznej inteligencji.

Flawless AI i Affectiva W firmie Flawless AI opracowałem ramy oceny modeli, a w firmie Affectiva stworzyłem standardy wykrywania wyrazów twarzy.

Patenty Współtwórca Trzy patenty w dziedzinie animacji awatarów oraz śledzenie ruchu twarzy.

Dla zespołów zajmujących się projektowaniem twarzy dla robotów humanoidalnych i stylizowanych

Robotyka

Twarz robota musi działać w czasie rzeczywistym, w ramach ograniczeń mechanicznych, nie wpadając przy tym w „dolinę niesamowitości”.

Jak pomagam

  • Biblioteki wyrazów twarzy i pozycji do sterowania w czasie rzeczywistym
  • Audyty kształtów i reguły współaktywacji
  • Synchronizacja ruchu warg i kształty mowy
  • Warsztaty poświęcone anatomii twarzy i FACS

Wybrane prace

Stylizowana twarz robota Wspólnie z zespołem graficznym opracowałem modułową bibliotekę mimiki i pozycji, zaprojektowaną z myślą o sterowaniu w czasie rzeczywistym przez sztuczną inteligencję robota, która wybiera i łączy różne wyrazy twarzy w czasie rzeczywistym, dostosowując je do wypowiedzi i kontekstu emocjonalnego.

Mechaniczna twarz robota Przeprowadzono audyt zestawu kształtów twarzy. Określono reguły współaktywacji, czyli które kształty mogą być uruchamiane jednocześnie oraz które kombinacje należy promować, a które ograniczać, a także etykiety kształtów używane w mowie.

Firma zajmująca się robotyką dla parków rozrywki Poprowadził trzydniowe warsztaty poświęcone anatomii twarzy i systemowi FACS dla zespołu multidyscyplinarnego.

lecture-slides.pdf
Schemat mięśnia okrężnego oka z wykładu z anatomii twarzy

Szkolenia i warsztaty

Specjalistyczne szkolenia dla zespołów tworzących systemy twarzy.

  • FACS, anatomia twarzy oraz wskazówki dotyczące synchronizacji ruchu warg w animacji i branży technologicznej
  • Wspólny język służący do oceny konstrukcji, kształtów i ruchów twarzy
  • Formy obejmujące zarówno wykłady tematyczne, jak i kilkudniowe warsztaty

Co mówią drużyny

“Niezależnie od tego, czy pełni rolę konsultantki, czy wykładowczyni, wkład, jaki wnosi do każdej firmy lub projektu, jest niezwykły i jestem pewien, że w przyszłości będę miał okazję ponownie z nią współpracować”.”

Mark Flanagan
Kierownik ds. edukacji i szkoleń w zakresie animacji · Warsztaty we współpracy z Epic Games i Netflix

“To, w czym naprawdę się wyróżnia, to poziom zrozumienia anatomii twarzy i mimiki – tego, jak i dlaczego poszczególne rysy twarzy uaktywniają się, łączą lub rozdzielają, ale także tego, jaki nastrój lub emocje mają one przekazywać”.”

Shannon Thomas
Kierownik ds. artystów · Warsztaty z firmą Blizzard

“Jej wykłady są pełne cennych wskazówek zarówno dla początkujących, jak i dla profesjonalistów.”

Josh Dicarlo
Dyrektor ds. technologii postaci · Warsztaty z Insomniac Games

Proces realizacji projektu

1. Rozmowa wstępna

Wystarczy krótka rozmowa telefoniczna, aby zapoznać się z projektem.

2. Propozycja

Następnie przekazuję pisemną ofertę zawierającą zakres prac, wyniki, harmonogram oraz cenę.

3. Praca

W zależności od projektu: raporty z przeglądu z adnotacjami, specyfikacje dotyczące kształtu i pozycji, wytyczne dotyczące adnotacji, matryce oceny lub materiały szkoleniowe i nagrania.

Ceny projektów zaczynają się od 1 200 dolarów

Większość projektów ma ustalony zakres, określone wyniki oraz harmonogram. Prace o charakterze ciągłym lub iteracyjnym mogą być rozliczane według stawki godzinowej.

Melinda Ozel

Z kim będziesz współpracować

Melinda Ozel

Jestem ekspertem w dziedzinie systemów rozpoznawania twarzy, zajmującym się animacją, sztuczną inteligencją i robotyką. Byłem jednym z założycieli zespołu zajmującego się śledzeniem twarzy w projekcie Meta Quest Pro oraz współtwórcą trzech patentów dotyczących animacji awatarów. Moje osiągnięcia w branży filmowej i telewizyjnej obejmują stosowanie sztucznej inteligencji do odmładzania postaci w Tutaj, synchronizacja ruchu warg z AI włączona Obserwuj niebo, oraz repertuar ekspresji obejmujący 300 reakcji dla szympansa CG w Jane.

Więcej o mnie

Pytania

Z jakimi problemami zwykle zwracają się do Pana zespoły?

Wyraz twarzy, który wygląda dziwnie bez wyraźnego powodu, synchronizacja ruchu warg z mową, która się rozbiega, etykiety, które różnią się w zależności od osoby dokonującej adnotacji, oraz twarze robotów, które wpadają w „dolinę niesamowitości”.

Kiedy powinniśmy Cię zaprosić?

Jak najwcześniej. Decyzje dotyczące np. taksonomii wyrażeń, zestawu kształtów czy planu pozyskiwania danych łatwiej i taniej jest podjąć prawidłowo jeszcze przed zebraniem danych lub zbudowaniem platform. Zajmuję się również naprawą systemów, które są już w eksploatacji.

Czego potrzebujesz od nas, aby zacząć?

Przykłady tego, nad czym pracujesz, np. kształty konstrukcji, wyniki modelowania, próbki danych lub nagrania z robotów, a także twoje cele i ograniczenia.

Masz już jakiś pomysł na projekt?

Albo po prostu konkretne pytanie. Tak czy inaczej, zacznij od tego miejsca.

Opowiedz mi o swoim zespole, nad czym pracujecie, jaki macie harmonogram i jaki jest wasz budżet.

Porozmawiajmy o twoim projekcie.

Lub napisz do mnie na adres: facetheFACS@melindaozel.com

Przeznaczony dla studiów i zespołów

Porozmawiajmy.

facetheFACS@melindaozel.com