Lavora con me
Sistemi per il viso e servizi ad alte prestazioni
Formazione e consulenza per team nei settori del cinema, dei videogiochi, dell’intelligenza artificiale e della robotica. Formazione dei team, allineamento della pipeline, infrastruttura dei dati e valutazione dei modelli.
I team con cui ho lavorato
Con chi lavoro
Team che realizzano, riparano o valutano volti, sullo schermo, nei modelli e nei robot.
Film e videogiochi
Per i team di animazione, rigging e personaggi.
- Recensioni su rig e blendshape
- Sistemi di sincronizzazione labiale e di sintesi vocale
- Sistemi di espressione per creature e personaggi non umani
- Formazione di gruppo in FACS e anatomia facciale
IA e ML
Per i team che sviluppano modelli di tracciamento del volto, avatar e video generativi.
- Tassonomie delle espressioni e standard di annotazione
- Formazione degli annotatori
- Pianificazione della raccolta e dell'acquisizione dei dati
- Analisi da parte di esperti dei risultati del modello: espressione e sincronizzazione labiale
Robotica
Per i team che progettano volti per robot umanoidi e stilizzati.
- Librerie di espressioni e pose per il controllo in tempo reale
- Verifiche della forma e regole di coattivazione
- Sincronizzazione labiale e forme del parlato
- Seminari sull’anatomia facciale e sul FACS
Consulenza
Per i team che si occupano di progettazione, riparazione o valutazione di sistemi di riconoscimento facciale.
Dati relativi alle espressioni
Progettazione e valutazione di sistemi di dati sulle espressioni facciali.
- Strategia di raccolta dati
- Logica di etichettatura
- Design ROM per una formazione e un'analisi affidabili
Architettura della piattaforma
Progettazione e correzione di sistemi facciali per l'affidabilità espressiva.
- Valutazione di rig, blendshapes e correttori
- Guida alla granularità della forma, alle suddivisioni e alle estensioni oltre il FACS standard
Dinamica del parlato
Valutazione e progettazione di sistemi di movimento facciale guidati dal parlato.
- Strategie interne relative ai fonemi e ai visemi
- Audit del sistema
- Formazione per pipeline automatizzate e ibride
Formazione e workshop
Formazione specializzata per i team che costruiscono sistemi facciali.
- FACS, anatomia del viso e tecniche di sincronizzazione labiale per l'animazione e la tecnologia
- Un linguaggio comune per la valutazione di montature, forme e movimenti facciali
- Formati che spaziano dalle lezioni mirate ai workshop di più giorni
Opere selezionate
Cinema e TV
Qui Ho fornito le immagini di riferimento, le indicazioni per il processo di ringiovanimento e i dati di addestramento selezionati per il ringiovanimento tramite IA di Tom Hanks, Robin Wright e Paul Bettany.
Guarda i cieli Ha progettato il quadro di valutazione e i parametri di qualità relativi all’espressione e alla sincronizzazione labiale nel doppiaggio visivo basato sull’intelligenza artificiale.
Jane (Apple TV+) Ho sviluppato il repertorio espressivo di Graybeard, lo scimpanzé in CG della serie: oltre 300 reazioni emotive. Trattato in Il New York Times.
Gigi e Nate È stato sviluppato un sistema di espressione basato sulla tecnologia FACS per il ’capuccino digitale” di Axis Studios. Riportato da Animation UK.
Intelligenza artificiale e tracciamento del volto
Meta, tracciamento del volto su Quest Pro Membro fondatore del team dedicato al tracciamento dei volti. Ha definito la tassonomia delle espressioni e gli standard di annotazione per gli occhi, la bocca e il volto nel suo complesso, e ha formato i team di annotazione esterni che li hanno applicati su larga scala. Ha definito la strategia di raccolta dei dati.
Brevetti Co-inventore di tre brevetti per l'animazione di avatar e il tracciamento delle espressioni.
Robotica
Volto di robot stilizzato Ho collaborato con il team artistico allo sviluppo di una libreria modulare di espressioni e pose, progettata per essere controllata in fase di esecuzione dall’intelligenza artificiale del robot, che seleziona e combina le espressioni in tempo reale in base al discorso e al contesto emotivo.
Volto meccanico di un robot Ho verificato l'insieme delle forme facciali. Ho definito le regole di coattivazione, ovvero quali forme possono attivarsi contemporaneamente e quali combinazioni favorire o limitare, nonché le etichette delle forme utilizzate per il parlato.
Azienda specializzata in robotica per parchi a tema Ha tenuto un seminario di tre giorni sull’anatomia facciale e sul FACS rivolto a un team multidisciplinare.
Formazione
Formazione in studio Ho tenuto corsi di formazione sull’anatomia del viso, sul FACS e sul sincronismo labiale per i team di Epic Games, ILM, Netflix, Blizzard, Larian e Rodeo FX.
Con chi lavoreresti
Melinda Ozel
Sono un esperto di sistemi facciali e mi occupo di animazione, intelligenza artificiale e robotica. Sono stato uno dei membri fondatori del team di tracciamento facciale di Meta Quest Pro e sono co-inventore di tre brevetti nel campo dell’animazione degli avatar. Tra i miei lavori nel cinema e in televisione figurano progetti di ringiovanimento tramite intelligenza artificiale in Qui, sincronizzazione labiale con IA attivata Guarda i cieli, e un repertorio di espressione di 300 reazioni per lo scimpanzé CG in Jane.
Domande
Quali problemi vi sottopongono solitamente i team?
Espressioni che sembrano strane senza una causa evidente, sincronizzazione labiale che non corrisponde al parlato, etichette che variano da un annotatore all’altro e volti robotici che cadono nella “uncanny valley”.
Quando dovremmo farti entrare?
Il prima possibile. Decisioni quali la tassonomia delle espressioni, il set di forme o il piano di acquisizione sono più facili e meno costose da definire correttamente prima della raccolta dei dati o della realizzazione delle strutture. Mi occupo anche di correggere sistemi già in produzione.
Come inizia un fidanzamento?
Con una breve telefonata per comprendere il progetto. Successivamente invio una proposta scritta che illustra l'ambito di intervento, i risultati attesi, le tempistiche e il prezzo.
Di cosa avete bisogno da parte nostra per iniziare?
Esempi di ciò su cui stai lavorando, come le forme dei rig, i risultati dei modelli, campioni di dati o filmati dei robot, oltre ai tuoi obiettivi e ai vincoli.
Come viene stabilito il prezzo del lavoro?
La maggior parte dei progetti ha un ambito definito, con risultati attesi e tempistiche prestabilite. I lavori continuativi o iterativi possono essere fatturati a ore.
Come si presentano i risultati finali?
A seconda del progetto: rapporti di revisione annotati, specifiche relative alla forma e alla posa, linee guida per l’annotazione, griglie di valutazione o materiali didattici e registrazioni.
Hai già in mente un progetto?
Oppure semplicemente una domanda specifica. In entrambi i casi, inizia da qui.
facetheFACS@melindaozel.com