Kasvojen järjestelmien konsultointi
Kasvojen tekoälyä rakentavilta tiimeiltä puuttuu usein järjestelmällisiä tapoja arvioida käyttäytymistä. He eivät pysty luotettavasti kertomaan, mikä malli on parempi, miksi ilmeet katkeavat tai mistä ongelma johtuu. Suunnittelen arviointikehyksiä, jotka tekevät näistä päätöksistä diagnosoitavia.
Metassa rakensin kasvodatainfrastruktuuria alkuvaiheen putkistosta mittakaavaan, määrittelin merkintästandardit ja keruuprotokollat Quest Pro -kasvojenseurannan taustalla. Tämä työ varmisti kolme patenttia avatar-animaation alalla. Sen jälkeen olen kehittänyt mallien arviointikehyksiä Flawless AI:ssa ja rakentanut ilmeiden tunnistusstandardeja Affectivassa.
Tekoäly / Tekniikka
Missään kahdessa kasvojen tekoälyputkistossa ei ole samoja ongelmia. Ennen kuin suosittelen mitään, aloitan diagnostiikalla, jotta voin ymmärtää datasi, mallisi, käyttötapauksesi ja puutteet. Tämän jälkeen toimeksiantoihin sisältyy tyypillisesti jokin yhdistelmä seuraavista:
- Mallien ja tietojen tarkastukset
- Merkintästrategia ja dokumentointi
- Toimittajien arviointi ja standardointi
- Kultaisen sarjan kehittäminen
- Automatisoidut suorituskyvyn mittauskehykset
Laajuus ja syvyys riippuvat täysin siitä, missä olet ja mitä yrität rakentaa.
Animaatio
Kasvokuvat ovat monimutkaisia järjestelmiä, joissa on monia liikkuvia osia ja monia ihmisiä, jotka tulkitsevat niitä eri tavoin. Kun epäjohdonmukaisuuksia esiintyy hahmojen, osastojen tai putkistojen välillä, on harvoin selvää, mistä ne ovat alkaneet tai miten ne voidaan korjata. Tulen mukaan, kun tiimit tarvitsevat ulkopuolista silmää, jolla on anatomista ja teknistä syvyyttä diagnosoida, missä asiat rikkoutuvat, ja määritellä polku eteenpäin.
Minun rig- ja blendshape-arvosteluni eivät ole pelkkä luettelo korjauksista. Jokainen huomautus perustuu anatomiaan ja lihasmekaniikkaan. Joukkueet lähtevät pois ymmärtäen, mitä pitää muuttaa ja miksi, ja miten soveltaa tätä päättelyä jokaiseen seuraavaan muotoon.
Joillakin hankkeilla ei ole olemassa olevaa toimintakäsikirjaa. Kun studio tarvitsee kasvojärjestelmän kapusiinille, simpanssille tai urheiluhahmolle, jolla on käyttötarkoituskohtaiset ROM-vaatimukset, työ alkaa tutkimuksella. Tutkin anatomiaa, tunnistan puutteet ja rakennan mukautetun kehyksen tyhjästä, iteroin mallinnuksen, riggauksen ja animaation kanssa, kunnes tiimi pystyy toteuttamaan sen itsenäisesti.
Puhutaanpa projektistasi.
Jokainen sitoutuminen alkaa keskustelulla. Ota yhteyttä ja sovi tutustumispuhelu.