Facial Systems Beratung
Teams, die KI für Gesichter entwickeln, verfügen oft nicht über systematische Methoden zur Bewertung des Verhaltens. Sie können nicht zuverlässig sagen, welches Modell besser ist, warum Ausdrücke nicht funktionieren oder wo ein Problem in der Pipeline entsteht. Ich entwerfe Evaluierungs-Frameworks, die diese Entscheidungen diagnostizierbar machen und die Modellstatus-Evaluierung, Datendiagnosen, Annotationsstandards und die interne Dokumentation abdecken, die dafür sorgt, dass diese Systeme auch nach meinem Ausscheiden nutzbar bleiben.
Die Grundlagen, die ich meinen Kunden biete, stammen aus dem Aufbau einer Infrastruktur für Gesichtsdaten in großem Maßstab. Bei Meta habe ich die Annotationsstandards und Erfassungsprotokolle für die Quest Pro-Gesichtsverfolgung definiert und die drei Patente für Avatar-Animation. Seitdem habe ich bei Flawless AI Frameworks für die Modellbewertung entwickelt und bei Affectiva Standards für die Erkennung von Ausdrücken geschaffen.
KI / Technik
Keine zwei KI-Pipelines für das Gesicht haben die gleichen Probleme. Bevor ich eine Empfehlung ausspreche, beginne ich mit einer Diagnose, damit ich Ihre Daten, Ihre Modelle und Ihre Anwendungsfälle verstehen kann und weiß, wo die Lücken sind. Von dort aus umfassen die Aufträge in der Regel eine Kombination aus:
- Modell- und Datenaudits
- Anmerkungsstrategie und Dokumentation
- Bewertung und Standardisierung von Anbietern
- Entwicklung des Goldsatzes
- Automatisierte Rahmenwerke zur Leistungsmessung
Umfang und Tiefe hängen ganz davon ab, wo Sie stehen und was Sie aufbauen wollen.
Animation
Facial Rigs sind komplexe Systeme mit vielen beweglichen Teilen und vielen Menschen, die sie unterschiedlich interpretieren. Wenn sich Ungereimtheiten über Charaktere, Abteilungen oder Pipelines hinweg einschleichen, ist es selten offensichtlich, wo sie ihren Ursprung haben oder wie man sie beheben kann. Ich komme ins Spiel, wenn Teams einen Blick von außen benötigen, der über die anatomischen und technischen Kenntnisse verfügt, um zu diagnostizieren, wo die Dinge scheitern, und einen Weg nach vorne zu definieren.
Meine Rig- und Blendshape-Bewertungen sind nicht einfach nur eine Liste von Korrekturen. Jeder Hinweis basiert auf der Anatomie und der Muskelmechanik. Die Teams wissen, was und warum sie etwas ändern sollten, und wie sie diese Überlegungen auf jede weitere Form anwenden können.
Für manche Projekte gibt es kein bestehendes Playbook. Wenn ein Studio ein Gesichtssystem für einen Kapuzineraffen, einen Schimpansen oder eine Sportfigur mit anwendungsspezifischen ROM-Anforderungen benötigt, beginnt die Arbeit mit Recherchen. Ich untersuche die Anatomie, identifiziere die Lücken und baue ein benutzerdefiniertes Gerüst von Grund auf, wobei ich die Modellierung, das Rigging und die Animation so lange iteriere, bis das Team sie unabhängig ausführen kann.