回答您的面部表情和FACS问题
以下是与面部动作编码系统(FACS)和面部表情有关的常见和不常见的问题的混合。这些答案主要是针对动画师、模型师、装配师和其他艺术家,以及研究面部追踪技术和数字人类的研究人员和工程师。 因为有很多文字,建议按章节浏览或使用Ctrl+F搜索关键词。
基础知识
什么是FACS(面部动作编码系统)?
FACS,即面部动作编码系统,是一个分类系统,旨在命名和描述人类面部的可见动作。由于FACS是以解剖学为基础的,并有非常详细的记录,它允许我们以客观和标准化的方式分解复杂的面部表情。
完整的解释帖子即将发布!
学习和学习技巧
您建议初学者在哪里学习FACS?
视情况而定。 如果你是一个艺术家,你可以通过以下方式学习FACS 我的网站, 外地资产管制系统小抄和 培训服务但是,你可能不会在官方的FACS手册中找到那么多的实惠,除非你愿意投入时间和金钱($350)来处理500页的为不同受众设计的教科书语言。该手册不会有那么多与艺术家有关的信息,因为它是专门为教用户如何用结构化的研究方法对面部运动进行编码而设计的。
如果你是学术界或技术界人士,希望进行行为研究,请通过《FACS手册》正式学习FACS,并通过以下方式补充任何缺少的视觉资料 我的网站 和 外地资产管制系统小抄.对于学术研究人员,艾瑞卡-罗森伯格为有抱负的面部编码人员举办了研讨会。
FACS似乎非常复杂。像我这样的学生应该从哪里以及如何开始?
FACS可能看起来很复杂,但实际的面孔更加复杂。我创建了 面对FACS因为FACS手册可能很密集,而且外面没有可获得的(或高质量的)资源。如上所述,你可以利用我网站上的资源,包括 免费的 和 付费.你也可以关注我的社交网站,了解更多免费的参考资料、技巧和信息帖子(Instagram。@manicexpression / Twitter:@melindaozel / ǞǞǞ).
是否有《FACS圣经》?我在哪里可以找到不同的FACS AU(行动单位)的参考资料?
我一直在增加我的 外地资产管制系统小抄!这张纸是用来展示基本的AU的。我有组合形状可用于 高级会员而且我经常在我所有的社交账户上发布免费的参考资料(Instagram。@manicexpression / Twitter:@melindaozel / ǞǞǞ).要申请特定的AU组合,请填写本页面底部的表格。
有什么窍门可以帮助艺术家们在观看时不被淹没? 面对FACS 语言?对于绿色的艺术家来说,他们发现他们很快就会被一次触发太多的形状所淹没,这可能最终会导致反动画。
从脸部的各个部分开始。从眉毛开始--这些是最容易的。注意FACS的名称;它们一开始可能听起来很吓人,但一旦你意识到它们的名称揭示了其动作的定义,它们就会成为你的朋友例如--"内养眉 "是什么意思?它意味着你的眉毛的内侧部分被抬起来了!学习基本解剖学和FACS。练习在自己的脸上表演这些形状。开始观察现实生活中和观看电影/节目/社交媒体视频时的动作。把基于嘴巴的动作留到最后。
至于一次触发太多形状而得意忘形--对面部解剖学和FACS有基本了解,将使你能够研究自然界中出现的常见动作和组合。真实世界的观察将有助于指导你的策略,即什么时候触发。
在熟练掌握FACS方面,您最喜欢的资源/教程是什么?
我创造了 面对FACS。 因为官方FACS手册以外的资源几乎总是有不准确的信息和参考。 手册本身对某些面部动作也可能是模糊的。我花了多年的自学和观察,才真正理解 "紧唇"、"加深鼻唇沟"、"压缩鼻孔 "等动作。 本网站的目标是最大限度地减少FACS的混乱,打击虚假的脸部新闻。
通过《FACS手册》和我在苏黎世相互作用和表达实验室实习期间的导师,我开始熟练掌握FACS。 威利巴尔德-鲁赫, Tracey Platt和 珍妮弗-霍夫曼.从那时起,我学到的一切都来自于经验、实践和现实世界的观察。
对于初学者的解剖学资源,我推荐 艺术家的人体解剖学。形态的要素 作者:艾略特-戈德芬格。我喜欢这本书以一种有效而简单的方式分解面部肌肉。这是我遇到的最清晰、最准确的书,而且它实际上承认了面部肌肉的多样性。对于高级的解剖学资源,你必须去寻找研究论文!
在寻找好的面部参考资料方面,你有什么资源可以推荐吗?我们正在建立对话式人工智能。我从事的是动画、表情和身体空隙运动。我们的工作大多是手工完成的,我们的角色往往看起来不自然。
我的 外地资产管制系统小抄 和 整个网站 充满了关于基本表情、情绪和 讲话. 我可以提供咨询 如果你想得到帮助,使你的角色看起来更自然。
学习FACS的最佳方法是什么,有很多信息。有没有什么策略或技巧可以更有效地学习它们?
最好的方法是将脸部分成几个部分,例如眉毛、眼睛、中脸、下脸。确保你第一次就能正确地学习每个部分。这个网站正是为了这个目的而建立的。一旦你对FACS有了基本的掌握,你的下一步行动就是要有耐心。通过保持审视的眼光,事情会随着时间的推移而变得有意义。
我研究面部已经超过10年了,但仍然对一些事情感到困惑。即使是解剖学家也很难在某些关于面部肌肉分类和分解的问题上达成一致;所以,当你下次感到沮丧或不知所措时,请记住这一点
情感、行为和文化
FACS是如何帮助我们识别人类的实际情感的?
FACS帮助我们分解面部表情,并精确指出哪些肌肉正在被使用;它帮助我们识别模式,并确定在不同时间和不同情况下面部发生的情况。
在艺术中分解事物和表达情感的方便性之间是否有一个平衡?
很多常见的面部情绪表达方式都有相同的面部动作;所以这取决于项目的情况。在某些情况下,将事情归结为情绪集最终会变得笨重和有局限性。在其他情况下,它可能是有帮助的。
在FACS中是否存在文化差异?在表达方式和情感表现方面肯定存在一些差异。
FACS是一个描述基于肌肉的面部动作的系统。虽然我们都有面部肌肉形状、大小、存在、配置和强度的差异--你的肌肉不会因你的文化而改变;但是,你用来表达自己的哪些面部动作会有所不同,而这些变化可以通过FACS测量。识别面部行为的模式和差异的能力是FACS首先被开发的原因
解剖学
你能谈谈面部肌肉如何产生某些表情吗?肌肉是否都与骨骼相连,或者有些肌肉与其他肌肉或筋膜相连?其中有哪些更复杂的肌肉相互作用?
是的,我可以谈论这个问题好几天,并且在这个网站上有多篇关于这个主题的文章。不,不是所有的面部肌肉都与骨骼相连。有些是;有些不是。就面部肌肉的连接方式而言,存在着大量的变化。由于面部肌肉的变化是我最喜欢的研究课题之一,我已经汇编了一个关于面部多样性的信息库;然而,由于花费了大量时间来获取这一研究机构,我将我的发现保留给 高级别的讲座或客户.既然如此,我打算做一个小抄,列出每个面部动作背后的每块面部肌肉的起源和插入。希望这对你有帮助 🙂!
FACS是一个围绕肌肉建立的相当完善的系统,但很难找到关于肌肉之上的层的信息。对于我们如何能够了解更多关于面部脂肪垫和皮肤滑动或下垂的事情,您有什么建议吗?
阿门!这一点是很重要的。在你所描述的主题上,肯定缺乏可获得的资源。我在Pinterest上看到了一些视觉效果和图示。也有很多好的解剖学论文。观察和记录自己的例子的力量是永远不会错的。在看面部解剖图时,永远记住它们是对具有巨大变异性的事物的简化表示;这就是为什么观察自然界中的人和阅读研究论文会非常有益。
动画
在为受试者的面部动画做FACS时,你是否需要为每个身份创建一套自定义的FACS,以最大限度地提高自然度?
如果你的角色是在比较现实的一端,为表情形状创造变化选项可能是非常有效的。例如,当我们抬起眉毛时,我们的额头都有不同的皱纹。虽然全面的扬眉都涉及到内扬眉器+外扬眉器,但内扬眉器+外扬眉器在每张脸上的表达方式会有独特的特点。有很多方法可以对这些差异进行分类和分组,以创造多样性和选择。我过去曾与工作室合作,建立这样的解决方案,并很乐意再次这样做。欢迎向我推荐一个项目,facetheFACS@melindaozel.com。
有了FACS地图后,制作3D脸部动画的典型过程是什么?你能从人的谈话视频->提取密集的面部地标图->三维动画脸吗?
作为一个非动画师,我无法回答典型的过程是什么;然而,我可以说,从人们说话的视频中自动尝试重现语音,对于语音所需的各种唇形,总是有细微的--但高度可靠的--错误。
你看到动画团队在采用FACS风格的钻机进入数字人类管道时常犯的错误是什么?
拥有不准确的FACS形状是最大的问题。其他大问题包括。1.没有考虑到形状的二级和三级运动--例如,使运动过于孤立和僵硬,2.分解一个基本的运动以给动画师更多的控制权--然后动画师在驱动表情时不记得重新组合这些碎片。一些更微妙的问题包括皱纹和运动之间的不匹配,表面层次的运动没有考虑到深度变化,等等。
在你的研究中,有没有什么 "令人惊讶 "的发现,你希望更多的动画师能够了解?是否有任何你认为被新的动画师所忽视的FACS原则?
我一直在发现令人惊讶的事情就我希望更多的动画师能意识到的发现而言--我实际上希望动画师能意识到面部运动的基本原则。如果一个动画师对基本的面部力学一无所知,就无法有效地将他们的需求传达给其他部门,如索具部门,这是一个巨大的障碍。
是否有 "子 "行动单元或由动画师定义的更小的行动单元来进一步分解事情?
有许多简略的 "子 "动作单元,是为了便于使用而制作的。我说 "粗略",是因为如果这些子单元没有经过深思熟虑并谨慎使用,它们可能导致不自然的面部动作。
至于符合解剖学的合法分解,我相信它们存在。我不得不分解我自己的子动作单元清单,以帮助更好地定义语言动作。有动画师向我表示,他们已经分解了同样的动作来创造真实的语言。我在我的FACS资源中加入了一个关键的子动作单元,我称之为 "垂直嘴唇收紧 "的形状。你可以在谷歌上搜索或在我的 外地资产管制系统小抄 以了解更多信息。
索具
大多数索具师是否使用混合形状或接头来创建FACS索具?
我工作过的那些人大多数使用混合形状。混合形状给你更多的质量结果,但可能是昂贵和笨重的。接合点更便宜,但看起来也更便宜。
我不知道该如何准确地表述这个问题......考虑到控制设备的重点是简化复杂的动作,以便动画师能够快速有效地工作(否则我们就只能给小节做动画了)--FACS似乎强调将事物分解成单个肌肉群(解剖学层面)。你认为动画师怎样才能准确而又 "方便 "地控制复杂的肌肉群?
方便的形状组合将需要在个案的基础上进行。这取决于上下文--如角色设计、角色行为、期望的观众等。我很想和钻机师合作,创造出能够协助动画师为特定场景进行复杂形状构建的工具。
我在Marvel的 "What If? "一集中工作,该角色的面部装备只有5种形状。你认为是否有一种风格,可以用较少的FACS来表达各种情绪?
令人惊讶的是,面部装备上只有5种形状!这让人对很多事情有了新的认识。这使很多事情变得更有意义。我确实认为造型可以用较少的FACS形状来解决。这取决于角色的情况。例如,Emojis没有鼻子;所以这需要一些形状。如果你想为Hello Kitty制作动画,你就不必担心嘴巴或眉毛的形状。在一些风格化的人类中,你可以删除一些看起来与其他形状足够相似的形状。同样,这也要看情况!
你觉得什么是3-5个最重要和最有用的AU,以建立一个基本的角色(也许像一个小的岩石集合)来表达/情感/"说话"?
大笑。一块石头?如果只是说话:一些眉毛的表情和一些简单的嘴巴动作。要我告诉你更多,你必须是一个 客户!
建议使用FACS钻机的工作流程是什么?
制作检查表。准备好文件。有这么多的表达方式和选项,很容易忘记一些事情/变得重复相同的动作。
如果你想制作最优化的混合形状系统(例如,如果你有一个资源非常有限的游戏),你会使用什么主要表达方式(AU)。在最基本的形式上,你可以把这个系统做得多么淡化?
取决于游戏的情况。这个游戏是关于什么的?人物是什么样子的?你想让你的观众感受和体验什么? 乐于咨询.
建模
FACS与混合形状有什么关系?行动单位对游戏的性能是否友好?
混合形状通常基于FACS形状或各种FACS形状的组合。许多游戏公司在技术和动画方面使用FACS。你可以设置代表行动单元的控制器。
在创造一个风格化但现实的角色时,如《阿丽塔战斗天使》中的阿丽塔,使用FACS是否有任何细微差别?
当然了。任何时候你都在改变脸部结构,在如何翻译运动和迁移重要的面部标志方面存在挑战。
哪种脸部建筑模型器有最准确的FACS表现?我熟悉Character Creator和FaceBuilder。
这些天,我根据客户的需要保留评估工具。如果你想一起工作,请随时联系我:facetheFACS@melindaozel.com。
视觉特效
在动画/视觉特效领域,我们经常为有疤痕/毁容的角色工作。您是否研究过受伤的案例以及这些案例如何影响FACS?
我已经研究了一些影响面部表情的受伤和患病的情况。到目前为止,我所做的最多的研究是关于一种叫做 "眼球突出 "的病症--一种你的眼睛可以明显地从眼眶中突出的病症(又称 "从你的脸上蹦出来")。它可以由甲状腺疾病或头部外伤引起。还有很多其他有趣的病例需要研究。我一天一个样!如果你希望看到更多关于疤痕或伤害的具体类型的研究,请填写本页底部的表格😀。
你有什么技巧可以避免对会说话的动物产生 "不可思议 "的感觉,比如如何应用拟人化的动作而不产生奇怪的感觉?例如《人猿星球》与《狮子王》电影之间的区别?
如果你让一只狮子看起来和狮子一模一样,但说话和 唱歌 与人类完全一样,这将是很奇怪的。除了在逼真度上做出妥协外,你能做的也不多。就个人而言,我希望将以前的经典动画复制成逼真的翻拍作品的趋势能够停止。撇开个人感受不谈,如果我戴上我的工作帽,有一些黑客和妥协可以做,以减少不真实感 - 但我不认为你可以完全摆脱它。 至于《星球》,将具有与人类相似能力的动物拟人化是更容易做到的。
你认为视觉特效行业是否有任何特定的FACS人类形状/姿势,在逼真的角色中难以达到?
我看到的最明显的是脸颊隆起和鼻子起皱;还有许多其他细微的形状也可以改进。
技术方面
你如何将FACS与深度学习中的工作进行比较?
大多数人脸跟踪和情感跟踪公司都依靠FACS进行机器学习。他们使用FACS来绘制他们的数据管道。他们用基于FACS的表情收集数据。他们用基于FACS的分类来训练他们的机器,等等。即使你不使用基于FACS的方法,你仍然需要FACS来识别和沟通失败的领域,以评估数据需求来改进技术。
是否有任何现有的FACS数据集,我们可以用它来训练人脸和语音的机器学习模型?
根据我在人脸追踪技术领域的工作经验,大多数数据集都充斥着不纯的数据。你需要能够仔细检查数据并清理大量的垃圾。如果你有资源,建议创建内部数据收集和标签系统。如果你正在建立自己的数据团队,请阅读 情感跟踪中的偏差.
您是否推荐任何能够稳健地提取FACS的应用程序?你能推荐任何用于提取FACS的应用程序吗?
如果你说的提取FACS的应用是指--自动FACS检测器/追踪器--我会说不是。我并不强烈推荐任何应用程序。一些应用程序可以检测到非常简单的、高强度的表达;但是它们往往不能检测到微妙的或有层次的表达。我认为我们离真正强大的东西还有一段距离,特别是由于大多数领先的科技公司对数据的疏忽。阅读更多 此处 和 此处.
iPhone有52种表情,这对制作好的动画来说足够了吗?如果不是,你如何使用iPhone来增加更多的FACS形状?
你是要做一个有基本动作的半风格化到非常风格化的人物吗?如果是这样,它可能是好的。如果你要的是更加逼真和富有表现力的人物,那么它就不能让你达到你所需要的质量水平。作为一个更注重观察和评论的人,我无法告诉你如何添加更多的FACS形状;但是,如果你想告诉我你对你的角色有什么需求/你想在表现力方面达到什么目的/你可能需要添加什么形状来达到你的目的,我可以提供咨询:facetheFACS@melindaozel.com
我们有一个3D现场化身的热潮,但他们缺少大量的面部表情。您认为我们如何才能改善实时数字人类表演?
这其中有两个部分。
1. 该技术.脸部追踪技术还没有完全达到我们希望的程度。成功的真人化身可以通过技术与艺术的协调来完成。需要进行广泛的研究和观察,以评估追踪技术对不同面孔的反应。此外,化身的目标也需要被评估。根据上下文,什么表情是优先的?根据头像的使用情况,不同的表情会有不同的优先级别。
2. 艺术.即使技术不是我们希望的那样,你也可以通过艺术来伪造很多东西。一旦你清楚地知道技术中哪些地方不可行,以及你想优先考虑化身的表达方式,就可以通过艺术方面来伪造它。当我在Meta的时候,我密集地与数据打交道,研究技术在不同脸部的表现。能够识别这些不足之处,使我能够有效地与模型师合作,通过艺术方面来掩盖反复出现的问题。大多数看起来成功的头像都是通过艺术掩盖技术问题而实现的。
FACS如何支持不同的口音,不同的发音如何影响风格化人物的面部表情/动作?
口语中最小的有意义的声音单位被称为音素。不同的语言是由不同的音素组组成的。在艺术和语言技术方面,音素是按照它们产生时的样子来分组的。换句话说,音素是根据我们的嘴巴产生这些音素时形成的一般形状来分组的。这些视觉上分组的音素被称为 视觉.双唇音就是一个不同的音素,形成一个单一的音素的例子。虽然B、M和P是不同的音素,但当我们发出这些声音时,我们的嘴唇的结构基本上是一样的。B、M和P的产生看起来是一样的;因此,B、M和P构成了一个单一的语素。FACS的形状可以用来粗略地表示一个语素,尽管可能缺少更多的细节(在本答案的最后讨论)。
当不同的音素应用于同一个词时,就会产生口音。例如,考虑 "car "这个词。美式英语版本对car中 "a "的发音与英式英语版本不同;因此,美式英语使用了不同的音素 此外,美式英语版本对 "r "的发音,而英式英语版本则没有。
虽然 "汽车 "在美式英语和英式英语中是同一个词,具有相同的含义,但它的发音是由不同的音素组成的,这取决于所使用的英语。
如果用FACS形状来创建一个语素的骨架,而用不同口音发音的单词是由不同的音素组成的,那么这个单词也往往是由不同的语素组成的。不同的语素公式意味着不同的FACS形状可以应用于不同口音下的同一个词。这种分解意味着考虑语音和单词的音位选择非常重要--而不是构成单词本身的字母。
FACS和语音的主要问题将来自于面部表情机械之外产生的音素--例如,喉音语言。此外,一般来说,FACS在涉及到语音形状时有一些缺失环节--即使是美式英语。这个缺陷就是为什么我定义了像 "垂直嘴唇收紧器 "和 "Z轴减弱器 "这样的子动作单元。(见 外地资产管制系统小抄 详见)。
我的工作
你是否练习面部运动?如果是--多长时间一次?
我几乎每天都在练习。根据我当时正在研究的面部区域,我练习的内容会发生变化。我不是每天都进行全套的FACS动作,但我肯定总是在锻炼一些面部肌肉!"。
获得投资组合审查的过程是怎样的?
查看我的 投资组合回顾 页😀
你在Epic的MetaHumans中扮演过什么角色吗?
我做到了!我与他们的一些团队合作,通过面部解剖学培训+咨询来改进钻机。一旦该产品的后期版本出来,结果应该是可见的。
在你的脑海中,是否有任何你为之提供咨询的电影或视频游戏让你感到特别自豪?
我咨询过的许多项目都有NDA,或者还没有发布。但正如在网络研讨会上提到的,我很自豪地为Meta公司的Emoji设计工作,这是一个有超过10亿人使用的产品我还很自豪地参与了Epic的MetaHumans和CG灵长类动物的未发布版本,用于即将到来的电影和电视节目。当他们可用时,我会宣布的!
是否有一些项目比其他项目更能引起你的注意(戏剧性/喜剧性,风格化/照相式,VR/2D)?
作为一名顾问,我喜欢风格化和逼真的项目。它们都有各自的挑战。戏剧和喜剧也一样作为一个观众,我更喜欢喜剧和风格化。
混杂物
你会如何处理僵尸的面部表情?
我会把僵尸的面部表情保留在进食和攻击所需的功能动作上,因为在经典的僵尸文学作品中,这主要是他们在做的事情!下巴和嘴巴会优先考虑。下巴和嘴巴将是优先考虑的。你也可以根据不同的恶化程度来修改这些动作的工作方式。
作为一名人像摄影师,我想知道FACS在我的工作中会有什么作用。它是否有助于在拍摄前制定计划,或分析最终图像,看哪张最能传达你所追求的情感?FACS会夺走诚实吗?
作为一名摄影师,我不会说你需要成为一名FACS大师,但对僵硬/虚假/不舒服的表情有一双眼睛是很有用的,特别是在(1)决定为客户选择什么镜头和(2)帮助你的模特看起来更放松。
我曾经为人像摄影师做模特,拥有良好的面部意识使我能够更好地摆出姿势。例如,我意识到这样的事情--保持一个姿势太久会激活我不希望出现在镜头中的额外肌肉;所以我会确保与摄影师有良好的沟通/知道他们什么时候能拍下照片。知道他们何时拍摄有助于我在正确的时间摆出姿势,使表情看起来更自然。我还能够在感觉到脸部紧张时放松自己的脸,从而减少紧张的表情。
类似的事情也可以在摄影师那边做。如果你不是天生擅长读懂人们的表情/情绪,FACS可能特别有益。我曾与许多摄影师合作,他们没有自然的眼光来挑选出不舒服的姿势,而他们肯定可以使用一些技术性的FACS知识。