多模态表情动画

时间:2014-12-19 14:52:51
【文件属性】:

文件名称:多模态表情动画

文件大小:411KB

文件格式:PDF

更新时间:2014-12-19 14:52:51

多模态

在人机交互中,虚拟代理常常被称作为合作伙伴。这样,虚拟代理需要被赋予交际能力。特别是,他们应当能够表达出他们的情绪状态。展示一些表情,仅仅六个典型的 “基本”的表情[1],是不够的。代理人得表情显得过于僵硬和重复一个非常有限指令系统。此外, 人机交互中,这六个表情可能不是足够用的。情绪状态如满意,挫折,烦恼,或混乱可能还有更多有关的(例如,[2]、[3])。因此,虚拟代理人应当赋予更多的表情,让他们去展示微妙多样的表情。 在本文中,我们提出了一个新的途径用来表达情感。它允许一个虚拟 代理显示多通道连续表情 (MSE),即这些表情是由不同的非语言的行为构成的(本文称为信号)这些表情是受时间控制的并且属于不同的非语言交际渠道。到目前为止,在虚拟代理中,已经提出了几个模型创建动态多通道表情(例如,[4]和[5]和第二部分)。更多的,代理只使用老套的面部显示,这些面部显示定义在他们的顶端,然后插入的。相反,我们的模型生成一段任意时间的各式各样的多通道情感表现。他们中的每一个都是由一段非言语行为序列构成的,这些表情不不仅通过面容而且也用其他形式如一眼,动作,头部,躯干动作来表现出来。通过MSE,通过引入信号选择、命令和时机的多样性来避免重复性的情感表情。这种变异是通过单独为每个信号定义的外观和时间约束来获得的。在我们的模型中,使用一个高层次的符号表示的行为,文献和注解视频中的样本产生了情感显示。因此,捕获的数据并没有直接重现,但不同的似是而非的情感表情产生了。他们是由类似于原始信号的相同信号组成的。


网友评论