智能虚拟环境中虚拟人情感仿真研究

摘要

情感计算是一个新兴的研究领域，它通过赋予计算机识别、理解、表达和适应用户情感的能力来建立和谐的人机环境，使计算机具有更高更全面的智能。情感计算可分为情感获取、情感生成和情感表达三个方面。本文的工作侧重于研究虚拟人情感的生成和表达。为了更专注于虚拟人的情感建模，系统应该提供一种智能的虚拟环境以便屏蔽掉虚拟人构建的物理细节，同时能够对虚拟人的高层交互行为做出反应。本文采用基于语义的方法来构建这种智能虚拟环境(IVE)。
　　 在虚拟人的情感建模方面，目前的情感模型多采用认知的方法构建，没有考虑到人类的本能情感反应，此外对于人类情感的不确定性的模拟仍不成熟。本文提出多刺激下非确定性情感生成器来解决这些问题。利用粒子采样的方法对非确定情感进行抽样，用认知来修正抽样结果，这样将情感用粒子的加权值来表示，从而将人类的基本情感和复杂情感结合起来并构建了非确定的情感过程。
　　 为了构建智能虚拟人，仅有情感模型并不够，必须对虚拟人的情感进行外在的表现。本文同时兼顾人脸表情输出和人体动作输出，在人脸表情输出方面构建了六种基本的面部表情，根据具有多种情感的混合情感状态中各基本情感所占的比例进行表情的混合插值;在人体情感动作表达方面，将人体动作分为不同人体部位的运动片段，并标记这些片段之间的时空约束关系，在创建情感动作时选择具有相关情感的片段同时输出，即多模情感表达序列的构建。
　　 虚拟人群组的情感仿真也是本文的研究重点。针对虚拟人群情感传递的特性，为降低情感传递的复杂度进而提升计算时间，本文提出了采用二维热传导模型进行人群情感模拟的算法并给出了仿真结果。对于二维的热传导模型，采用交替方向隐式差分方法(ADI)计算结果，并利用统一计算架构(CUDA)进行算法的并行化处理。实验表明，该算法针对干人规模的虚拟人群可达到实时效果。

目录

摘要

第1章 绪论

1．1 情感计算的发展与应用

1．2 相关工作

1．2．1 情感识别

1．2．2 情感生成

1．2．3 情感表达

1．3 本文研究结果

1．4 论文组织

第2章 适用于情感计算的智能虚拟环境构建

2．1 引言

2．2 相关研究

2．3 智能虚拟环境构建

2．3．1 语义信息集成

2．3．2 虚拟人信息记录与分析

2．3．3 虚拟人的个性化

2．3．4 仿真结果

2．4 集成情感模块的IVE

第3章 多刺激下非确定性情感生成

3．1 引言

3．2 相关研究

3．3 情感生成过程

3．3．1 情感生成

3．3．2 情感表达

3．4 实验结果与分析

3．4．1 实验设计

3．4．1 结果分析

3．5 本章小结

第4章 多通道非确定性情感表达

4．1 引言

4．2 相关研究

4．3 系统实现

4．3．1 情感表达数据库构建

4．3．2 情感表达序列的生成

4．4 实验结果与分析

4．4．1 实验设计

4．4．2 结果分析

4．5 本章小结

第5章 观众情感传递仿真

5．1 引言

5．2 相关研究

5．3 算法过程

5．3．1 个体情感建模

5．3．2 行为映射

5．3．3 静态观众情感传递模型

5．3．4 动态观众情感传递模型

5．4 实验结果与分析

5．4．1 静态情感传递

5．4．2 动态情感传递

5．5 本章小结

第6章 总结与展望

6．1 工作总结

6．2 未来展望

参考文献

攻读博士学位期间主要的研究成果

致谢