虚拟人的情感交互是近年来计算机动画、计算机视觉、人机交互以及模式识别领域的研究热点。如何让虚拟人准确地理解用户的情感并与用户进行丰富地互动是一项具有挑战性的工作。本文首先利用真实感人脸建模技术,通过用户输入一张正面人脸图片,自动地为用户生成一个真实感的虚拟人脸。然后利用嵌入式隐马可夫模型提取真人视频序列中的人脸表情,驱动虚拟人脸实时地做出相应的表情,丰富了虚拟人的情感。最后,我们设计了一个人头跟踪算法,实时地估计出真人视频中的人头姿势,驱动虚拟人脸在三维空间中做出相同的姿势,使虚拟人更加地生动活泼。实验表明基于视觉的虚拟人情感交互系统使用户无需机械地操作计算机外设,只要在摄像头前做出自己的面部表情以及头部姿势就能够向虚拟人传达情感,并得到虚拟人相同的情感反馈。
利用嵌入式的隐马科夫模型和HMT 算法构建了一个基于计算机视觉的虚拟人情感交互系统,简化了用户与虚拟人之间交互的方式,使用户无需操作任何计算机外设,只需在摄像头前做出各种表情以及头部姿势就能与虚拟人进行情感交流,同时也能得到虚拟人丰富的情感反馈。 |