项目简介
项目名称
真实感三维人脸的实时重建与语音驱动的表情交互
项目批准号
60203013
学科分类
F020506
信息科学部
_计算机科学
_计算机应用技术
_人机界面技术
资助类型
信息科学
负责人
卜佳俊
依托单位
浙江大学
批准年份
2002
起止时间
200301-200512
批准金额
22.00万元
摘要
目前基于软件实现的人脸动画研究面临着许多问题，本项目研究人脸实时三维重建以及人机表情与语音交互。基于卡尔曼滤波，在视频序列中对脸部特征进行实时检测、跟踪及训练，提取人脸特征点位置和纹理特征，重建真实感三维人脸模型；利用汉语语音的特点，将输入语音按特征分段并匹配基本"音素"模型，自动生成人脸动画参数，驱动三维人脸模型获得人脸动画序列；对基于静态图像的人脸三维重建进行研究，提出一个基于径向基函数（RBF）速度场的快速人脸纹理映射算法，通过简单交互实现单幅照片上的快速人脸重建；对输入语音及脸部特征跟踪进行分析，针对不同输入模态的特点，分别建立二元、三元隐马尔可夫模型进行识别，实现对人脸表情的基空间分类，获得人脸表情识别模型。研究表情克隆算法，提出了肌肉克隆和改进的表情比例图像（ERI）方法分别用于三维和二维人脸表情的实现。上述方法可应用于人机交互、虚拟主持人、游戏与电影制作等领域，具有重要的学术意义与应用价值。
评论区 (0)
#插入话题
