基于观众面部信号的视频情感语义隐式标注和编辑合成研究

项目名称： 基于观众面部信号的视频情感语义隐式标注和编辑合成研究

项目编号： No.61175037

项目类型： 面上项目

立项/批准年度： 2012

项目学科： 自动化技术、计算机技术

项目作者： 王上飞

作者单位： 中国科学技术大学

项目金额： 59万元

中文摘要： 视频情感语义的隐式标注研究刚刚起步，为此本项目提出基于观众面部可见光图像、红外热像以及温度的视频情感语义隐式标注；在此基础上，研究情感化视频编辑合成算法；探索情感化合成算法有效性的评估方法。 本项目融合可见光和红外热像识别观众的表情，结合面部温度推理观众的情感，以此作为视频隐式标签，并采用自上而下和自下而上相结合的方式，建立视频物理空间和情感语义空间的映射，为视频情感语义隐式标注提供一种新的可行的途径。本项目以观众的面部信号作为反馈，编辑合成出能够满足观众某种情感诉求的视频，为视频编辑提供新的思路。本项目借鉴心理物理学中的心理量表的方法，为情感模型和算法的评估提供一种新的解决方法，对于推进情感智能的理论研究具有重要的学术价值。

中文关键词： 表情识别；视频情感语义；隐性标注；；

英文摘要：

英文关键词： expression recognition；video emotion semantic；implicit tagging；；