基于多模态情感识别的人机交流氛围场建模方法

项目名称： 基于多模态情感识别的人机交流氛围场建模方法

项目编号： No.61403422

项目类型： 青年科学基金项目

立项/批准年度： 2014

项目学科： 自动化技术、计算机技术

项目作者： 刘振焘

作者单位： 中国地质大学（武汉）

项目金额： 25万元

中文摘要： 本项目针对多人对多机器人的交互过程，研究一种基于多模态情感识别的人机交流氛围场建模方法。充分利用包括语音、面部表情和生理信号等多模态情感信息，结合情感心理学知识，通过关联分析确定反映人类情感和人机交流氛围场的情感特征信息；研究基于主成分分析方法的语音特征信息降维处理、基于差分计算的动态面部表情特征提取和基于Fisher方法的生理信号情感特征提取；采用基于特征级与决策级信息融合的两级融合结构，融合反映人类情感的多模态情感特征信息，提出基于模糊推理和D-S证据论证的人类情感识别方法；通过对人类和机器人情感状态影响交流氛围场的权重计算，建立基于模糊层次分析法的人机交流氛围场模型。通过本项目的研究，将为人机交互提供一种结合多模态情感识别和氛围场建模的全新方法，开辟情感计算研究的新思路和新领域，对促进机器人的智能化具有重要的科学意义和研究价值。

中文关键词： 人机交互；情感识别；交流氛围；多模态；情感机器人

英文摘要： Modeling of communication atmosfield in Human-Robot Interaction (HRI) based on multi-modal emotion recognition is studied in this project, which is especially applied in many humans to many robots interaction. Multi-modal emotional cues such as speech, fa

英文关键词： Human-Robot Interaction；Emotion Recognition；Communication Atmosphere；Multimodal；Emotional Robot