基于听视觉特征和用户实时表情的个性化视频情感语义分析研究

项目名称： 基于听视觉特征和用户实时表情的个性化视频情感语义分析研究

项目编号： No.61402362

项目类型： 青年科学基金项目

立项/批准年度： 2014

项目学科： 自动化技术、计算机技术

项目作者： 张立刚

作者单位： 西安理工大学

项目金额： 26万元

中文摘要： 个性化视频情感语义分析旨在找出能满足个体用户实时情感需求的视频内容，是实现个性化视频服务和开发情感智能计算机的有效途径。当前对该方法的研究还处于起步阶段，在用户实时情感检测、用户特征与视频特征结合、个性化语义分析等方面研究更是相当匮乏。本项目以视频用户表情和视频听视觉特征为研究对象，对个性化视频情感语义分析技术进行系统的科学研究：1）探索现实条件下人脸检测和跟踪、关键点定位、特征提取等表情识别的关键技术；2）研究视频听、视觉特征的选择和提取，及该特征到Arousal-Valence (A-V) 空间维度关联的映射技术；3）提出在A-V空间中视频间情感语义相似度的计算方法，并结合用户实时表情获取视频与当前用户的关联度，实现个性化系统输出。通过识别精确率和用户满意率测试，验证整个系统在反映用户实时情感需求的可行性，为实现个性化视频服务提供技术依据和实验基础。

中文关键词： 情感语义分析；个性化；表情识别；听视觉特征；视频用户

英文摘要： Personalized affective content analysis (PACA) is an emerging field to identify multimedia contents that can stimulate specific emotion responses from reviewers, and dynamically adapt contents to personal affective preferences. It has shown great potentia

英文关键词： Affective Content Analysis；Personalized；Facial Expression Recognition；Audio-Visual Feature；Video Viewer