基于视/听信息融合的复杂机电系统运行状态监测原理与方法研究

项目名称： 基于视/听信息融合的复杂机电系统运行状态监测原理与方法研究

项目编号： No.51175145

项目类型： 面上项目

立项/批准年度： 2012

项目学科： 机械、仪表工业

项目作者： 李铁军

作者单位： 河北工业大学

项目金额： 60万元

中文摘要： 复杂机电系统的功能与结构的复杂化，导致系统监测与维护所需的信息量急剧增加，故障诊断与安全评估越来越需要对于系统的总体把握。针对复杂机电系统由于缺少外部传感信息而进行服役过程监测的局限性，基于视听交叉感知的神经生理学启示，引入视听信息与内部传感信息进行融合，研究建立复杂机电系统运行状态的监测的理论与方法。提出并建立基于内外感知的复杂机电系统运行状态描述与监测理论体系；提出多运动与多声源目标的分解与编码方法，建立基于多媒体内容描述接口的图像认知与声音描述的数学模型；提出将视频、音频和状态的多模式信息转换成时间相关的单模式信息的多模式信息融合理论与方法，建立基于此融合信息的状态监测；将信息流与能量流特征匹配，探索复杂机电系统的故障演化机理；开发面向智能检测的嵌入式视听融合的软硬件实验系统。本研究面向复杂机电系统能够长期、稳定、安全、可靠运行，为智能化机电装备的开发提供基础理论。

中文关键词： 故障诊断；视听感知；信息融合；智能监控；机器学习

英文摘要：

英文关键词： fault diagnosis；audio-visual perception；information fusion；intelligent monitoring；machine learning