马尔可夫跳跃系统的决策-控制策略研究与优化

项目名称： 马尔可夫跳跃系统的决策-控制策略研究与优化

项目编号： No.61374073

项目类型： 面上项目

立项/批准年度： 2013

项目学科： 自动化技术、计算机技术

项目作者： 朱进

作者单位： 中国科学技术大学

项目金额： 79万元

中文摘要： 本项目围绕马尔可夫跳跃系统中的模态转移速率矩阵这一重要参数展开研究，设计决策-控制策略作用于系统，以最小代价实现系统的随机稳定。首先，针对无噪声干扰时的跳跃系统，提出包含控制代价和决策代价的新型性能指标，并设计最优一步确定型和随机型决策-控制策略；其次，针对噪声干扰下的跳跃系统，设计最优状态估计器，进而利用分离定理给出最优一步确定型和随机型决策-估计-控制策略。在一步决策-控制策略研究的基础上，考虑跳跃系统中存在多决策点的情形，研究其最优多步决策-控制策略设计；最后运用控制理论和方法将最优决策-控制策略的设计归结为最优决策量的选取问题，给出相应的决策搜索算法，并验证算法的收敛性和计算复杂度。本项目提出的决策-控制策略相较于传统的控制策略具有更大的灵活性，在确保系统稳定的同时有效降低了系统代价，对于丰富和发展马尔可夫跳跃系统的控制具有理论意义，而且对其在工程领域中的推广也具有实际应用价值。

中文关键词： 马尔可夫跳跃系统；模态转移速率/概率矩阵；决策-控制策略；稳定代价；拥塞检测及控制

英文摘要： This project performs research based on Mode Transition Rate Matrix, the primary parameter of Markovian jump systems, where decision-control strategy is proposed for system stochastic stabilization with minimum cost. Firstly we investigate the jump system

英文关键词： Markovian Jump Systems；Mode Transition Rate/Probability Matrix；Decision-Control Strategy；Stabilization Cost；Congestion Detection and Control