会员服务
马尔科夫过程又称马尔科夫链，讲的一组具有马尔科夫性的随机序列。马尔科夫性:对于一组随机X=(x1,x2,x3...xn),元素xi出现的概率与前m个元素有关，即P(xi|x(i-m),x(i-m+1...x(i-1))，则该序列具有马尔可夫性。如果假设当前元素出现的概率只与前一个元素有关，则变成P(xi|x(i-1)),此时称为其次马尔科夫假设。马尔科夫过程多用于序列处理，如强化学习中的状态序列。点击这里：科尔科夫过程的百度解释链接
暂无数据
参考链接
父主题
时间序列分析
强化学习
序贯决策
子主题
马尔可夫决策过程
微信扫码咨询专知VIP会员
Top