会员服务
马尔科夫过程又称马尔科夫链，讲的一组具有马尔科夫性的随机序列。马尔科夫性:对于一组随机X=(x1,x2,x3...xn),元素xi出现的概率与前m个元素有关，即P(xi|x(i-m),x(i-m+1...x(i-1))，则该序列具有马尔可夫性。如果假设当前元素出现的概率只与前一个元素有关，则变成P(xi|x(i-1)),此时称为其次马尔科夫假设。马尔科夫过程多用于序列处理，如强化学习中的状态序列。点击这里：科尔科夫过程的百度解释链接

精品内容

【开放书】部分观测动态系统的贝叶斯学习，119页pdf，Bayesian Learning for partially observed dynamical systems
【开放书】部分观测动态系统的贝叶斯学习，119页pdf，Bayesian Learning for partially observed dynamical systems
专知会员服务
38+阅读 · 2019年12月27日
【KDD2019|讲座推荐】神经网络中的不完全性：偏差、偏斜结果和一些解决方案：Incompleteness in Networks: Biases, Skewed Results, and Some Solutions
【KDD2019|讲座推荐】神经网络中的不完全性：偏差、偏斜结果和一些解决方案：Incompleteness in Networks: Biases, Skewed Results, and Some Solutions
专知会员服务
8+阅读 · 2019年12月11日
【微软Alekh等开放新书】强化学习理论与算法（Reinforcement Learning:Theory and Algorithms），附83页pdf
【微软Alekh等开放新书】强化学习理论与算法（Reinforcement Learning:Theory and Algorithms），附83页pdf
专知会员服务
116+阅读 · 2019年11月24日
【新书稿：强化学习：理论与算法】《Reinforcement Learning: Theory and Algorithms》by Alekh Agarwal, Nan Jiang, Sham M. Kakade (2019)，(附83页pdf)
【新书稿：强化学习：理论与算法】《Reinforcement Learning: Theory and Algorithms》by Alekh Agarwal, Nan Jiang, Sham M. Kakade (2019)，(附83页pdf)
专知会员服务
79+阅读 · 2019年11月23日
实时强化学习《Real-Time Reinforcement Learning》S Ramstedt, C Pal [Mila, Element AI] (2019)
实时强化学习《Real-Time Reinforcement Learning》S Ramstedt, C Pal [Mila, Element AI] (2019)
专知会员服务
13+阅读 · 2019年11月17日
【报告推荐 | HEC-Montreal唐建博士】图神经网络推理，附27页ppt
【报告推荐 | HEC-Montreal唐建博士】图神经网络推理，附27页ppt
专知会员服务
77+阅读 · 2019年11月13日
参考链接
父主题
时间序列分析
强化学习
序贯决策
子主题
马尔可夫决策过程
微信扫码咨询专知VIP会员
Top