深度学习知识点5-马尔可夫链

马尔科夫链的思想过去所有的信息都已经被保存到了现在的状态,基于现在就可以预测未来。

The future is independent of the past given the present

马尔可夫链属于 随机过程课程(使用统计模型一些事物的过程进行预测和处理

概述:

一个用数学方法就能解释自然变化的一般规律模型,被命名为马尔科夫链(Markov Chain)。为状态空间中经过从一个状态到另一个状态的转换 的++随机过程++ ,该过程要求具备"无记忆性 ",即下一状态的概率分布只能由当前状态决定,在时间序列中它前面的事件均与之无关(认为之前的所有信息都被保存到了当前的状态,因此未来与过去无关) 。这种特定类型的"无记忆性 "称作马尔可夫性质。

定义:

只要能求出系统中任意两个状态之间的转换概率,这个马尔科夫链的模型就定了。

转移概率矩阵:将事件的状态转换成概率矩阵 (又称状态分布矩阵 ),如下例:

参考:简述马尔可夫链【通俗易懂】 - 知乎

相关推荐
————A10 分钟前
强化学习----->轨迹、回报、折扣因子和回合
人工智能·python
CareyWYR39 分钟前
每周AI论文速递(251215-251219)
人工智能
weixin_409383121 小时前
在kaggle训练Qwen/Qwen2.5-1.5B-Instruct 通过中二时期qq空间记录作为训练数据 训练出中二的模型为目标 第一次训练 好像太二了
人工智能·深度学习·机器学习·qwen
JoannaJuanCV1 小时前
自动驾驶—CARLA仿真(22)manual_control_steeringwheel demo
人工智能·自动驾驶·pygame·carla
余俊晖1 小时前
使用Agent做本体匹配的架构设计
人工智能·语言模型·自然语言处理
科士威传动1 小时前
方形滚珠导轨如何保障高速定位精度?
人工智能·科技·机器人·自动化·制造
SmartBrain2 小时前
洞察:阿里通义DeepResearch 技术
大数据·人工智能·语言模型·架构
声声codeGrandMaster2 小时前
AI之模型提升
人工智能·pytorch·python·算法·ai
lpfasd1232 小时前
AI Phone下的各类App该何去何从
人工智能
路长冬2 小时前
深度学习评估指标:
深度学习