深度学习知识点5-马尔可夫链

马尔科夫链的思想:过去所有的信息都已经被保存到了现在的状态,基于现在就可以预测未来。

The future is independent of the past given the present

马尔可夫链属于 随机过程课程(使用统计模型一些事物的过程进行预测和处理)

概述:

一个用数学方法就能解释自然变化的一般规律模型,被命名为马尔科夫链(Markov Chain)。为状态空间中经过从一个状态到另一个状态的转换 的++随机过程++ ,该过程要求具备"无记忆性 ",即下一状态的概率分布只能由当前状态决定,在时间序列中它前面的事件均与之无关(认为之前的所有信息都被保存到了当前的状态,因此未来与过去无关) 。这种特定类型的"无记忆性 "称作马尔可夫性质。

定义:

只要能求出系统中任意两个状态之间的转换概率,这个马尔科夫链的模型就定了。

转移概率矩阵:将事件的状态转换成概率矩阵 (又称状态分布矩阵 ),如下例:

参考:简述马尔可夫链【通俗易懂】 - 知乎

相关推荐
kaixin_啊啊7 分钟前
【零基础学AI】第 29 章——第一次调用大模型 API
人工智能
甲维斯9 分钟前
Qwen4 被嘲笑了!国模被啥锁死了?
人工智能
夕阳_醉了31 分钟前
Codex 客户端从装好到跑通:第三方 API 接入与配置避坑指南
人工智能·gpt·openai·codex·ai 编程
熟的生菜31 分钟前
从零造一个腱绳驱动灵巧手——仿真器篇5:姿势串与手势工程——从文本协议到握拳、OK 与多姿势插值
人工智能
武子康1 小时前
攻击动作做对了,游戏规则就对了吗?H3-World 与三条控制路线的分工
大数据·人工智能·agent
探求虚无1 小时前
用 AI 在 Unity 里做一款 RTS:最难的不是生成代码,而是证明它真的能玩
人工智能·unity·游戏引擎
vivo互联网技术2 小时前
AI Agent 技术全景解析 —— 从提示词工程到高级智能体构建
人工智能·agent
武子康2 小时前
H3-World 的动作能按时发生,为何还不能据此判断实时互动?
人工智能·深度学习·agent
师夷长技以自愈2 小时前
手搓 AI Agent 第 4 篇:后厨扩招——AI 从此能读、能写、能改、能跑
人工智能