深度学习知识点5-马尔可夫链

马尔科夫链的思想过去所有的信息都已经被保存到了现在的状态,基于现在就可以预测未来。

The future is independent of the past given the present

马尔可夫链属于 随机过程课程(使用统计模型一些事物的过程进行预测和处理

概述:

一个用数学方法就能解释自然变化的一般规律模型,被命名为马尔科夫链(Markov Chain)。为状态空间中经过从一个状态到另一个状态的转换 的++随机过程++ ,该过程要求具备"无记忆性 ",即下一状态的概率分布只能由当前状态决定,在时间序列中它前面的事件均与之无关(认为之前的所有信息都被保存到了当前的状态,因此未来与过去无关) 。这种特定类型的"无记忆性 "称作马尔可夫性质。

定义:

只要能求出系统中任意两个状态之间的转换概率,这个马尔科夫链的模型就定了。

转移概率矩阵:将事件的状态转换成概率矩阵 (又称状态分布矩阵 ),如下例:

参考:简述马尔可夫链【通俗易懂】 - 知乎

相关推荐
喜欢就别9 小时前
【Agentic RL / 强化学习 / OPD】OpenClaw-RL 源码阅读笔记 --- (2)--- On-Policy Distillation
人工智能·笔记
糯米导航12 小时前
AI 视觉回归实战:截图对比不是“找不同”,如何让智能差异分析真正服务 UI 质量
人工智能·ui·回归
科技圈观察13 小时前
2026年好伴AI医疗专用大模型应用梳理与梯队参考
人工智能
jkyy201413 小时前
深耕AI健康医疗数据智库,赋能企业构建主动健康管理新生态
大数据·人工智能·健康医疗
cd_9492172113 小时前
3D角色自动绑骨怎么做?用V2Fun完成建模、绑定、动作和导出
人工智能·3d
瑞禧生物tech13 小时前
SH-PEG-Biotin巯基-聚乙二醇-生物素 HS-PEG-Bio 深度解析
人工智能
QYR-分析13 小时前
机器人安全控制器行业高速扩容 本土替代迎来全新发展窗口期
人工智能·安全·机器人
bryant_meng14 小时前
【MV】Machine Vision Fundamentals: MV vs. CV Explained
计算机视觉·机器视觉·数字图像处理·cv·mv
冬奇Lab14 小时前
MCP 系列(06):MCP vs Function Calling——用数据说话的选型指南
人工智能
冬奇Lab14 小时前
每日一个开源项目(第159篇):Vibe-Trading - 用自然语言做量化研究,AI 驱动的个人交易 Agent
人工智能·开源·资讯