马尔可夫链 学习笔记

马尔可夫链是一种数学模型,用于描述具有马尔可夫性质的随机过程------当前状态的概率只依赖于前一个状态。下面是一个简单的例子,使用三个数据(状态)来描述一个简单的马尔可夫链:

假设有三个状态:晴天(Sunny)、阴天(Cloudy)、雨天(Rainy)。每天的天气状态只依赖于前一天的天气状态。

这里是可能的状态转换概率:

  • 从晴天到阴天的概率是0.4,到雨天的概率是0.1,保持晴天的概率是0.5。
  • 从阴天到晴天的概率是0.3,到雨天的概率是0.4,保持阴天的概率是0.3。
  • 从雨天到晴天的概率是0.2,到阴天的概率是0.5,保持雨天的概率是0.3。

下面是一个示例,描述三天内的可能天气状态变化过程,假设第一天是晴天:

  1. 第一天:晴天(Sunny)

    • 以0.5的概率保持晴天
    • 以0.4的概率转变为阴天
    • 以0.1的概率转变为雨天
  2. 第二天:阴天(假设第一天转变为阴天)

    • 以0.3的概率保持阴天
    • 以0.3的概率转变为晴天
    • 以0.4的概率转变为雨天
  3. 第三天:雨天(假设第二天转变为雨天)

    • 以0.3的概率保持雨天
    • 以0.2的概率转变为晴天
    • 以0.5的概率转变为阴天
相关推荐
骐骥12 小时前
学习:javaScriptProxy和registerJavaScriptProxy有什么区别,能注册多少个对象
学习·鸿蒙
Huathy-雨落江南,浮生若梦2 小时前
Caddy 学习笔记 - 反向代理与 IP 封禁
笔记·学习·tcp/ip
谢白羽3 小时前
SGLang的AWQ量化笔记
笔记·python·sglang
噜~噜~噜~3 小时前
操作系统笔记-2.3.5.2 读者-写者问题
笔记·操作系统
m4Rk_4 小时前
【论文阅读】Agent 记忆机制(57):MemSearch-o1——从查询词元生长证据,重组 Deep Search 记忆路径
论文阅读·人工智能·学习·开源·github
闭月之泪舞4 小时前
C++编程学习
c++·学习
MindUp4 小时前
企业私有化文件管理系统选型实录:从部署架构到AI能力的技术调研笔记
人工智能·笔记·架构
GGMM7895 小时前
西门子BOP20基本操作面板超详细教程(S120/G130专用)
笔记·变频器·变频器维修
网安蟹佬霸5 小时前
2026网络安全每日学习计划:每天学多久?学什么?怎么安排?照着做就行!
网络·学习·安全·web安全·学习路线·网安
一条破秋裤6 小时前
TIM 输入捕获与 PWMI:从边沿到频率、占空比
笔记·stm32·学习