马尔可夫链 学习笔记

马尔可夫链是一种数学模型,用于描述具有马尔可夫性质的随机过程------当前状态的概率只依赖于前一个状态。下面是一个简单的例子,使用三个数据(状态)来描述一个简单的马尔可夫链:

假设有三个状态:晴天(Sunny)、阴天(Cloudy)、雨天(Rainy)。每天的天气状态只依赖于前一天的天气状态。

这里是可能的状态转换概率:

  • 从晴天到阴天的概率是0.4,到雨天的概率是0.1,保持晴天的概率是0.5。
  • 从阴天到晴天的概率是0.3,到雨天的概率是0.4,保持阴天的概率是0.3。
  • 从雨天到晴天的概率是0.2,到阴天的概率是0.5,保持雨天的概率是0.3。

下面是一个示例,描述三天内的可能天气状态变化过程,假设第一天是晴天:

  1. 第一天:晴天(Sunny)

    • 以0.5的概率保持晴天
    • 以0.4的概率转变为阴天
    • 以0.1的概率转变为雨天
  2. 第二天:阴天(假设第一天转变为阴天)

    • 以0.3的概率保持阴天
    • 以0.3的概率转变为晴天
    • 以0.4的概率转变为雨天
  3. 第三天:雨天(假设第二天转变为雨天)

    • 以0.3的概率保持雨天
    • 以0.2的概率转变为晴天
    • 以0.5的概率转变为阴天
相关推荐
南宫生12 分钟前
力扣每日一题【算法学习day.130】
java·学习·算法·leetcode
南宫生1 小时前
力扣每日一题【算法学习day.133】
java·学习·算法·leetcode
SRA.1 小时前
STM32——HAL库开发笔记22(定时器3—呼吸灯实验)(参考来源:b站铁头山羊)
笔记·stm32·嵌入式硬件
SRA.1 小时前
STM32——HAL库开发笔记21(定时器2—输出比较)(参考来源:b站铁头山羊)
笔记·stm32·嵌入式硬件
C语言扫地僧2 小时前
RPC 框架项目剖析
c++·网络协议·学习·rpc
三少爷的甲壳虫2 小时前
Python&C
学习
DKPT2 小时前
计算机网络之路由协议(自治系统)
开发语言·笔记·学习·计算机网络·算法
虾球xz2 小时前
游戏引擎学习第119天
学习·游戏引擎
是懒羊羊吖~4 小时前
Visual Studio Code的下载安装与汉化
笔记·visual studio
日记成书4 小时前
详细介绍嵌入式硬件设计
嵌入式硬件·深度学习·学习