马尔可夫链 学习笔记

马尔可夫链是一种数学模型,用于描述具有马尔可夫性质的随机过程------当前状态的概率只依赖于前一个状态。下面是一个简单的例子,使用三个数据(状态)来描述一个简单的马尔可夫链:

假设有三个状态:晴天(Sunny)、阴天(Cloudy)、雨天(Rainy)。每天的天气状态只依赖于前一天的天气状态。

这里是可能的状态转换概率:

  • 从晴天到阴天的概率是0.4,到雨天的概率是0.1,保持晴天的概率是0.5。
  • 从阴天到晴天的概率是0.3,到雨天的概率是0.4,保持阴天的概率是0.3。
  • 从雨天到晴天的概率是0.2,到阴天的概率是0.5,保持雨天的概率是0.3。

下面是一个示例,描述三天内的可能天气状态变化过程,假设第一天是晴天:

  1. 第一天:晴天(Sunny)

    • 以0.5的概率保持晴天
    • 以0.4的概率转变为阴天
    • 以0.1的概率转变为雨天
  2. 第二天:阴天(假设第一天转变为阴天)

    • 以0.3的概率保持阴天
    • 以0.3的概率转变为晴天
    • 以0.4的概率转变为雨天
  3. 第三天:雨天(假设第二天转变为雨天)

    • 以0.3的概率保持雨天
    • 以0.2的概率转变为晴天
    • 以0.5的概率转变为阴天
相关推荐
一隅论数智2 天前
给AI一张“业务概念地图“:本体如何从哲学走向企业智能
大数据·人工智能·经验分享·笔记·学习·学习方法·政务
XiHongShi20162 天前
STM32F407 RTC定时器例程,建议保存
stm32·单片机·学习
爱吃苹果的日记本2 天前
离散数学第六课
学习·离散数学
AI职业加油站2 天前
AI智能体应用工程师证书:政策红利下的职业新风口
大数据·运维·人工智能·学习·职场发展
深圳老胡2 天前
STM32F407 控制 L6470 步进电机驱动 —— 控制过程简介
笔记·stm32·单片机·嵌入式硬件·代码规范
旖旎夜光2 天前
力控面试题 01.01: 判定字符是否唯一(位运算) —— 题解
c++·学习·算法·leetcode·力控
奇思妙想聪明勤奋的小羊2 天前
DeepAgents第5章:子Agent 与上下文隔离—让 Agent学会委派
人工智能·python·学习·语言模型
Because_of_Her12 天前
并查集-听课笔记
笔记·算法·并查集
霍霍的袁2 天前
【C++】map 和 set 的使用 | 从用法到底层
开发语言·c++·学习·visual studio