马尔可夫链 学习笔记

马尔可夫链是一种数学模型,用于描述具有马尔可夫性质的随机过程------当前状态的概率只依赖于前一个状态。下面是一个简单的例子,使用三个数据(状态)来描述一个简单的马尔可夫链:

假设有三个状态:晴天(Sunny)、阴天(Cloudy)、雨天(Rainy)。每天的天气状态只依赖于前一天的天气状态。

这里是可能的状态转换概率:

  • 从晴天到阴天的概率是0.4,到雨天的概率是0.1,保持晴天的概率是0.5。
  • 从阴天到晴天的概率是0.3,到雨天的概率是0.4,保持阴天的概率是0.3。
  • 从雨天到晴天的概率是0.2,到阴天的概率是0.5,保持雨天的概率是0.3。

下面是一个示例,描述三天内的可能天气状态变化过程,假设第一天是晴天:

  1. 第一天:晴天(Sunny)

    • 以0.5的概率保持晴天
    • 以0.4的概率转变为阴天
    • 以0.1的概率转变为雨天
  2. 第二天:阴天(假设第一天转变为阴天)

    • 以0.3的概率保持阴天
    • 以0.3的概率转变为晴天
    • 以0.4的概率转变为雨天
  3. 第三天:雨天(假设第二天转变为雨天)

    • 以0.3的概率保持雨天
    • 以0.2的概率转变为晴天
    • 以0.5的概率转变为阴天
相关推荐
望森FPGA9 分钟前
HDLBits中文版,标准参考答案 |2.5 More Verilog Features | 更多Verilog 要点
学习·fpga开发
kissSimple9 分钟前
UE行为树编辑器图文笔记
笔记·ue5·编辑器·unreal engine·unreal engine 5
l1x1n020 分钟前
DOS 命令学习笔记
笔记·学习·web安全
winds~43 分钟前
自动驾驶-问题笔记-待解决
人工智能·笔记·自动驾驶
道爷我悟了1 小时前
Vue入门-指令学习-v-on
javascript·vue.js·学习
人工智能技术咨询.1 小时前
张雪峰谈人工智能技术应用专业的就业前景!
人工智能·学习·计算机视觉·语言模型
s_little_monster1 小时前
【QT】QT入门
数据库·c++·经验分享·笔记·qt·学习·mfc
alfiy2 小时前
Elasticsearch学习笔记(六)使用集群令牌将新加点加入集群
笔记·学习·elasticsearch
爱学的小涛2 小时前
【NIO基础】基于 NIO 中的组件实现对文件的操作(文件编程),FileChannel 详解
java·开发语言·笔记·后端·nio
爱学的小涛2 小时前
【NIO基础】NIO(非阻塞 I/O)和 IO(传统 I/O)的区别,以及 NIO 的三大组件详解
java·开发语言·笔记·后端·nio