【概率论】条件期望

在高等概率论中,给定一个概率空间 ( Ω , F , P ) (\Omega, \mathcal{F}, P) (Ω,F,P) 和其子 σ \sigma σ-代数 G ⊆ F \mathcal{G} \subseteq \mathcal{F} G⊆F,随机变量 X X X 关于 G \mathcal{G} G 的 条件期望 E X ∣ G EX\|\\mathcal{G} EX∣G 是一个满足以下两个条件的随机变量:

  1. G \mathcal{G} G-可测性 : E X ∣ G \mathbb{E}X\|\\mathcal{G} EX∣G 是 G \mathcal{G} G-可测的函数。
  2. 积分等式 :对任意 A ∈ G A \in \mathcal{G} A∈G,有
    ∫ A E X ∣ G   d P = ∫ A X   d P . \int_A \mathbb{E}X\|\\mathcal{G} \, dP = \int_A X \, dP. ∫AEX∣GdP=∫AXdP.

关键点解析:

存在性与唯一性 :由Radon-Nikodym定理保证, E X ∣ G \mathbb{E}X\|\\mathcal{G} EX∣G 在几乎必然意义下唯一存在。

直观意义 : E X ∣ G \mathbb{E}X\|\\mathcal{G} EX∣G 是在已知 G \mathcal{G} G 所包含的信息(即 G \mathcal{G} G-可测事件)时,对 X X X 的"最佳预测"。

特例 :若 G = σ ( Y ) \mathcal{G} = \sigma(Y) G=σ(Y) 由另一个随机变量生成,则 E X ∣ G \mathbb{E}X\|\\mathcal{G} EX∣G 可记为 E X ∣ Y \mathbb{E}X\|Y EX∣Y,表示给定 Y Y Y 时 X X X 的期望。

与其他定义的关联:

• 若 ( X , Y ) (X,Y) (X,Y) 有联合密度 f ( x , y ) f(x,y) f(x,y),则 E X ∣ Y = y = ∫ x f ( x ∣ y ) d x = ∫ x f ( x , y ) d x ∫ f ( x , y ) d x \mathbb{E}X\|Y=y = \int x f(x|y) dx=\frac{\int x f(x,y) dx}{\int f(x,y) dx} EX∣Y=y=∫xf(x∣y)dx=∫f(x,y)dx∫xf(x,y)dx,其中 f ( x ∣ y ) f(x|y) f(x∣y) 为条件密度。测度论定义将此推广到更一般的场景,因此条件期望 E X ∣ Y = y \mathbb{E}X\|Y=y EX∣Y=y 是关于 y y y 的函数。

性质:

条件期望具有线性性、单调性、塔性质(迭代期望)等,例如:

线性性 : E a X + b Y ∣ G = a E X ∣ G + b E Y ∣ G \mathbb{E}aX + bY \| \\mathcal{G} = a\mathbb{E}X\|\\mathcal{G} + b\mathbb{E}Y\|\\mathcal{G} EaX+bY∣G=aEX∣G+bEY∣G

塔性质 :若 H ⊆ G \mathcal{H} \subseteq \mathcal{G} H⊆G,则 E E \[ X ∣ G ∣ H ] = E E \[ X ∣ H ∣ G ] = E X ∣ H \mathbb{E}\\mathbb{E}\[X\|\\mathcal{G}|\mathcal{H}] =\mathbb{E}\\mathbb{E}\[X\|\\mathcal{H}|\mathcal{G}] = \mathbb{E}X\|\\mathcal{H} EE\[X∣G∣H]=EE\[X∣H∣G]=EX∣H

数学期望与条件期望 E E \[ X ∣ G ] = E X \mathbb{E}\\mathbb{E}\[X\|\\mathcal{G}] = \mathbb{E}X EE\[X∣G]=EX

相关推荐
tigershang2 天前
从工具到结构:工科数学的升阶之路
神经网络·机器学习·概率论
computersciencer6 天前
事件的六种关系之包含关系
程序人生·数学建模·数据分析·概率论
红烧code12 天前
统计学中的六大估计方法:从最大似然到核密度估计的本质理解
数学建模·概率论
啥都想学点的研究生15 天前
一篇文章讲清楚:朴素贝叶斯
人工智能·机器学习·概率论
知识分享小能手17 天前
深度学习学习教程,从入门到精通,概率与信息论 — 知识点详解(3)
人工智能·深度学习·学习·数据挖掘·概率论
知识分享小能手22 天前
概理论与数理统计学习教程,从入门到精通,平稳随机过程(27)
学习·数据挖掘·概率论
知识分享小能手24 天前
概理论与数理统计学习教程,从入门到精通,马尔可夫链(25)
学习·机器学习·概率论
爱喝热水的呀哈喽1 个月前
阿里镜像安装gpu torch
概率论
2301_800895101 个月前
概率论保研面试---h
概率论
我是慎独1 个月前
人工智能:现代方法读书笔记(十三)
人工智能·概率论