ELBO和VLB

ELBO(Evidence Lower BOund)和 VLB(Variational Lower Bound)是同一个概念的两种叫法

在变分推断(Variational Inference)中,我们的目标是最大化数据的对数似然 og p(x) logp(x),但通常难以直接计算(intractable)。

通过 Jensen 不等式,可以推导出一个下界

最大化 ELBO ⟺ 同时做到两件事:

  1. 提高数据重建质量
  2. 让近似后验 q(z∣x) 接近先验 p(z)
相关推荐
君为先-bey18 天前
LightningDiT----重建与生成:在潜在扩散模型中驯服优化困境
深度学习·扩散模型·视频生成·潜在扩散模型
君为先-bey18 天前
NWM----导航世界模型
transformer·扩散模型·导航·具身智能·世界模型·条件扩散
科研小刘带你玩学术20 天前
学术干货|DDT:解耦扩散Transformer实现高效高质量图像生成
扩散模型·图像生成·扩散transformer·解耦架构·条件编码器·速度解码器
机器学习之心22 天前
扩散模型数据增强 + Transformer-LSTM 回归预测:小样本场景下的工业级解决方案
回归·lstm·transformer·扩散模型
君为先-bey24 天前
UniVidX——基于扩散先验的统一多模态视频生成框架
计算机视觉·多模态·扩散模型·视频生成
君为先-bey25 天前
DiffusionOPD——扩散模型中在线策略蒸馏的统一视角
强化学习·扩散模型·opd
君为先-bey1 个月前
JointDiT:使用扩散变换器增强RGB-深度联合建模
人工智能·深度学习·计算机视觉·扩散模型·图像生成
君为先-bey1 个月前
VideoReward: 人类反馈优化视频生成文献深度阅读分析
人工智能·音视频·扩散模型
君为先-bey1 个月前
CineMaster: 3D感知电影级视频生成框架文献深度阅读分析
3d·音视频·扩散模型
未知方程 无解1 个月前
我用RTX4090显卡训练了一个AI绘画模型
ai绘画·扩散模型·rtx4090·rxt4090显卡