技术美术百人计划 | 《4.1 Bloom算法》笔记

1. Bloom算法介绍

1.1. Bloom效果

实际拍摄照片与游戏画面Bloom效果对比,Bloom模拟了真实世界图片的效果

Bloom流程图

1.2. 前置知识:HDR和LDR,高斯模糊

1.2.1. HDR和LDR

LDR颜色范围太少,精度不够,往往会存在颜色精度范围的丢失。

1.2.2. 高斯模糊

1.2.2.1. 卷积与卷积核

首先了解卷积是什么?

图像卷积操作(convolution),或称为核操作(kernel),是进行图像处理的一种常用手段。图像卷积操作的目的是利用像素点和其邻域像素之前的空间关系,通过加权求和的操作,实现模糊(blurring),锐化(sharpening),边缘检测(edge detection)等功能。图像卷积的计算过程就是卷积核按步长对图像局部像素块进行加权求和的过程。

卷积核实质上是一个固定大小的权重数组,该数组中的锚点通常位于中心。通常情况下,选取卷积核大小为1x1,3x3,5x5,7x7等。取奇数大小的目的是为了设置卷积核中心为锚点,方便卷积核和图像的对齐处理。设置卷积核大小对称的目的是为了在空间域中充分利用像素点和其领域像素间的关系。当然这不是必须的,如果需要针对某一轴进行处理,可以设置1x3或3x1大小。

卷积计算过程

1.2.2.2. 高斯核

高斯核是通过高斯函数定义的卷积核。核中心:(0,0),核大小:3x3,标准方差σ:1.5

计算步骤:

  1. 将(x,y)带入高斯计算公式中,计算出权重值G(x,y)(权重值代表当前处理像素的影响程度,离中心越近权重越大)
  1. 为了保证卷积后图像不变暗,需要对高斯核进行归一化处理(每个权重除以所有权重的和)

但是二维高斯核的计算量大,N×N的高斯核需要N*N*W*H次纹理采样。怎么办?

分离高斯核。二维高斯核具有可分离性,可以拆成两个一维高斯核。

利用可分离性,我们就可以优化算法。可以用两个一维高斯核先后对图像进行两次卷积操作,这样一来,结果一样,采样次数为2*N*W*H。

再进一步,分离出来的一维高斯核中包括了很多重复的权重。下例中大小为5的高斯核,实际上只需要记录三个权重值即可(0.0545、0.2442、0.4026)。

2. Bloom算法实现

  1. 脚本:采用OnRenderImage()函数执行四个pass,进行后处理

注意采用双缓冲,创建中间纹理

  1. Shader部分:

使用4个pass完成bloom效果,对应bloom的实现步骤

  • pass1:提取亮部区域
  • pass2:实现竖直方向的高斯模糊
  • pass3:实现水平方向的高斯模糊
  • pass4:模糊后的高亮区域叠加到原图
相关推荐
IT_陈寒9 分钟前
SpringBoot自动配置坑了我一周,原来问题这么蠢!
前端·人工智能·后端
派葛穆19 分钟前
Unity-UI 按钮点击弹窗功能
unity·游戏引擎
糯米导航23 分钟前
实践教程|搭建电商 AI 无限画布,实现百款商品主图自动化批量生成
运维·人工智能·自动化
朴马丁1 小时前
从制造到智造:PLM如何赋能企业研发创新
大数据·运维·人工智能·食品行业·流程行业plm·化工新材料行业·新能源材料行业
武子康1 小时前
GAIA、Cosmos、Genie 等视频模型纷纷自称"世界模型",为什么说视觉逼真度不构成决策证据?
人工智能·llm·agent
上海锝秉工控1 小时前
普通编码器:基础信号处理与数据转换核心岗
人工智能·信号处理
chenyuhao20241 小时前
第一章_自动驾驶中的社会交互
人工智能·机器学习·自动驾驶
洛阳泰山1 小时前
别再为做 AI 去学 Python 了!MaxKB4j:纯 Java 造的企业级 RAG + 工作流引擎,开箱即用
人工智能·开源·agent
fthux2 小时前
GitZip Pro:给GitHub仓库“瘦身”的魔法剪刀手
人工智能·chrome·ai·语言模型·开源·github·open source
武子康2 小时前
Video VAE 不是末端编解码器:5 维-潜网格-主模型 Token 的“表示合同“
人工智能·llm·agent