GPU PRO 5 - 1.2 Reducing Texture Memory Usage by 2-Channel Color Encoding 笔记

本笔记仅为个人的理解,如果有误欢迎指出。

Reducing Texture Memory Usageby 2-Channel Color Encoding

使用双通道颜色编码改善纹理内存

一般纹理上一个像素的颜色信息是存在RGB三个通道里,本篇文章将纹理通过一些前置条件把三个通道的信息有损压缩到两个通道上。

RGB颜色空间可以表示为一个三维表示的立方体,一张纹理的所有颜色都分布在这个立方体之内,但是普通的纹理他所有像素在这个立方体中存在一定的空间关联性,具体来说在三维空间中可以找到一个平面,他与这张纹理的所有像素点都相对较近。这个技术的实现的核心就是如何找到这个平面,并将这个平面用一个维度去表示。

文章将RGB颜色信息拆成了两个部分,一个是亮度信息,一个是色调/饱和度信息。这两个信息被两个通道所存储,通过这两个通道的信息最终得到一个在该平面上的颜色。

首先是如何计算出这个颜色平面。

第一步:将原始的RGB信息通过权重计算转换到一个新的RGB值。

这一步主要是为了调整各颜色在最终颜色平面的的影响,在文章中权重RGB的权重选择了1/2,1/4,1/2。γ表示从输入颜色空间转换到线性空间的 gamma 值

第二步:计算转换后的RGB到颜色平面的误差。

因为规定了平面是经过原点(0,0,0),所以颜色平面可以用一个法向量表示。转换后的点到平面的距离可以表示为点到法向量的点积

所以在这一步的目标是找到一个法向量使得各RGB点到该法向量的距离平方和最小,也就是:

而法向量如何选择文章中并没有给出详细说明,文章中说穷举候选法向量的方式来比较每个法向量的err,再选出误差最小的那个。但具体候选的法向量怎么来的:

第三步:将第一步的权重转换转换回来,这里直接用一个逆转置矩阵进行变换。

这个颜色平面在RGB颜色空间中与边界交叉可以获得几个顶点,一个顶点是(0,0,0),与顶点相邻的两个顶点(bc1,bc2)则定义为该颜色平面的基色。也就是平面的两个基向量。

平面上的所有颜色都位于原点和这两个基色点所构成的夹角范围内,而夹角则是最后所需要存储的数据。

夹角计算步骤如下:

1,将线RGB空间中的颜色点投影到该颜色平面上。

2,计算该点在平面上的二维坐标。

3,找到一条从原点开始经过该点的二维直线。

4,计算这条直线与两个基色之间的二维线段的交点比例,即得到基色的混合系数。

这个步骤将夹角映射到bc1 到 bc2 的线段上,用线段的比例表示这个夹角。

两个通道,一个通道存储基色的混合系数,表示色调。另一个通道存储亮度。

亮度由一个固定的公式从RGB信息计算得到:

颜色还原代码如下:


文章主要的思想其实还是如何用一个颜色平面拟合一张在RGB空间下的纹理,这个平面才是能够双通道存储的核心,这里用的是最小二乘法进行的拟合。

而每个颜色在映射到平面上后,已经可以用一个二维坐标表示,这个时候其实已经是实现了双通道存储数据的基础。但文章将xy坐标这个二维信息转换为了亮度和色调这两个信息,这应该是为了抽出亮度这个信息,方便在实际应用中调整图片效果。毕竟调整通道中xy的值会导致颜色失准,而调整亮度值并不会。

文章中的压缩示例:

参考链接:

GPU Pro5 渲染篇

相关推荐
sulikey16 小时前
数据库系统概论4 - 更新与视图 期末速成课笔记
数据库·笔记·考试·期末速成·数据库系统概论
لا معنى له17 小时前
NeoVerse: Enhancing 4D World Model with in-the-wild Monocular Videos
人工智能·笔记·机器学习·语言模型
黄毛火烧雪下17 小时前
Java 基础笔记:文件、递归与字符编码
java·开发语言·笔记
学计算机的计算基17 小时前
链表算法上篇:LeetCode 206/234/141/142/160/21 题解与易错点
java·笔记·算法·链表
二哈赛车手18 小时前
新人笔记---idea索引失效问题解决方案
java·笔记·spring·elasticsearch·intellij-idea
A.零点18 小时前
【2个月 C 语言从入门到精通:零基础系统教程】第十二讲:深入了解指针(五)
c语言·开发语言·网络·笔记·visual studio
ctrl_v助手19 小时前
VisionPro (R) QuickBuild相机的连接
服务器·笔记·数码相机·c#
代码搬运媛19 小时前
Express 入门到精通笔记
笔记·express
格兰芬多呼神护卫20 小时前
中国电信 TeleAI 开源 KungfuBot / PBHC 框架分析笔记
笔记·开源