2.1.3 相机图像信号处理的基本流程

文章目录

ISP基本流程

图像信号处理将传感器采集到的Bayer阵列数据转换成符合人眼观感的图像数据。ISP(Image Signal Processing)图像信号处理基本流程包括坏点校正(DPC, Defect Pixel Correction),黑电平校正(BLC,Black Level Correction),镜头阴影校正(LSC,Lens Shading Correction),去噪,去马赛克,自动白平衡(AWB, Auto White Balance),颜色校正(CCM, Color Correction Matrix),Gamma校正。

ISP各基本流程职责

  • 坏点校正:坏点是由于传感器工艺缺陷,导致部分像素点不准确的问题。需要在传感器采集到图像的前期,就对坏点进行识别和处理。
  • 黑电平校正:黑电平问题是由于光电二极管在无光时产生暗电流导致,使得黑的地方数值非零。在采集数据时,一般预留部分区域不做曝光,得到暗电流的数值。然后用曝光区域的结果减去暗电流,进行黑电平校正。
  • 镜头阴影校正:由于镜头中心与镜头边缘的差异,导致图像中心到四周的亮度、颜色有差异。可以通过给采集的图像上的各点乘以补偿系数进行校正。校正亮度时,距离中心越远的区域,补偿越多即可。校正颜色时,由于不同波段的光从中心到边缘的衰减速率有差异,需要对衰减补偿权重图的函数模型进行标定,计算对应的补偿系数。
  • 去噪:噪声的来源包括光子散粒噪声、暗电流噪声、读出噪声。去噪方法在以后的章节会详细描述。
  • 去马赛克:见上一节的描述。2.1.2 Bayer阵列与去马赛克
  • 自动白平衡:由于人眼视觉有恒常性,即对物体色彩的感知不受光源的影响,而传感器没有这种特性。为了模拟人眼的恒常性,需要对采集图像的R、G、B各通道乘以补偿系数,去除光源的影响。灰度世界方法,假设色彩丰富的场景,R,G,B的均值趋向于相等,由此来计算补偿系数,进行自动白平衡。
  • 颜色校正:由于不同传感器输出的RGB图像颜色与人的主观感知有差异,需要通过标准色卡标定一个3x3的色彩转换矩阵,对颜色进行校正。
  • Gamma校正:由于人眼对亮度的非线性响应,人眼对暗区变化更为敏感。通过Gamma校正对暗区进行拉伸,用更多的色阶表示暗区,可以让图像更符合人眼观感。
相关推荐
s09071364 小时前
【声呐硬件设计】LFM信号处理中前级有源滤波器设计的关键考量与原理分析
信号处理·声呐·线性相位·模拟滤波器
禁默17 小时前
打通 AI 与信号处理的“任督二脉”:Ascend SIP Boost 加速库深度实战
人工智能·信号处理·cann
池央17 小时前
CANN SIP 信号处理算子库深度解析:FFT 硬件加速、复数运算的向量化实现与端到端数据流优化
信号处理
池央21 小时前
CANN SIP 信号处理算子库深度解析:高性能信号处理的硬件加速、多维数据流与定制化融合策略
信号处理
池央1 天前
CANN 算子生态的深度演进:稀疏计算支持与 PyPTO 范式的抽象层级
运维·人工智能·信号处理
池央1 天前
CANN SIP 信号处理算子库深度解析:FFT/IFFT 的硬件级加速、复数运算优化与端到端流水线构建
信号处理
池央1 天前
CANN 算子合规性与迁移性:自定义算子设计中的安全边界与属性兼容性
人工智能·自动化·信号处理
花月mmc2 天前
CanMV K230 波形识别——整体部署(4)
人工智能·python·嵌入式硬件·深度学习·信号处理
南檐巷上学2 天前
基于MATLAB的麦克风音频效果测试
matlab·信号处理·数字信号处理·dsp·信号与系统·快速傅里叶变换·麦克风测试
Aaron15883 天前
基于RFSOC的数字射频存储技术应用分析
c语言·人工智能·驱动开发·算法·fpga开发·硬件工程·信号处理