2.1.3 相机图像信号处理的基本流程

文章目录

ISP基本流程

图像信号处理将传感器采集到的Bayer阵列数据转换成符合人眼观感的图像数据。ISP(Image Signal Processing)图像信号处理基本流程包括坏点校正(DPC, Defect Pixel Correction),黑电平校正(BLC,Black Level Correction),镜头阴影校正(LSC,Lens Shading Correction),去噪,去马赛克,自动白平衡(AWB, Auto White Balance),颜色校正(CCM, Color Correction Matrix),Gamma校正。

ISP各基本流程职责

  • 坏点校正:坏点是由于传感器工艺缺陷,导致部分像素点不准确的问题。需要在传感器采集到图像的前期,就对坏点进行识别和处理。
  • 黑电平校正:黑电平问题是由于光电二极管在无光时产生暗电流导致,使得黑的地方数值非零。在采集数据时,一般预留部分区域不做曝光,得到暗电流的数值。然后用曝光区域的结果减去暗电流,进行黑电平校正。
  • 镜头阴影校正:由于镜头中心与镜头边缘的差异,导致图像中心到四周的亮度、颜色有差异。可以通过给采集的图像上的各点乘以补偿系数进行校正。校正亮度时,距离中心越远的区域,补偿越多即可。校正颜色时,由于不同波段的光从中心到边缘的衰减速率有差异,需要对衰减补偿权重图的函数模型进行标定,计算对应的补偿系数。
  • 去噪:噪声的来源包括光子散粒噪声、暗电流噪声、读出噪声。去噪方法在以后的章节会详细描述。
  • 去马赛克:见上一节的描述。2.1.2 Bayer阵列与去马赛克
  • 自动白平衡:由于人眼视觉有恒常性,即对物体色彩的感知不受光源的影响,而传感器没有这种特性。为了模拟人眼的恒常性,需要对采集图像的R、G、B各通道乘以补偿系数,去除光源的影响。灰度世界方法,假设色彩丰富的场景,R,G,B的均值趋向于相等,由此来计算补偿系数,进行自动白平衡。
  • 颜色校正:由于不同传感器输出的RGB图像颜色与人的主观感知有差异,需要通过标准色卡标定一个3x3的色彩转换矩阵,对颜色进行校正。
  • Gamma校正:由于人眼对亮度的非线性响应,人眼对暗区变化更为敏感。通过Gamma校正对暗区进行拉伸,用更多的色阶表示暗区,可以让图像更符合人眼观感。
相关推荐
山河君3 天前
四麦克风声源定位实战:基于 GCC-PHAT + 最小二乘法实现 DOA
算法·音视频·语音识别·信号处理·最小二乘法·tdoa
Aaron15885 天前
RFSOC与ADRV9009、AD9026、AD9361技术指标及应用场景对比分析
人工智能·算法·fpga开发·硬件工程·信息与通信·信号处理·基带工程
AomanHao6 天前
【阅读笔记】沙尘图像线性颜色校正A fusion-based enhancing approach for single sandstorm image
图像处理·笔记·isp·图像增强·沙尘图像·色偏·颜色校正
jz_ddk7 天前
[实战] 从冲击响应函数计算 FIR 系数
python·fpga开发·信号处理·fir·根升余弦·信号成形
dgaf8 天前
求助,《信号与系统》是做什么的?
物联网·硬件工程·信息与通信·信号处理·dsp开发
@陈小鱼8 天前
基于 Savitzky-Golay滤波器的超声图像运动分析方法
python·计算机视觉·matlab·信号处理
柏木乃一13 天前
Linux进程信号(2):信号产生part2
linux·运维·服务器·c++·信号处理·信号·异常
DuHz13 天前
汽车雷达高级信号处理和建模技术简介——文章精读(上)
linux·论文阅读·人工智能·汽车·信号处理
浩子智控13 天前
高精度高速模拟采集电路挑战
硬件架构·硬件工程·信号处理·dsp开发
芯门17 天前
FPGA商用级ISP(二):镜头阴影校正(LSC)的网格增益插值与并行硬件架构实现
图像处理·fpga开发·isp