本章深入探讨CMOS图像传感器的工作原理和关键技术，从光电转换的物理基础到先进的片上信号处理架构。我们将详细分析像素结构的演进、噪声源及其抑制方法、动态范围扩展技术，以及传感器性能指标如何影响ISP设计决策。理解这些基础知识对于设计高性能ISP至关重要，特别是在自动驾驶和具身智能等对成像质量要求极高的应用场景中。
CMOS图像传感器的核心是硅基光电二极管，其工作原理基于内光电效应。当入射光子能量超过硅的禁带宽度（室温下约1.12eV）时，价带电子吸收光子能量跃迁到导带，产生电子-空穴对。
光子吸收概率与波长相关，由吸收系数α(λ)决定：
\[I(x) = I_0 \cdot e^{-\alpha(\lambda) \cdot x}\]其中，$I_0$是入射光强，$x$是光在硅中的传播深度。不同波长的光在硅中的穿透深度差异很大：
现代CMOS传感器主要采用钉扎光电二极管（Pinned Photodiode, PPD）结构：
表面钝化层
============
P+ 钉扎层 <- 抑制暗电流
------------
<- 耗尽区（光生载流子收集）
N型存储区
------------
P型衬底
PPD的关键优势：
光生电子的收集效率取决于三个物理过程：
漂移：耗尽区内的强电场驱动 \(J_{drift} = q \cdot n \cdot \mu_n \cdot E\)
扩散：浓度梯度驱动的载流子运动 \(J_{diff} = q \cdot D_n \cdot \frac{dn}{dx}\)
复合损失：体内复合和表面复合 \(\tau_{eff} = \frac{1}{\frac{1}{\tau_{bulk}} + \frac{1}{\tau_{surface}}}\)
早期CMOS传感器采用3T（三晶体管）结构，包含复位管(RST)、源跟随器(SF)和行选择管(RS)：
VDD
|
RST
|
PD -----> SF
|
RS
|
输出
3T像素的主要限制：
4T像素增加传输门(TG)，实现PPD与浮动扩散节点(FD)分离：
VDD
|
RST----FD
| |
TG SF
| |
PPD RS
|
输出
4T像素的技术优势：
为提高填充因子，多个光电二极管共享读出电路：
2x2共享结构 2x1共享结构
PPD1--TG1 PPD1--TG1
| |
PPD2--TG2---FD PPD2--TG2---FD
| | |
PPD3--TG3 SF 共享SF/RS
| |
PPD4--TG4 RS
共享架构的设计权衡：
量子效率(QE)定义为产生的电子数与入射光子数之比：
\[QE(\lambda) = \frac{N_{electrons}}{N_{photons}} = \eta_{fill} \cdot \eta_{trans} \cdot \eta_{abs} \cdot \eta_{coll}\]其中：
现代CMOS传感器的光学堆栈设计：
微透镜 (聚光)
============
彩色滤光片
------------
抗反射涂层
------------
钝化层/IMD
------------
光电二极管
关键优化技术：
通过材料和结构优化调节光谱响应：
最常见的架构，每列配置一个ADC：
像素阵列
========
列放大器
--------
列ADC阵列 <- 单斜坡/SAR/Σ-Δ
--------
数字处理
技术特点：
常用ADC类型比较：
| ADC类型 | 转换速度 | 功耗 | 面积 | 精度 |
|---|---|---|---|---|
| 单斜坡 | 慢(2^N周期) | 低 | 小 | 高(12-14bit) |
| SAR | 中(N周期) | 中 | 中 | 中(10-12bit) |
| Σ-Δ | 慢 | 低 | 大 | 很高(14-16bit) |
| 循环 | 中 | 中 | 小 | 中(10-12bit) |
每个像素集成ADC，实现真正的数字像素传感器：
像素内：
PPD -> ADC -> 数字存储
|
数字输出
优势与挑战：
整个阵列共享少数高速ADC：
像素阵列
|
模拟多路器
|
高速ADC (1-4个)
|
数字输出
适用场景：
双转换增益(Dual Conversion Gain, DCG)通过动态调节浮动扩散节点电容实现自适应动态范围：
RST
|
TG----FD----DCG----C_extra
| | |
PPD SF 开关控制
两种工作模式：
智能切换算法考虑因素：
DCG对ISP设计的影响：
CMOS传感器总噪声模型：
\[\sigma_{total}^2 = \sigma_{photon}^2 + \sigma_{dark}^2 + \sigma_{read}^2 + \sigma_{FPN}^2\]各噪声源特性：
| 噪声类型 | 物理来源 | 统计特性 | 温度依赖 | 抑制方法 |
|---|---|---|---|---|
| 光子散粒噪声 | 光子到达随机性 | 泊松分布 | 无 | 无法消除 |
| 暗电流噪声 | 热激发载流子 | 泊松分布 | 强(7°C翻倍) | 制冷、PPD |
| 读出噪声 | 电路热噪声 | 高斯分布 | 弱 | CDS、低噪声设计 |
| 固定模式噪声 | 工艺偏差 | 确定性 | 弱 | 校准消除 |
暗电流主要来源：
温度依赖关系： \(I_{dark}(T) = I_{dark}(T_0) \cdot 2^{(T-T_0)/T_d}\)
其中$T_d \approx 7-8°C$为翻倍温度。
抑制技术：
读出噪声组成： \(\sigma_{read}^2 = \sigma_{reset}^2 + \sigma_{SF}^2 + \sigma_{ADC}^2 + \sigma_{amp}^2\)
降噪技术：
动态范围(DR)定义： \(DR = 20\log_{10}\frac{FWC}{\sigma_{noise}} \text{ (dB)}\)
其中：
传统像素DR限制：
时域多次采样方案：
长曝光: ████████████ (捕获暗部)
中曝光: ████ (中间调)
短曝光: █ (高光)
合成算法： \(I_{HDR} = \sum_{i} w_i(x) \cdot \frac{I_i(x)}{t_i}\)
权重函数设计考虑SNR和饱和： \(w_i(x) = \begin{cases} 0 & I_i < N_{floor} \text{ or } I_i > N_{sat} \\ \text{smooth} & \text{otherwise} \end{cases}\)
横向溢出(Lateral Overflow)利用相邻像素存储溢出电荷：
正常像素: 溢出像素:
[###] -> [████]
溢出 ↓
邻近[## ]
技术实现：
优势：
挑战：
| 性能指标 | 定义 | 典型值 | ISP影响 |
|---|---|---|---|
| 量子效率(QE) | 光电转换效率 | 40-95% | 低光性能 |
| 动态范围(DR) | 最大/最小可测信号比 | 60-120dB | HDR处理需求 |
| SNR | 信噪比 | 35-45dB@标准照度 | 降噪算法选择 |
| MTF | 调制传递函数 | >0.5@Nyquist | 锐化需求 |
| 暗电流 | 无光照时电流 | <10e-/s@25°C | 长曝光校正 |
| 满阱容量(FWC) | 像素最大电荷 | 3000-50000e- | 曝光策略 |
| 转换增益(CG) | μV/e- | 50-200μV/e- | ADC设计 |
| 串扰 | 像素间干扰 | <5% | 色彩校正 |
低光性能
/\
/ \
/ \
/ \
速度 ------ 分辨率
典型权衡场景：
自动驾驶场景：
手机摄像：
安防监控：
本章系统介绍了CMOS图像传感器的核心技术，从光电转换的物理基础到先进的信号处理架构。关键要点包括：
光电转换机制：理解光子吸收、载流子产生和收集的物理过程是优化传感器性能的基础
像素架构演进：从3T到4T再到共享像素，每次演进都在特定方面实现突破，4T+PPD结构已成为主流
量子效率优化：通过光学堆栈、BSI、DTI等技术，现代传感器QE可达90%以上
片上ADC权衡：列并行ADC在性能、面积、功耗间达到最佳平衡，是主流选择
双转换增益：DCG技术实现单传感器适应更宽动态范围，是未来发展方向
噪声控制：深入理解各类噪声源，采用针对性抑制技术，暗电流和读出噪声是重点
动态范围扩展：多次曝光和横向溢出等技术将DR推向120dB+，满足HDR应用需求
性能权衡：没有完美的传感器，需要根据应用场景在各项指标间权衡
这些基础知识为后续ISP算法设计和优化提供了重要指导。理解传感器特性有助于：
2.1 计算题：某CMOS传感器像素尺寸为2.0μm×2.0μm，填充因子为65%，在550nm波长下量子效率为72%。如果入射光功率密度为100 μW/cm²，计算每个像素每秒产生的电子数。（已知：550nm光子能量约为2.25eV）
2.2 某4T像素的浮动扩散节点电容为2fF，满阱容量为5000e⁻。计算： a) 转换增益是多少μV/e⁻？ b) 满阱时FD节点电压摆幅是多少？ c) 如果ADC参考电压为1.2V，需要多少位ADC才能分辨单个电子？
2.3 判断题：说明以下关于CMOS传感器的陈述是否正确，并简要解释原因。 a) PPD结构主要通过增加量子效率来提升低光性能 b) 暗电流每降低7°C大约减半 c) 相关双采样(CDS)可以完全消除光子散粒噪声 d) 背照式(BSI)传感器的主要优势是提高了满阱容量
2.4 系统设计题：为自动驾驶前视摄像头选择图像传感器，需要在200m距离识别80cm高的物体，垂直视角30°，要求帧率≥30fps，动态范围≥120dB。请设计： a) 最小垂直分辨率要求 b) 推荐的像素尺寸范围及理由 c) 建议采用哪种HDR技术方案 d) ADC架构选择及量化位数
2.5 开放思考题：随着像素尺寸不断缩小（已接近0.6μm），传统CMOS传感器面临物理极限。请分析： a) 主要的物理限制因素有哪些？ b) 可能的技术突破方向 c) 对ISP设计会带来什么新挑战？
2.6 定量分析题：某手机采用四合一(Quad Bayer)传感器，单个小像素0.8μm，合并后等效1.6μm。已知：
计算并比较两种模式在不同光照下(10 lux、100 lux、1000 lux)的SNR表现，并分析切换策略。