线阵TDI探测器原理与ISP实现：从行频同步到级数调试

十几年前第一次接触线阵TDI探测器的时候，我其实是被它的名字唬住的。Time Delay Integration，听起来特别玄乎，实际上用大白话讲就是“我盯住一个地方多看几次，把微弱的光一点点攒起来”。等到真在项目里把一块TDI线阵传感器接到ISP管线上，扫描出第一张低照度下依然清晰的长条图像时，才真正意识到这东西在高速工业检测和遥感成像里有多能打。

今天这篇东西，我想把线阵TDI探测器从传感器原理到ISP实现、从参数计算到现场调试的完整链路拆开揉碎讲一遍。不管是刚接触TDI的新人，还是被条纹噪声和拖影折磨的集成商，都能从里面找到能直接抄作业的思路。我自己在调试过程中踩过不少坑，也会一并写出来，免得你走弯路。

1. 内容整体设计与思路拆解

1.1 为什么是线阵TDI：场景决定架构

很多读者会问，我明明用面阵相机就能拍，为什么非要上线阵TDI？

这个问题的答案，藏在“连续运动”这四个字里。在印刷品检测、锂电极片检测、薄膜表面缺陷检测这类场景中，物料永远在产线上快速流动，面阵相机要拍清动态目标，要么靠极短曝光把运动冻结，要么靠频闪光源把瞬间照亮，硬件成本和调试难度都不低。而线阵相机天生只有一个方向的视野，物料在传感器前方扫过，每扫一行拼一行，只要行频和物料速度严格匹配，成图天然是完整的、连续的，没有帧间拼接的烦恼。

但线阵有个致命短板：单行曝光时间太短。假设物料跑得很快，单行曝光可能只有几十微秒，光照稍微弱一点，信号就被噪声淹没。这时候TDI的价值就出来了——它用多个像素“接力”记录同一目标，等效把曝光时间拉长好几倍甚至几十倍，灵敏度大幅提升。

我在实际项目中见过一个典型案例：某PCB字符检测线，原先用普通线阵CCD，曝光时间被行频压到80微秒，图像背景黑乎乎一片，字符边缘全是噪点。换成16级TDI探测器，等效曝光时间翻到1.28毫秒，同样的光源条件下，整幅图像对比度立刻正常，连后续OCR的识别率都上来了。这就是TDI存在的意义：它不改变你的产线速度，但能让你在同样速度下拿到更高质量的信号。

1.2 ISP在TDI链路里管什么

TDI探测器输出的原始数据，不是能直接看的图像，必须走一整套ISP链路。完整的信号路径大概是：

光源照射目标，TDI传感器内部完成光电转换和电荷累加，输出模拟信号；模拟前端（AFE）做相关双采样、可编程增益放大和ADC量化；数字信号进入ISP核心——先做暗场和明场校正、坏像元修补、去噪，再做色彩映射、伽马校正、锐化增强，最后由高速接口输出成品图像。

在TDI场景里，ISP要解决的典型问题和面阵不太一样。比如固定模式噪声（FPN），TDI传感器的每列输出都有自己的偏置特性，不做暗场校正，图像上就会出现整片的竖直条纹。又比如坏像元，TDI积分级数多了以后，单个坏点会被拉成一条线，必须在ISP里做列方向修补。还有宽动态范围场景，高光区域在TDI的多级累加下很容易溢出，需要专门的动态范围压缩策略。

这里多说一句，TDI探测器最独特的地方在于“级数可变”。4级、8级、16级、32级、64级甚至128级，级数一变，等效曝光时间和信噪比都会跟着变。ISP的动态范围、增益、去噪力度、坏点检测阈值，全都得联动调整。这就是为什么单独调传感器不行、单独调ISP也不行，必须把驱动层、传感器层、ISP层放在一起做系统级联调。

2. 光电信号与时间延迟积分原理

2.1 TDI的核心机制：时间积分换灵敏度

说穿了，TDI就是把一维的“空间采样”换成维度的“时间累计”。传感器里有一组沿运动方向排列的光敏像素行，当目标图像在传感器表面移动时，电荷包在像元之间同步转移。目标扫过第1行时积累的光生电荷，被转移到第2行继续积累，再到第3行、第4行，最后把所有级数上的光信号加在一起输出。

这个过程可以类比成“接力搬砖”：一块砖从起点传到终点，每个人都只拿很短一程，但砖最终到达终点时，已经积累了整条运输线上所有人的劳动成果。工程上常说的“N级TDI”，就是指有N行像素参与同一目标的信号累计，比如64级TDI，灵敏度理论上相当于单行曝光时间的64倍。

但注意，“灵敏度提升N倍”和“信噪比提升N倍”是两回事。在弱光场景下，如果噪声主要由传感器读出噪声这类不随信号增大的分量主导，那么信号增强N倍、噪声基本不变，信噪比确实能接近线性提升。但如果光线足够强、噪声进入散粒噪声主导区，信号增强N倍的同时散粒噪声只增加√N倍，信噪比提升只有√N倍。这个边界条件，在选型时一定要想清楚。

2.2 行频、级数与运动同步：三个参数一条命

TDI想正常工作，有一个铁律：电荷转移速度必须和图像移动速度严格一致。如果目标在传感器上移动的速度，和电荷包转移的速度对不上，图像就会“糊”。

行频的计算公式很直接：

[
\text{行频} = \frac{\text{目标运动速度}}{\text{像元尺寸}}
]

举个例子，产线速度0.2 m/s，传感器像元尺寸7μm，那么需要的行频大约是：

[
\frac{0.2 \text{ m/s}}{7 \times 10^{-6} \text{ m}} \approx 28571 \text{ Hz}
]

也就是每秒扫两万八千多行。这个参数决定了曝光时间和TDI级数能做到什么程度。行频越高，单行周期越短，同一级数下的等效曝光时间越短。

级数越高，对速度匹配精度的要求越苛刻。原因很直观：目标经过第1级和第64级像素时，如果速度有一点偏差，电荷在中间某几级的位置就会错开，累积出来的信号不但在同一位置叠加，反而在附近像素上“拖”开一条斜尾。实测中，32级以上TDI在匀速要求高的场合，必须用外部编码器触发或高精度伺服驱动来提供行触发信号，不能靠相机内部自由运行。

在项目里，我一般建议这样处理同步问题：先确认物料传动机构的编码器分辨率够不够，至少到一个像元对应几个编码器脉冲；再把编码器信号接入相机的外触发接口，每来一个脉冲扫一行；最后在编码器信号上加滤波，否则一个毛刺就会毁掉一整行图像。

2.3 灵敏度提升的边界条件与代价

没有任何技术是只有好处没有代价的。TDI的级数增加后，最直接的问题有三个：

第一个是振动敏感。级数越多，电荷在传感器内部“旅行”的时间越长，目标在传感器上的投影哪怕有亚像素级别的抖动，累加出来的信号边缘也会变软。所以TDI相机在安装时对机械结构刚度要求很高，有的高速场景甚至要求用基座减振。

第二个是离焦和光路误差。TDI成像依赖“目标与电荷同步移动”，这个同步在传感器平面内是精确的，但镜头畸变、传感器倾斜、目标表面起伏，都会破坏匹配关系。级数越大，这种破坏越明显。实际调试时经常发现，16级拍得很锐的镜头，切到64级之后反而模糊，多数时候不是相机问题，而是光路已经喂不饱这么大的积分深度。

第三个是数据量。级数多，等效曝光时间变长，很容易出现高光溢出；同时多级累加后的信号动态范围远超8bit，常规输出是10bit、12bit甚至更高。数据位深上去了，传输带宽和ISP处理压力全跟着上来。

选型阶段最重要的平衡，是在最低允许光照、目标速度和系统成本之间找一个中间点。我的经验是，优先满足速度要求的行频，再根据现场最低照度估算需要的级数，最后看ISP吞吐能力能否撑住。

3. 核心细节解析与实操要点：ISP管线里的关键处理模块

3.1 暗场校正与固定模式噪声（FPN）

TDI传感器通电无光时，每一列依然会输出一个偏置电平，这个电平各列并不相同，原因是制造工艺不可能把几百万个像元的暗电流做得完全一致。如果直接把这组数据成像，你会看到整幅图带着明显的一根根竖直条纹，这就是固定模式噪声。

暗场校正的思路非常简单：在完全遮光的情况下采集一帧“偏置图”，求出每个像元/每列的平均偏置值，然后在正式出图时逐列减掉。关键在两点。

第一，采集暗场时传感器温度和实际工作温度必须接近。暗电流是强温度敏感参数，20℃和50℃下偏置值能差好几个DN（数字灰度值）。实操时别省这一步，把相机预热到稳定温度再采暗场，标定文件里记下温度，等温差超过一定阈值就提醒重新标定。

第二，暗场数据要多帧平均。单帧里也有时间噪声，如果拿单帧当偏置底图，等于把随机噪声当成固定分量减掉，反而可能引入新的条纹。我一般采256帧平均，基本能把随机噪声压到接近零。

3.2 坏像元校正（DPC）的1D属性

TDI传感器的坏像元，在图像上的表现比普通面阵严重得多。普通面阵一个坏点扩大影响不到周围；TDI因为多级累加，单个坏像元可能会在行方向上拉成一条有宽度的线，甚至因为响应异常导致整列都受影响。

坏像元校正的流程分三步：检测、标记、替换。检测通常用暗场和不同亮度条件下的多幅图，找出偏离正常响应曲线的像素位置，生成坏点map。替换阶段，ISP拿到坏点坐标，用左右相邻像素做插值，普通线性插值就能应付大多数场景。

但要注意，TDI坏像元有个特殊性质：不同级数下，同一物理坏点造成的图像坏点位置可能不同。因为电荷累加的是目标在不同时刻的投影，坏点在图像上的表现取决于它所在的行位置和积分级数。所以更换级数设置后，坏点map也要跟着变，不能一套map通吃所有模式。我在驱动里会为每个级数模式单独保存一份坏点map，切换级数时自动加载。

3.3 增益、非均匀性校正与动态范围

增益的选择直接决定图像底噪水平。模拟增益（PGA）在ADC量化之前，噪声贡献小，是优先选用的；数字增益在量化之后做乘法，信号和噪声一起放大，底噪会肉眼可见地变粗。这条原则放在TDI上同样适用，只是又多了一个变量：级数。

同一个场景，16级和32级对应的模拟输出幅度完全不同，所以最佳模拟增益很可能不一样。实际调试中，我习惯先固定一个级数，调节光源让图像处于半饱和状态，然后从低到高逐步加模拟增益，观察底噪何时开始明显变粗，把增益卡在“能用但还没恶化”的那一档。

非均匀性校正（PRNU/DSNU）解决的是明场下各列响应不一致的问题。做法是采集均匀照明下的灰度图，逐列计算校正系数，让所有列的响应对齐。均匀照明用积分球最可靠，现场没有就用白色漫反射板加稳定光源顶着用。

动态范围这块，TDI多级累加后高光很容易饱和。如果场景里既有暗部细节又有亮部标记，常规做法是打开HDR功能，对不同级数段设置不同增益，把高中低光的动态范围分别映射回同一幅图像。但HDR会降低一定的信噪比，不是默认开启的功能，得在画质和动态范围之间权衡。

3.4 去噪与锐化的工程平衡

TDI本身已经通过多级累加把随机噪声压了一大截，但环境光频闪、电源纹波、电磁干扰带来的噪声仍然存在。ISP里的去噪必须分清楚对象：随机噪声用空域滤波即可，但空域滤波很容易把细小的边缘纹理一起抹掉。

我在TDI项目里更倾向于用保边去噪，比如双边滤波或者引导滤波。双边滤波在平坦区域平滑效果好，在边缘区域保留度高，配合TDI高信噪比的底子，效果相当理想。

锐化要小心。TDI图像在电荷转移过程中多少会有一些MTF损失，适当的锐化可以恢复视觉清晰度，但锐化力度过大，边缘会出现白边，甚至把噪声重新放大成颗粒。实操思路是先做主去噪，再做轻微锐化，最后看一眼边缘有没有振铃，有就把锐化半径调小。

4. 实操过程与核心环节实现：TDI ISP调试流程实录

4.1 标定流程：三张图走天下

标定是TDI调试里最基础也最容易被敷衍的一步。我自己的习惯是“三张图”流程。

第一张图是暗场图。整个镜头用遮光罩完全盖住，确保一根光线都进不来，预热到工作温度后，采集256帧平均，算出每列的偏置底图。这张图解决FPN和暗电流偏移。

第二张图是明场图。用积分球或者均匀白板，把光强调到信号处于满量程的60%到80%之间，同样采集多帧平均。用这张图算出每列的校正增益系数，目标是让所有列在均匀光下输出完全一致。明场图的灰度不宜过高，过高会接近饱和，校正系数会偏小；不宜过低，过低时噪声占比大，算出来系数乱跳。

第三张图是动态范围曲线。在固定曝光条件下，把光源从暗到亮分成十几个梯度，记录每列的灰度变化，拟合出响应曲线。如果响应曲线不是线性的，需要做分段校正，或者考虑开HDR。

标定完成后，所有数据打包成一份校准map，连同对应的级数、增益、曝光参数、温度信息一起存进设备。换镜头、换光源、换传感器，都必须重新标定，这一点没有商量余地。

4.2 增益与曝光选择的实操顺序

很多新手调试时会先把增益拉满，让图像“看起来亮”。其实正确顺序应该是：行频 → 级数 → 光强 → 增益。

行频由产线速度决定，先确定。级数根据最低允许光照来选，光照够强可以选低级数，光照不足就加级数，但别超过光路和振动的承受能力。光强应尽量利用现有光源，把增益作为最后补偿手段。

举个例子：一条薄膜检测线，产线速度0.5 m/s，像元尺寸5μm，计算行频为100 kHz。单行周期10μs。现场最低照度下，用16级TDI等效曝光约160μs，图像还是偏暗。这时候不要直接加数字增益，而是先确认模拟增益是否到达上限、光源能否增强、级数能否升至32级。如果32级下图像MTF还行，那就升到32级，等效曝光变成320μs，噪声水平好了不止一档。

4.3 级数切换的工程陷阱

TDI支持运行中切级数，听起来很方便，实际用起来有不少坑。

最大的坑是响应跳变。从16级切到32级，等效曝光时间翻倍，图像突然变亮一大截，如果ISP的自动增益/自动曝光没有来得及联动，画面会在切换瞬间“闪”一下。在连续检测产线上，这“闪”一下可能就造成一次误判。

我的处理方案是让级数切换走“软切换”路径：传感器驱动收到切级指令后，先暂停行输出，ISP同步锁定当前增益参数，等新级数下的第一行信号稳定后再解除锁存。这样虽然会损失几十行图像，但不会造成整幅画面的亮度跳变。代价是操作系统层面需要处理这段“空窗期”，好在大部分在线检测流程都能接受微小的行丢失。

另外一个思维陷阱是，很多人以为级数越高越好。实测中我见过一个案例，64级TDI在静止工装上拍出来的分辨率卡清晰锐利，一上产线就开始糊，原因是安装支架的振动幅度虽然只有十几个微米，但在64级积分时间内的位移已经超过了一个像元。后来降回32级，再加上减振垫，图像立刻恢复。

4.4 调试点位与日志规范

调试过程中容易被忽略的是现场记录。TDI参数联动的变量太多：级数、行频、增益、曝光、光源亮度、标定文件版本、环境温度，任何一项变化都会影响最终图像。建议每一次调参都留下日志，文件名用“日期+项目+参数摘要+标定版本”的格式，同时记录现场环境和温度。

我在项目里会写一个简单的参数快照脚本，把当前寄存器值全部dump成文本，和标定文件放一起。这样一旦后续出现“昨天还行今天不行”的情况，可以秒级回溯差异。这套习惯救过我很多次，比如某天图像突然出现竖条纹，翻日志发现是夜班同事重新标定了暗场，但温度比白天低了8℃，列偏置差异导致条纹重新冒头。

5. 常见问题与排查技巧实录

5.1 横条纹，先查行频匹配

现象：扫描画面出现横向的浅色条纹，像是被刀切成一条一条，或者在拍直线边缘时出现波浪状变形。

排查路径：先看外部触发信号稳不稳。用示波器抓编码器输出，如果脉冲间隔抖动超过5%，说明编码器信号有毛刺或者机械传动有问题。再看光源。非恒流驱动的LED光源如果工作在PWM模式，频率落在行频的整数倍附近，会出现明暗交替的横纹。这时要么调高PWM频率到kHz以上，要么换恒流驱动。

再有一个容易被忽略的原因：行频单位换算错误。有人把产线速度除以像元尺寸时忘记统一单位，结果实际行频差了10倍，图像看起来像“斜着爬”的栅栏状。先做一个静止目标慢速扫描测试，看看线条是否平滑，能快速判断是不是同步问题。

5.2 竖条纹，十有八九是列响应不一致

现象：均匀目标下图像带有一根根竖直条纹，明暗交替，跟5.1的横纹方向不一样。

头号嫌疑是暗场校正没生效或者标定数据过期。先把暗场校正关掉看条纹变化，如果条纹变严重，说明之前的暗场校正有问题，重新采集暗场。再看明场校正系数，均匀光下某些列的响应系数算得不准，也会造成残留条纹。

还有一种情况是电源纹波。传感器供电或模拟前端供电如果不干净，每一列ADC转换结果都会叠加上周期性的干扰，图像立刻出现竖条纹。排查方式是看条纹间距是否规律，如果间距对应某个时钟频率，检查LDO输出和去耦电容，必要时加π型滤波。电源问题属于硬件层面，调ISP没法根治。

5.3 画面拖影，速度和积分没对上

现象：画面中的目标边缘出现方向性拖尾，像彗星一样拉出一条尾巴。

排查方向：第一步确认行频和实际速度匹配。产线速度波动大时，固定行频会持续产生错位，需要切换到外部触发模式。第二步检查电荷转移方向和运动方向是否一致。TDI传感器的积分方向如果和物料运动方向反了，图像会明显模糊，这属于装配和配置问题，转个方向或者改寄存器即可。

还有一种容易被忽视的：频繁加减速的产线，用纯编码器触发虽然能跟上速度变化，但编码器分辨率不够时，每行对应的位移会出现量化误差，长时间累加后拖影就出来了。建议编码器分辨率至少做到像元尺寸的1/4到1/5。

5.4 亮暗不均，光路与传感器姿态问题

现象：整幅图左边亮右边暗，或者中间亮两边暗，亮度过度不均匀。

首先看光源本身，线阵相机的照明常常用线光源，线光源的均匀性直接决定图面均匀性，用照度计在运动方向上扫一遍，要求波动在10%以内。再看镜头暗角，任何镜头都有中心和边缘的光强差异，在高精度检测里必须做镜头阴影校正。

最后看传感器是否和目标平面完全平行。传感器倾斜哪怕只有零点几度，在长距离扫描后也会出现明显的亮度梯度。安装时用激光水平仪校准，或者拍摄精密水平尺检查画面边缘是否同时清晰，能发现倾斜问题。

5.5 问题排查速查表

以上这些坑，老实说没有哪个是ISP算法单独能全部摆平的。TDI系统是一个传感器、机械、光源、驱动、ISP紧密咬合的链条，任何一环掉链子，最后都在图像上暴雷。排查问题的时候，最忌讳只盯着一环调参调到头，先做硬件与同步层面的旁路判断，再回过来动ISP参数，效率会高很多。

最后再分享一个小技巧：不要把TDI的“级数”当成一个固定的出厂参数，它其实是你手里最有力的现场调节资源。很多中高端线阵TDI相机都支持在线切级，如果能把行频、光源、增益放在同一个联动控制表里，让切级动作自动触发对应的ISP参数切换，现场调试能省掉大量重复劳动。我个人的体会是，TDI项目真正耗时间的从来不是算法本身，而是把传感器驱动、行频触发、ISP参数、光源频闪这几件事拧成一股绳的过程。希望这篇东西能帮你少走几段弯路。