基于多DSP和FPGA的实时双模视频跟踪装置设计

1、引言

　　随着现代高速处理器的迅猛发展，图像处理技术也日益成熟。其中，移动目标的视频检测与跟踪是图像处理、分析应用的一个重要领域，是当前相关领域的研究前沿。移动目标视频检测与跟踪技术，在机器人视觉、交通监测、可视预警、机器导航等民用领域有着广泛的应用，同时在火力拦截、导弹电视和红外视频制导等军用方面也发挥着重要作用。基于二维转台以DSP和FPGA为核心器件构成的视频识别和跟踪装置，可工作于电视图像或红外两个波段，实现图像跟踪各项功能。本文提出的跟踪算法与设计的跟踪装置可在一定程度上解决视频跟踪精度低、处理速度慢的问题，同时本视频跟踪装置也可作为进一步研究图像处理与跟踪控制的平台。

　　2、视频跟踪装置的硬件设计

　　图像处理最主要的是实时性、可靠性和精确度。针对图像处理速度慢的问题，考虑从硬件和和软件两方面解决：一是选择高速的DSP和FPGA为核心器件；二是从平衡图像处理的实时性和效果中选择最优的图像处理算法。针对图像跟踪可靠性问题，采用双模式复合制导，由处理器根据信号的置信度来选择跟踪模式。针对图像形心跟踪算法的精度问题，采取基于去图像阴影的图像跟踪算法。

　　2.1 视频跟踪装置的图像信号处理模块硬件组成

　　为达到实时处理图像信号信息，我们选择3片高速DSP作为核心处理器。其中用作信息融合的是TMS320C6416，在跟踪模块中，使用了两片相对价格低廉一些的TMS320C6201实现并行图像跟踪算法。配合DSP工作的外围逻辑电路，我们采用xlinix公司的XCV400E型FPGA，同时实现部分的图像预处理功能。

　　本视频跟踪装置的图像信号处理模块主要硬件构成如图1所示：以电视图像波段为例，图像采集模块的传感器是面阵CCD摄像机，用来采集视频图像信息。A/D转换将拍摄到的模拟图像信号转为8位数字信号送FPGA处理，同步信号接受摄像机的行同步和场同步信号也送入FPGA。一部分处理的结果直接经D/A转换器送监视器显示。SDRAM数据存储区存储背景图像数据。一路在FPGA进行背景差分、4×4滑动平均、去阴影后形成的移动目标信号滤波后送到其中一块TMS320C6201执行基于分割的改进型形心跟踪算法，另一路则经过滤波后送入另一片TMS320C6201执行相关跟踪算法，然后由决策融合模块的TMS320C6416根据两路信号的置信度来选择跟踪模式，达到并行双模式图像复合跟踪。最后将目标位置信号进行转化后输送到运动控制器控制二维转台对移动目标进行实时跟踪。