基于视觉信息融合技术的水面船只检测技术开发

包 琳

(大连海洋大学，辽宁 大连 116023)

0 引言

无人船借助远程遥控和自主控制器实现水面的无人作业，由于其显著的成本优势和灵活特性，在军事、商业领域获得了广泛的重视，尤其以水面船只等目标探测的无人船，已经成为一个重要研究方向。本文针对无人船的目标探测技术，主要做以下工作：

1）解析水面无人船的激光雷达目标探测技术，介绍激光雷达系统的基本原理，对激光雷达的信号进行数学建模；

2）研究水面无人船基于计算机视觉技术的目标探测技术，对计算机视觉的图像分割、图像滤波[1]、特征提取等内容重点进行介绍；

3）提出一种基于视觉信息融合技术的水面船只目标检测技术，重点介绍激光雷达探测信号和计算机视觉信号的融合方法，从时间序列和空间配准等方面进行详细研究。

1 无人船的激光雷达目标检测技术

在水面无人船中装载量最大的目标探测设备为超声波雷达、毫米波雷达和激光雷达传感器等，其中，毫米波雷达传感器的传输介质为24 GHz 频率的毫米波，能够实现微波制导，具有体积小、空间分辨率高等优点。激光雷达传感器的信息传输介质为激光，其工作原理是向目标发射激光束，然后解析目标的激光回波信号，经过数字信号处理后就可以获得目标的距离、方位、高度、速度等参数[2]。

由于毫米波雷达传感器的穿透能力和抗干扰能力强，因此，本文在设计基于视觉信息融合技术的目标检测技术时，采用的研究对象为毫米波雷达。

图1 为毫米波雷达传感器的工作原理图。

图1 毫米波雷达传感器的工作原理图Fig.1 Working principle diagram of millimeter wave radar sensor

如图，毫米波雷达传感器系统主要包括雷达收发前端、接收天线、发射天线、控制电路、数字信号处理器、雷达信号发生器等。

控制电路产生的线性调频信号模型可表示为：

毫米波雷达系统的目标探测区域坐标表示为：

其中：R0为毫米波雷达与目标的距离；θα为雷达信号的发射方位角，θr为雷达的接收方位角。

毫米波雷达的信号模型如下：

其中：a(t)为毫米波幅值函数；f0为毫米波信号的初始频率；φ(t)为毫米波的相位函数；T为毫米波雷达信号的周期。

2 无人船的计算机视觉目标探测技术

基于计算机视觉的目标探测技术是近年来的一种新兴技术，而高性能计算机和图像学理论的发展为这一技术提供了保障。

无人船利用摄像头等图像采集设备获取海上目标的视频和图像，然后通过图像的分析和处理进行目标的定位与提取。基于计算机视觉的目标探测对硬件设备的要求较高，但目标探测的精度也相对于毫米波雷达更高。

无人船的计算机视觉目标探测流程如图2 所示。

1）目标视频和图像获取

包含目标的视频图像获取，是进行目标探测的第一步，视频和图像的分辨率直接决定了目标探测的精度。因此，本文无人船采用50 倍可变焦镜头，分辨率可达到1 080 P。

2）图像的预处理

目标视频图像识别的重要因素是图像的色度信号和亮度信号，首先，进行图像的颜色空间分解。使用YUV（颜色、亮度、灰度）颜色空间进行无人船探测目标图像的分解，空间转换公式如下：

基于计算机视觉技术的目标探测易受到噪声信号的干扰，比如海上的雾气、太阳光反射等，因此，在目标识别前需要对图像进行噪声处理。使用高斯线性滤波算法进行图像的降噪，高斯滤波函数模型如下：

式中：σ为滤波标准差，σ越大，则滤波的带宽越宽，可过滤。

3）图像背景滤波

背景滤波是将视频图像中前后两帧中相同的背景像素进行过滤和消减，主要采用差分算法，判断前后两帧差值与设定的阈值关系，当低于阈值时，可将图像背景消减，得到二值化图像。

视频图像的差分算法如下：

式中：fe(x,y,t)为含有目标信息的当前帧图像；fr(x,y,t)为含有目标的背景图像；T为设定的阈值。图像背景滤波算法的原理如图3 所示。

图3 图像背景滤波算法的原理Fig.3 Principle of image background filtering algorithm

4）图像分割和目标识别

对前文处理的目标图像进行边缘图像分割和特征提取，可以获得被测目标的完整信息。

3 基于视觉信息融合技术的无人船水面船只检测技术

3.1 雷达与计算机视觉探测技术的信息融合算法

基于计算机视觉技术的目标探测技术精度更高，但易受海上气象噪声的干扰；基于毫米波雷达的目标探测精度略低，但信号穿透能力强，能够实现全天候的目标探测。因此，文中重点研究将雷达与计算机视觉探测技术的信息融合算法，既能提升目标探测的精度，又能降低探测过程的噪声。

输入到统计决策模型或非线性滤波器(贝叶斯决策规则，扩展卡尔曼滤波器EKF，无损卡尔曼滤波器UKF)中，以获得融合结果。

信息融合是在特征的层级上进行融合，将雷达和视觉探测提取的目标特征进行运算，在时间序列和空间配准等维度实现融合，如图4 所示。

图4 雷达与计算机视觉探测的信息融合算法Fig.4 Information fusion algorithm of radar and computer vision detection

雷达和视觉传感器信息融合过程采用LEE 滤波算法提高信号精度，滤波器的模型如下式：

其中：W(t)为权重函数；σ0为雷达噪声均值；σi为图像噪声方差；I(t)为目标图像的像素。

模型噪声方差满足：

LEE 滤波器的小波变换能够提高噪声滤波的带宽，如下式：

式中：s，t为小波变换因子。

3.2 无人船水面船只目标检测的时空对准

毫米波雷达与视觉探测器的融合可分为时间配准和空间配准，分别如下：

1）时间配准

无人船毫米波雷达采样周期为8 ms，视觉传感器的采样频率为2 ms，在信息融合过程中需要保证2 种传感器在时间上的同步，水面船只探测的时间配准示意图如图5 所示。

2）空间配准

毫米波雷达与视觉传感器的目标探测空间参考不同，因此需要进行空间配准，建立空间配准坐标系如图6 所示。

图6 空间配准坐标系Fig.6 Spatial registration coordinate system

毫米波雷达空间的点p 坐标(Xw,Yw,Zw)，视觉传感器中对应坐标(u,v,l)，可得转换关系为：

式中：m为 映射长度；α为坐标系相对倾角；R目标距离。

4 结语

本文提出一种将毫米波雷达与视觉传感器相结合的水面船只目标探测算法，能够提高无人船的目标探测性能。