基于传像束的小视场双目结构光三维形貌恢复

袁卓凡，刘元坤，赖姗姗，李 剑，王 旭

（1.四川大学 电子信息学院，四川 成都 610065；2.中国工程物理研究院 流体物理研究所，四川 绵阳 621999）

引言

数字条纹技术和相移法[1]因为其速度快、精度高、易获得亚像素的精度等优点而被广泛应用于三维测量中。近年来针对小尺寸物体的小视场三维形貌测量由于可实现高精度而备受关注。艾佳[2]等提出一种基于三频外差四步相移的小视场单目立体测量方法，结合相位高度映射，测量空间物体的三维坐标。任晨丽[3]等人提出了一种基于三坐标测量机的小视场多目立体方法，采用4个呈矩形交向摆放相机，同时对一个物体进行拍摄，在进行坐标系统一之后，便计算出各组像对中的同名点的空间三维坐标。QUAN[4]等人提出一套小视场测量系统，采用显微镜和相机共同拍摄受相位调制的物体图像，在获得截断相位后采用空间相位展开方法恢复物体三维形貌。刘笑[5]等人提出利用双目立体测量的线性细分查找表获得微小物体的三维数据。

在一些实际应用中，如密闭、高低温、高湿以及危险环境，若采用传统三维面形测量系统[6]，则需要在测量设备和待测物体之间增加防护装置（如保护玻璃等），而且由于直接成像，测量设备放置的空间将严重受限，此外由防护装置引起的测量误差也需要校正。

传像束[7]是由若干光纤构成的一种柔性的无源图像传输器件，可以将图像高保真地从一个端面传至另一端面，特别适用于密闭、高低温、高湿以及危险环境，因此在国防、科研等领域有广泛应用。本文提出了一种基于传像束的小视场双目结构光三维测量系统，将条纹图像直接投影到待测物体上，采用三频时间相位算法获取待测相位，再进行基于相位的双目匹配，实现待测物体面形测量，系统结构简单，克服场地和环境的限制，能应用于爆破、医学检测、工业监测等[8]实际工程项目中。

1 测量原理

1.1 双目立体视觉

双目立体视觉是基于视差原理[9]，一般由2个摄像机分别从不同角度同时拍摄物体，2个摄像机的图像平面和被测物体之间构成一个三角形，通过匹配算法得到视差后再基于三角法原理得到物体的三维坐标。

图1所示为简单的平视双目成像原理图[10-11]。该测量系统由2个摄像机和被测物体构成，这2个摄像机投影中心连线的距离就是基线距B。

图1 双目视觉三维测量示意图Fig.1 Schematic diagram of binocular vision 3D measurement

两摄像机在同一时刻观察被测物体的同一特征点P，成像在图像左右两边的坐标分别为Pleft=（X，Y）和Pright=（Xright，Yright）。假定2个摄像机的图像已经极线矫正，则特征点P左右图像的像素坐标Y值相同，也就是Y=Yright。

由透视关系可以得到：

视差为：Disparity=X−Xright，可得到物体特征点在摄像机坐标系下的三维坐标为

左摄像机像面上的一点能够在右摄像机像面上找到对应的匹配点（两点是被测物体同一特征点在左右摄像机像面上的像素点），通过（2）式就可以确定该点的三维坐标。遍历左摄像机像面上的所有点，从而得到被测物体的三维坐标。但双目立体视觉测量依赖环境中的自然光线采集图像，对环境光照敏感且受噪声影响大，双目立体视觉测量系统也不适用于单调缺乏纹理的物体。根据参考文献[8]和[11]，可知双目系统测量的误差可表示为∆=4z2δ/Bf，其中δ是像素匹配精度。因此若将数字条纹[12]和双目立体视觉结合，以相位作为中介既可以增加左右相机图像特征信息，克服双目立体视觉的固有限制，又能提高匹配精度进而提高系统的测量精度。

1.2 三频相位展开

本文采用三频四步满周期相移算法[13-15]获取相位，摄像机所拍摄的其中一种频率的条纹图光强可以表示为

式中：a是背景光强；b是条纹调制度；n的取值为1～4。根据满周期相移公式可得：

由于相位值φ(x,y)为截断相位，其取值在(−π,π]范围内，为此需要相位展开。本文采用三频相位展开算法，即通过投射条纹频率t分别取1、的3种条纹图到物体表面，获取3幅截断相位图，然后沿时间轴对每个像素点进行展开，即可得到连续相位。

频率为1的截断相位可以作为连续相位处理，将条纹频率为1的相位分布 φw(1)作为基础，则后2 幅截断相分布的展开相位为

U定义为为取整运算。

从而得到条纹频率为s的绝对相位。基于相位的双目匹配是以左相机像素点的相位为准，在右相机中寻找等相位点，但是由于采样的原因，第一步只能找到最近似（即相位差最小）的匹配点，还需要进行双线性插值等方法获取高精度的匹配点，从而得到高精度的立体视差[16]，进而得到物体的三维信息。

2 测量系统基本结构

测量系统结构示意图如图2所示。条纹图像由数字投影仪（digital light processing，DLP）直接投影到待测物体表面，单个相机的成像过程为：前端镜头将待测物体成像到传像束前端面，经由传像束传输到传像束后端面，再由后端成像镜头将像最终传递到电荷耦合元件（charge coupled device，CCD）像面，并由计算机完成记录。

图2 测量系统结构示意图Fig.2 Structure diagram of measuring system

3 实验结果及分析

实际测量系统如图3所示。传像束为多组分玻璃传像束，每根传像束大约有20万根光纤，透过率为30%～40%，传像束端面为8.7 mm×7.8 mm、长度为3 m，像元大小为17 µm × 17 µm。传像束的传输距离越远，传输损耗越大，并且其透过率较低，一般在30%～40%不等。在双目视觉中，影响系统测量精度的因素不但有左右图像的匹配精度，也包括成像系统的像素大小。在借助传像束后，由于后端记录的CCD 分辨率高于传像束分辨率，实际上是对前端图像进行重采样，因此若传像束分辨率过低，势必影响测量精度。本实验所用传像束分辨率约为512 pixels×460 pixels，像元大小约为相机像元3倍，能满足本实验测量要求。

图3 测量系统装置图Fig.3 Schematic diagram of measuring system device

测量时，由成像透镜A 将物体成像到传像束前端面，所成的像经传像束传至传像束后端面后，再由成像透镜B 成像到CCD 靶面。其中成像透镜A的焦距为75 mm，成像透镜B的焦距为25 mm，相机为IDS的UI1240，分辨率为1280 pixels×1024 pixels，像元大小为5.3 μm×5.3 μm。采取DLP 数字投影仪，分辨率为1280 pixels×900 pixels，双目视场大小约为20 mm×20 mm。

所用标定靶标如图4（a）所示，其规格为20 mm×15 mm，大圆直径为0.8 mm，小圆直径为0.4 mm，圆间距为1.3 mm，共13×9个特征点。系统标定结果如图4（b）所示，系统标定参数如表1所示。

图4 系统标定Fig.4 System calibration

表1 系统标定参数Table1 System calibration parameters

分别对硬币背面和正面进行了测量，所测实物如图5所示。

图5 待测硬币Fig.5 Coin to be tested

实验中，所用三频的条纹频率分别为1、6、36。图6分别对应左右相机拍摄的每种频率中的一帧条纹图，其三维测量结果如图7所示。

图6 相机拍摄的图像Fig.6 Captured fringe images

图7 硬币三维面形分布Fig.7 3D surface shape distribution of tested coin

图8（a）分别展示了图7（a）中“0”字样的局部细节图以及第570行剖面图，图8（b）包括了图7（b）中最大五角星的局部细节图和第348行剖面图。可以看出，待测硬币细节清晰可见。

图8 硬币细节三维面形Fig.8 3D surface shape of coin details

4 结论

本文设计了一种适用于爆轰、冲击等环境下的小视场物体三维面形测量系统。以双目结构光为基础，结合传像束实现了局部场景内物体的三维测量。系统中将传像束作为传像器件，将前端镜头成像到后端摄像机镜头，摄像机拍摄的数字图像是携带经过结构光调制的物体，再根据双目立体视觉视差原理恢复物体的三维信息。理论上，传像束系统的测量精度不但与系统结构参数和相位获取精度有关，传像束的像元大小也对测量精度有影响。由于相机是对传像束像面进行重采样，因此本文的相机标定重投影误差为0.2 pixels，略大于常规无传像束系统的标定精度。根据误差计算公式，结合系统结构参数可知，当像素匹配精度为0.1 pixels，即0.5 μm时，可得测量系统误差为7 μm。因此，若采用分辨率更高的传像束，其测量精度还可进一步提高。

目前的实验中并未通过传像束将图像投影到待测物体上，但由于双目结构光系统中无须标定投影仪，因此若采用传像束完成图像投影，也不会影响后端的双目匹配精度。此外，由于成像系统没有经过严格光学设计，即光学系统存在缺陷，比如实验中标定参数中的左相机远离了图像中心，原因可能是传像束前后端面和各自的镜头端面都存在倾斜角度。但测量结果表明，此类系统缺陷均可以通过标定补偿得到高精度的测量数据。由于传像束是柔性传输介质，可以弯曲，具备环境抗干扰能力，因此本文方法在工业检测、科研试验、医疗等行业中有很广阔的应用前景。初步试验验证了本方法的可行性。