水下3D三维可视化检测

最近几年，HD高清摄像头被广泛的布置在水下进行高质量的海洋环境观察，以及水下资产管理，如石油和天然气资产。由于高分辨率传感器（1080P和4K）、过滤器和其他进行视频处理的软件的进步，图像的质量显著提高。直观的可视化会提供物体的颜色和纹理以及整体形状，但这些信息不能用于异常判断。因此，图像解释会受到诸多因素的影响，比如视角、光亮和缺乏尺度。

* i, C, P+ z" ~' a) @( A

这就促使维眼公司开发了一套视频激光扫描系统（VLS）.使用现有的水下高清摄像头和激光线发射器，它将提供更多的附加信息用于可视化检测但并不需要额外增加数据采集的成本。

最近几年，HD高清摄像头被广泛的布置在水下进行高质量的海洋环境观察，以及水下资产管理，如石油和天然气资产。由于高分辨率传感器（1080P和4K）、过滤器和其他进行视频处理的软件的进步，图像的质量显著提高。直观的可视化会提供物体的颜色和纹理以及整体形状，但这些信息不能用于异常判断。因此，图像解释会受到诸多因素的影响，比如视角、光亮和缺乏尺度。

/ C% l1 Y; G0 j7 X

这就促使维眼公司开发了一套视频激光扫描系统（VLS）.使用现有的水下高清摄像头和激光线发射器，它将提供更多的附加信息用于可视化检测但并不需要额外增加数据采集的成本。

z7 |5 W( m- S; l

黑色的均匀表面在没有和有激光的情况下，右侧图片显示激光被折断了

2 `$ q& m+ B" j

数据处理包括三个步骤：

* A, I7 A2 b+ g. A) A F$ z( W! h

第一步是高清视频可以实时查看，高分辨率图片可以稍后从视频中提取，如果需要。最近图像质量在显著提高，这个趋势还在延续。不仅传感器的分辨率从标清SD提高到高清HD，而且现在一些摄像头可以在低照度下获取图像，新的过滤器和软件允许在低能见度下锐化图像。图像无论如何只能从一定视角得到直接的可视化信息，会受它所在位置的外部环境的影响（障碍物，低能见度，水中的微粒和鱼）。

第二步是增加一个激光平面发射器去制造一个贯穿物体表面的线。这样的一个激光面或者激光线在水下行业被广泛应用，可以很好的集成到所有标准的ROV附件上。不可否认的是通过投射一条“沿着”或者“扫描”物体并表面的线，可以提供对场景的额外理解，从而给出形状的相关可视化信息。增加激光线可以显示图像在没有激光线情况下不可能探测或者理解（至少可以证明或者量化）的突变。这里也有很多局限性，比如当激光垂直的打在表面时会显示几乎没有偏差，尽管表面看起来成脊状的。

2 N4 o- L/ d' F! \ S7 ?4 L

激光垂直的打在表面 & T2 w6 `$ i, f, y

这种检测的关键是能确定多年来的趋势并预测未来，以便对可能的维修或更换做出相关决定。很可惜，如果没有三维、没有稳定的参考，只能是猜测。这个三维分析的需求开启了视频激光扫描技术的研发，根据结合摄影测量和激光三角测量技术，和两个额外的要求：

1 I2 L7 s# S7 | F' l+ I# J' ^: Y" Q

在自由飞行模式下工作

使用现有的水下摄像头和激光

! X3 _6 _% A% ]% a

整个处理过程的详细内容如下：

C1 L% M/ P( e! w: P: Z4 R

首先把一个高清摄像头和一个激光线发射器牢牢的固定在架子上，他们的相对位置和方向通过水下校准得到。一旦VLS传感器被校准，测量视频被采集，摄影测量三维最小二乘方计算（也被称为光束自由网平差）将提供重新标记的点云的三维坐标和几何特征，摄像头所在位置的方向和三维坐标。最后每一个图像上，得益于校准，点云可以在激光线上三角化。

将VLS固定在水下机器人关节杆上（左侧）-校准工具（中间）-水下校准处理（右侧）

. x+ I& l# i+ r' o! V

第三步也是最后一步三维模型的建立和生成横截面。高清视频的每幅图像包括一个激光线，可以用来三角化已选密度的点云，因为每秒可以最小获取30帧（最高60），和摄像头缓慢的移动，激光线的密度可以非常的高，高达每0.3毫米@2sigma有一根线(大约是水下测量精度的限值)。在激光线之间每0.3毫米有一个点，可以得到整体0.3毫米的分辨率。注意如果需要，这个点云可以送去进行有限元分析（FEA）。基于这些点云，可以生成三维网格和在任何位置生成横截面，横截面将提供整体形状，尺寸，和形状的异常以及多年的变化。

S/ ]3 Z: Q) |) y" b

当图像显示不同柔性连接的三维检测时，同样的技术和同样的算法可以应用到其他组件上，包括锚链，牺牲阳极和焊接处。

% \% s0 V1 C1 F: P7 D

# E( R5 ~# d; Z1 f1 C0 B

在叠加了纹理的三维模型上的横截面（左侧）在0.5英寸方格上的横截面（右侧）

多年数据的比较显示相应测量的演变

G) A c; c. U/ _: H% l; g

除了这项技术使用现有的水下硬件（摄像头、灯光和激光）和即插即用外，它的非常成功之处在于任何一款机器人都可以支持该VLS系统，比如工作级ROV、观察级、微型ROV、无人机、爬行器，当然包括潜水员。

黑色的均匀表面在没有和有激光的情况下，右侧图片显示激光被折断了

数据处理包括三个步骤：

第一步是高清视频可以实时查看，高分辨率图片可以稍后从视频中提取，如果需要。最近图像质量在显著提高，这个趋势还在延续。不仅传感器的分辨率从标清SD提高到高清HD，而且现在一些摄像头可以在低照度下获取图像，新的过滤器和软件允许在低能见度下锐化图像。图像无论如何只能从一定视角得到直接的可视化信息，会受它所在位置的外部环境的影响（障碍物，低能见度，水中的微粒和鱼）。

第二步是增加一个激光平面发射器去制造一个贯穿物体表面的线。这样的一个激光面或者激光线在水下行业被广泛应用，可以很好的集成到所有标准的ROV附件上。不可否认的是通过投射一条“沿着”或者“扫描”物体并表面的线，可以提供对场景的额外理解，从而给出形状的相关可视化信息。增加激光线可以显示图像在没有激光线情况下不可能探测或者理解（至少可以证明或者量化）的突变。这里也有很多局限性，比如当激光垂直的打在表面时会显示几乎没有偏差，尽管表面看起来成脊状的。

& ~' d# v4 P0 u; O, {; v

激光垂直的打在表面

这种检测的关键是能确定多年来的趋势并预测未来，以便对可能的维修或更换做出相关决定。很可惜，如果没有三维、没有稳定的参考，只能是猜测。这个三维分析的需求开启了视频激光扫描技术的研发，根据结合摄影测量和激光三角测量技术，和两个额外的要求：

在自由飞行模式下工作

9 O# E. Y5 { B4 K% v# P P7 O, }

使用现有的水下摄像头和激光

, j ]5 C5 A: _2 k' v9 I- N* i& L

整个处理过程的详细内容如下：

1 ]. s) T7 n7 D

首先把一个高清摄像头和一个激光线发射器牢牢的固定在架子上，他们的相对位置和方向通过水下校准得到。一旦VLS传感器被校准，测量视频被采集，摄影测量三维最小二乘方计算（也被称为光束自由网平差）将提供重新标记的点云的三维坐标和几何特征，摄像头所在位置的方向和三维坐标。最后每一个图像上，得益于校准，点云可以在激光线上三角化。

8 D# d+ U& j& I' {! _7 I& T

将VLS固定在水下机器人关节杆上（左侧）-校准工具（中间）-水下校准处理（右侧）

, f, v. t5 W, O( m! \' O

第三步也是最后一步三维模型的建立和生成横截面。高清视频的每幅图像包括一个激光线，可以用来三角化已选密度的点云，因为每秒可以最小获取30帧（最高60），和摄像头缓慢的移动，激光线的密度可以非常的高，高达每0.3毫米@2sigma有一根线(大约是水下测量精度的限值)。在激光线之间每0.3毫米有一个点，可以得到整体0.3毫米的分辨率。注意如果需要，这个点云可以送去进行有限元分析（FEA）。基于这些点云，可以生成三维网格和在任何位置生成横截面，横截面将提供整体形状，尺寸，和形状的异常以及多年的变化。

" n W, w: v: Y$ w4 V

当图像显示不同柔性连接的三维检测时，同样的技术和同样的算法可以应用到其他组件上，包括锚链，牺牲阳极和焊接处。

# [4 B3 u2 c+ C) ~% j$ Y

3 H9 Z4 V7 H0 V; p6 p

在叠加了纹理的三维模型上的横截面（左侧）在0.5英寸方格上的横截面（右侧）

, x3 o9 K- X6 f

多年数据的比较显示相应测量的演变

3 n- y x4 ~: d: t0 p

除了这项技术使用现有的水下硬件（摄像头、灯光和激光）和即插即用外，它的非常成功之处在于任何一款机器人都可以支持该VLS系统，比如工作级ROV、观察级、微型ROV、无人机、爬行器，当然包括潜水员。

' V) j+ x7 x# A5 Z; O2 S( f ' a/ l @, a3 |: q" ]" |! n M" E) j0 B( w$ S. D- W C