3D mapping of submarine topography by laser line scanning based on pose correction by triangular displacement method

Chengcheng FAN; Xiaowei DE; Jinjia GUO; Youwen CAO; Zeyu LU; Linna SONG; Xilin ZHANG

doi:10.37188/OPE.20223010.1170

您当前的位置：

首页 >

文章列表页 >

3D mapping of submarine topography by laser line scanning based on pose correction by triangular displacement method

Modern Applied Optics | 更新时间：2022-06-21

- 3D mapping of submarine topography by laser line scanning based on pose correction by triangular displacement method
- Optics and Precision Engineering Vol. 30, Issue 10, Pages: 1170-1180(2022)
- 作者机构：
  
  1.中国海洋大学信息科学与工程学部，山东青岛 266100
  2.青岛海洋科学与技术试点国家实验室，山东青岛 266237
  3.中国地质调查局青岛海洋地质研究所，山东青岛 266237
- 作者简介：
- 基金信息：
- DOI：10.37188/OPE.20223010.1170
  CLC： TN247;TP391
- Received：25 October 2021，
  
  Revised：18 December 2021，
  
  Published：25 May 2022
- 稿件说明：
移动端阅览
范承成,德晓薇,郭金家等.基于三角位移法姿态矫正的激光线扫描海底地形三维测绘[J].光学精密工程,2022,30(10):1170-1180.

FAN Chengcheng,DE Xiaowei,GUO Jinjia,et al.3D mapping of submarine topography by laser line scanning based on pose correction by triangular displacement method[J].Optics and Precision Engineering,2022,30(10):1170-1180.
范承成,德晓薇,郭金家等.基于三角位移法姿态矫正的激光线扫描海底地形三维测绘[J].光学精密工程,2022,30(10):1170-1180. DOI： 10.37188/OPE.20223010.1170.

FAN Chengcheng,DE Xiaowei,GUO Jinjia,et al.3D mapping of submarine topography by laser line scanning based on pose correction by triangular displacement method[J].Optics and Precision Engineering,2022,30(10):1170-1180. DOI： 10.37188/OPE.20223010.1170.

摘要

作为一种三维成像技术，激光线扫描技术在海底目标探测和地形地貌测绘中获得了广泛应用。本文搭建了一套水下激光线扫描实验装置，对经过标定的激光线扫描装置获得的图像进行激光光条提取、特征提取匹配等图像处理后进行三维重建。在光条提取算法方面，针对水下散射粒子等干扰，结合单通道阈值法和灰度重心法提高了光条提取的精度，较其他光条中心提取算法有更强的鲁棒性；在特征提取匹配方面，提出了一种基于图像的三角位移估计法用于系统定位和位姿矫正，该方法利用线结构光三角测量原理估计场景深度，结合特征点匹配计算系统位移，然后融合点云数据完成姿态矫正。利用自研的线扫描系统在实验室进行了标准球精度测试，在800 mm~2 500 mm的工作距离内误差可以控制在1 mm以下。2019年和2020年该设备搭载遥控无人潜水器进行了深海海底地形三维成像试验，在海底沙坡区域对本文提出的三角位移法姿态校正方法成功进行了验证，并进一步对不同条件的海底地形进行测试，结果表明校正后的激光线扫描成像装置能够快速准确地成像，具有较高的形貌还原度。

Abstract

As a three-dimensional （3D） imaging technology， laser line scanning has been widely used in underwater target detection and topographic mapping. In this study， a set of underwater laser line scanning experimental equipment is constructed， and images obtained using a calibrated laser line scanning device are processed via laser strip extraction， feature extraction， and matching； subsequently， 3D reconstruction is performed. To mitigate the interference of underwater scattering particles， the light strip extraction algorithm is used， where the single channel threshold and gray center methods are combined to improve the accuracy of light strip extraction. Consequently， a higher robustness is achieved compared with that afforded by other light strip center extraction algorithms. In terms of feature extraction and matching， an image-based triangular displacement estimation method for system positioning and pose correction is proposed herein. This method applies the principle of line-structured light triangulation to estimate the scene depth， matches feature points to estimate system displacement， and fuses point cloud data to complete pose correction. We performed a standard ball accuracy test in a laboratory using a self-developed line scanning system， and the error can be controlled below 1 mm within a distance of 800–2500 mm. In 2019 and 2020， we performed 3D imaging tests of deep-sea seabed terrains with an ROV using the abovementioned system. The tests successfully validated the pose correction method of the proposed triangular displacement method in a sloped seabed sand area， and further tests were performed on the seabed terrain under different conditions. The results demonstrate that the corrected laser line scanning imaging device can perform imaging rapidly and accurately with a high degree of morphology reduction.

关键词

Keywords

references

FLORINSKY I V ， FILIPPOV S V . Three-dimensional geomorphometric modeling of the Arctic Ocean submarine topography： a low-resolution desktop application ［J］. IEEE Journal of Oceanic Engineering ， 2021 ， 46 （ 1 ）： 88 - 101 . doi: 10.1109/joe.2020.2969283 http://dx.doi.org/10.1109/joe.2020.2969283

唐远河，王浩轩，刘青松，等 . 主动遥感探测海底可燃冰的正演研究［J］. 光学精密工程， 2018 ， 26 （ 12 ）： 2909 - 2916 . doi: 10.3788/OPE.20182612.2909 http://dx.doi.org/10.3788/OPE.20182612.2909

TANG Y H ， WANG H X ， LIU Q S ， et al . Forward measurement of submarine gas hydrates by active remote sensing technology ［J］. Opt. Precision Eng. ， 2018 ， 26 （ 12 ）： 2909 - 2916 . （in Chinese） . doi: 10.3788/OPE.20182612.2909 http://dx.doi.org/10.3788/OPE.20182612.2909

JOHNSON-ROBERSON M ， BRYSON M ， FRIEDMAN A ， et al . High-resolution underwater robotic vision-based mapping and three-dimensional reconstruction for archaeology ［J］. Journal of Field Robotics ， 2017 ， 34 （ 4 ）： 625 - 643 . doi: 10.1002/rob.21658 http://dx.doi.org/10.1002/rob.21658

PICARDI G ， CHELLAPURATH M ， IACOPONI S ， et al . Bioinspired underwater legged robot for seabed exploration with low environmental disturbance ［J］. Science Robotics ， 2020 ， 5 （ 42 ）： eaaz1012 . doi: 10.1126/scirobotics.aaz1012 http://dx.doi.org/10.1126/scirobotics.aaz1012

舒岳阶，吴俊，周远航，等 . 水工物理模型水下高精度超声水位测量［J］. 光学精密工程， 2020 ， 28 （ 9 ）： 2027 - 2034 . doi: 10.37188/OPE.20202809.2027 http://dx.doi.org/10.37188/OPE.20202809.2027

SHU Y J ， WU J ， ZHOU Y H ， et al . Underwater high-precision ultrasonic water level measurement method for hydraulic physical model ［J］. Opt. Precision Eng. ， 2020 ， 28 （ 9 ）： 2027 - 2034 . （in Chinese） . doi: 10.37188/OPE.20202809.2027 http://dx.doi.org/10.37188/OPE.20202809.2027

BRUNO F ， BIANCO G ， MUZZUPAPPA M ， et al . Experimentation of structured light and stereo vision for underwater 3D reconstruction ［J］. ISPRS Journal of Photogrammetry and Remote Sensing ， 2011 ， 66 （ 4 ）： 508 - 518 . doi: 10.1016/j.isprsjprs.2011.02.009 http://dx.doi.org/10.1016/j.isprsjprs.2011.02.009

RISHOLM P ， KIRKHUS T ， THIELEMANN J T ， et al . Adaptive structured light with scatter correction for high-precision underwater 3D measurements ［J］. Sensors ， 2019 ， 19 （ 5 ）： 1043 . doi: 10.3390/s19051043 http://dx.doi.org/10.3390/s19051043

金鼎坚，吴芳，于坤，等 . 机载激光雷达测深系统大规模应用测试与评估：以中国海岸带为例［J］. 红外与激光工程， 2020 ， 49 （ S2 ）： 9 - 23 . doi: 10.3788/IRLA20200317 http://dx.doi.org/10.3788/IRLA20200317

JIN D J ， WU F ， YU K ， et al . Large-scale application test and evaluation of an airborne lidar bathymetry system—A case study in China's coastal zone ［J］. Infrared and Laser Engineering ， 2020 ， 49 （ S2 ）： 9 - 23 . （in Chinese） . doi: 10.3788/IRLA20200317 http://dx.doi.org/10.3788/IRLA20200317

徐梦溪，陆云扬，谈晓珊，等 . 固态激光雷达传感器技术及无人机载测深应用［J］. 电子测量技术， 2021 ， 44 （ 15 ）： 89 - 96 .

XU M X ， LU Y Y ， TAN X S ， et al . Solid-state LiDAR sensor technology and bathymetry application of UAV ［J］. Electronic Measurement Technology ， 2021 ， 44 （ 15 ）： 89 - 96 . （in Chinese）

谢亮亮，屠大维，张旭，等 . 深海原位激光扫描双目立体视觉成像系统［J］. 仪器仪表学报， 2020 ， 41 （ 6 ）： 106 - 114 . doi: 10.19650/j.cnki.cjsi.J2006335 http://dx.doi.org/10.19650/j.cnki.cjsi.J2006335

XIE L L ， TU D W ， ZHANG X ， et al . Deep Sea in situ binocular stereo vision imaging system with laser scanning ［J］. Chinese Journal of Scientific Instrument ， 2020 ， 41 （ 6 ）： 106 - 114 . （in Chinese） . doi: 10.19650/j.cnki.cjsi.J2006335 http://dx.doi.org/10.19650/j.cnki.cjsi.J2006335

LWIN K N ， MUKADA N ， MYINT M ， et al . Visual docking against bubble noise with 3-D perception using dual-eye cameras ［J］. IEEE Journal of Oceanic Engineering ， 2020 ， 45 （ 1 ）： 247 - 270 . doi: 10.1109/joe.2018.2871651 http://dx.doi.org/10.1109/joe.2018.2871651

SHI C ， WANG Q B ， HE X L ， et al . An automatic method of fish length estimation using underwater stereo system based on LabVIEW ［J］. Computers and Electronics in Agriculture ， 2020 ， 173 ： 105419 . doi: 10.1016/j.compag.2020.105419 http://dx.doi.org/10.1016/j.compag.2020.105419

BAYLEY D T I ， MOGG A O M . A protocol for the large-scale analysis of reefs using Structure from Motion photogrammetry ［J］. Methods in Ecology and Evolution ， 2020 ， 11 （ 11 ）： 1410 - 1420 . doi: 10.1111/2041-210x.13476 http://dx.doi.org/10.1111/2041-210x.13476

李莹莹，张志毅，袁林 . 线结构光光条中心提取综述［J］. 激光与光电子学进展， 2013 ， 50 （ 10 ）： 13 - 22 . doi: 10.3788/lop50.100002 http://dx.doi.org/10.3788/lop50.100002

LI Y Y ， ZHANG Z Y ， YUAN L . Survey on linear structured light stripe center extraction ［J］. Laser & Optoelectronics Progress ， 2013 ， 50 （ 10 ）： 13 - 22 . （in Chinese） . doi: 10.3788/lop50.100002 http://dx.doi.org/10.3788/lop50.100002

周渊，孟祥群，江登表，等 . 复杂干扰情况下的结构光条纹中心提取方法［J］. 中国激光， 2020 ， 47 （ 12 ）： 1204004 . doi: 10.3788/cjl202047.1204004 http://dx.doi.org/10.3788/cjl202047.1204004

ZHOU Y ， MENG X Q ， JIANG D B ， et al . Centerline extraction of structured light stripe under complex interference ［J］. Chinese Journal of Lasers ， 2020 ， 47 （ 12 ）： 1204004 . （in Chinese） . doi: 10.3788/cjl202047.1204004 http://dx.doi.org/10.3788/cjl202047.1204004

STEGER C . An unbiased detector of curvilinear structures ［J］. IEEE Transactions on Pattern Analysis and Machine Intelligence ， 1998 ， 20 （ 2 ）： 113 - 125 . doi: 10.1109/34.659930 http://dx.doi.org/10.1109/34.659930

CHEN J S ， SU G D ， XIANG S B . Robust welding seam tracking using image seam extraction ［J］. Science and Technology of Welding and Joining ， 2012 ， 17 （ 2 ）： 155 - 161 . doi: 10.1179/1362171811y.0000000091 http://dx.doi.org/10.1179/1362171811y.0000000091

胡增，李伟明， ALAA A A ，等 . 抗焊渣飞溅干扰的线结构光光条中心快速提取方法［J/OL］. 激光与光电子学进展： 1 - 12 ［ 2022-05-11 ］. http：//kns.cnki.net/kcms/detail/31.1690.TN. 20210712. 1655.058.html http://kns.cnki.net/kcms/detail/31.1690.TN.20210712.1655.058.html .

HU Z ， LI W M ， ALAA A A ， et al . A fast center extraction algorithm for line structure laser stripe of anti-welding slag spatter ［J/OL］. Laser& Optoelectronics Progress ： 1 - 12 ［ 2022-05-11 ］. http：//kns.cnki.net/kcms/detail/31.1690.TN.202107 12. 1655.058.html http://kns.cnki.net/kcms/detail/31.1690.TN.20210712.1655.058.html .

DINC M ， HAJIYEV C . Integration of navigation systems for autonomous underwater vehicles ［J］. Journal of Marine Engineering & Technology ， 2015 ， 14 （ 1 ）： 32 - 43 . doi: 10.1080/20464177.2015.1022382 http://dx.doi.org/10.1080/20464177.2015.1022382

BODENMANN A ， THORNTON B ， URA T . Generation of high-resolution three-dimensional reconstructions of the seafloor in color using a single camera and structured light ［J］. Journal of Field Robotics ， 2017 ， 34 （ 5 ）： 833 - 851 . doi: 10.1002/rob.21682 http://dx.doi.org/10.1002/rob.21682

BLEIER M ， LUCHT JVAN DER ， NÜCHTER A . Scout3d-an underwater laser scanning system for mobile mapping ［J］. The International Archives of the Photogrammetry， Remote Sensing and Spatial Information Sciences ， 2019 ， XLII-2/W 18 ： 13 - 18 .

MARTINS A ， ALMEIDA J ， ALMEIDA C ， et al . UX 1 system design - A robotic system for underwater mining exploration ［C］. 2018 IEEE/RSJ International Conference on Intelligent Robots and Systems （IROS）. 15，2018 ， Madrid， Spain. IEEE ， 2018 ： 1494 - 1500 . doi: 10.1109/iros.2018.8593999 http://dx.doi.org/10.1109/iros.2018.8593999

丁忠军，赵子毅，张春堂，等 . 载人潜水器的深海地貌线结构光三维重建［J］. 红外与激光工程， 2019 ， 48 （ 5 ）： 11 - 19 . doi: 10.3788/irla201948.0503001 http://dx.doi.org/10.3788/irla201948.0503001

DING Z J ， ZHAO Z Y ， ZHANG C T ， et al . 3D reconstruction of deep sea geomorphologic linear structured light based on manned submersible ［J］. Infrared and Laser Engineering ， 2019 ， 48 （ 5 ）： 11 - 19 . （in Chinese） . doi: 10.3788/irla201948.0503001 http://dx.doi.org/10.3788/irla201948.0503001

HOLAK K ， CIESLAK P ， KOHUT P ， et al . A vision system for pose estimation of an underwater robot ［J］. Journal of Marine Engineering & Technology ， 2020 ： 1 - 15 .

JEON I ， LEE I . 3d reconstruction of unstable underwater environment with sfm using slam ［J］. The International Archives of the Photogrammetry， Remote Sensing and Spatial Information Sciences ， 2020 ，： 957- 962 . doi: 10.5194/isprs-archives-xliii-b2-2020-957-2020 http://dx.doi.org/10.5194/isprs-archives-xliii-b2-2020-957-2020

POPE R M ， FRY E S . Absorption spectrum （380-700 nm） of pure water. II. Integrating cavity measurements ［J］. Applied Optics ， 1997 ， 36 （ 33 ）： 8710 - 8723 . doi: 10.1364/ao.36.008710 http://dx.doi.org/10.1364/ao.36.008710

ZHANG Z . A flexible new technique for camera calibration ［J］. IEEE Transactions on Pattern Analysis and Machine Intelligence ， 2000 ， 22 （ 11 ）： 1330 - 1334 . doi: 10.1109/34.888718 http://dx.doi.org/10.1109/34.888718

MATOS G ， BUSCHINELLI P ， PINTO T . Underwater laser triangulation sensor model with flat refractive interfaces ［J］. IEEE Journal of Oceanic Engineering ， 2020 ， 45 （ 3 ）： 937 - 945 . doi: 10.1109/joe.2019.2891863 http://dx.doi.org/10.1109/joe.2019.2891863

MU D Y ， XU G L ， DONG W D . A simple calibration method for line-structured light vision sensor based on planar target of different positions ［C］. 2020 International Conference on Computer Vision， Image and Deep Learning （CVIDL）. 1012，2020 ， Chongqing， China. IEEE ， 2020 ： 117 - 121 . doi: 10.1109/cvidl51233.2020.00029 http://dx.doi.org/10.1109/cvidl51233.2020.00029

严婷婷，李锋，王琦 . 高斯加权的二维灰度重心法提取光条中心［J］. 计算机工程与设计， 2020 ， 41 （ 12 ）： 3570 - 3574 .

YAN T T ， LI F ， WANG Q . Gaussian weighted two-dimensional gray center of gravity method for extracting strip center ［J］. Computer Engineering and Design ， 2020 ， 41 （ 12 ）： 3570 - 3574 . （in Chinese）

吴頔，吕且妮，卢琳，等 . 基于互相关和改进高斯拟合的光斑中心提取方法［J］. 光电子·激光， 2017 ， 28 （ 2 ）： 202 - 210 . doi: 10.16136/j.joel.2017.02.0100 http://dx.doi.org/10.16136/j.joel.2017.02.0100

WU D ， LU Q N ， LU L ， et al . Spot center extraction based on cross correlation and improved Gaussian fitting ［J］. Journal of Optoelectronics·Laser ， 2017 ， 28 （ 2 ）： 202 - 210 . （in Chinese） . doi: 10.16136/j.joel.2017.02.0100 http://dx.doi.org/10.16136/j.joel.2017.02.0100

LEUTENEGGER S ， CHLI M ， SIEGWART R Y . BRISK： binary robust invariant scalable keypoints ［C］. 2011 International Conference on Computer Vision . 613，2011 ， Barcelona， Spain . IEEE ， 2011 ： 2548 - 2555 . doi: 10.1109/iccv.2011.6126542 http://dx.doi.org/10.1109/iccv.2011.6126542

CALONDER M ， LEPETIT V ， STRECHA C ， et al . BRIEF ： Binary Robust Independent Elementary Features ［M］. Computer Vision-ECCV 2010 . Berlin， Heidelberg ： Springer Berlin Heidelberg ， 2010 ： 778 - 792 . doi: 10.1007/978-3-642-15561-1_56 http://dx.doi.org/10.1007/978-3-642-15561-1_56

Views

1959

下载量

CSCD

Alert me when the article has been cited

提交

Tools

Publicity Resources

Time-domain denoising based on photon-counting LiDAR

Enhancement of field depth for projection-type integral imaging three-dimensional display based on small diverging angle

Optical acquiring technique of three-dimensional integral imaging based on optimal pick-up distance

Related Author

le LUO

Chang-qiang WU

Jie LIN

Zhen-chao FENG

Wei-ji HE

Qian CHEN

ZHANG Lei

YANG Yong

Related Institution

College of Electronic andOptical Engineering, Nanjing University of Science & Technology

Key Laboratory of Optical Information Science and Technology of the Ministry of Education, Institute of Modern Optics, Nankai University

Key Laboratory of Optical Information Science and Technology, Ministry of Education, Institute of Modern Optics, Nankai University

AI问答

Address：No.3888 Dong Nanhu Road, Changchun, Jilin, China Postal code：130033
Tel：0431-86176855 Email：gxjmgc@ciomp.ac.cn
Technical support is provided by Beijing Founder electronics co., LTD 吉ICP备11002662号-17 京公网安备11010802024621
It is recommended to read the content of this site in Chrome&IE9+. Please switch to extreme mode in browser 360.
Cookies We use cookies to help provide and enhance our service and tailor content. By continuing, you agree to the use of cookies.

⁰