Fine 3D reconstruction methods with Gaofen-7 satellite stereo images

GONG Danchao; LIU Songlin; HAN Yilong; ZHANG Wei

doi:10.37188/OPE.20233114.2147

您当前的位置：

首页 >

文章列表页 >

Fine 3D reconstruction methods with Gaofen-7 satellite stereo images

Information Sciences | 更新时间：2023-08-26

- Fine 3D reconstruction methods with Gaofen-7 satellite stereo images
- Optics and Precision Engineering Vol. 31, Issue 14, Pages: 2147-2159(2023)
- 作者机构：
  
  1.地理信息工程国家重点实验室，陕西西安 710054
  2.西安测绘研究所，陕西西安 710054
  3.山东科技大学测绘与空间信息学院，山东青岛 266590
  4.山东省“3S”工程技术研究中心，山东青岛 266590
- 作者简介：
- 基金信息：
- DOI：10.37188/OPE.20233114.2147
  CLC： TP394.1;TH691.9
- Received：12 August 2022，
  
  Revised：14 October 2022，
  
  Published：25 July 2023
- 稿件说明：
移动端阅览
巩丹超,刘松林,韩轶龙等.高分七号卫星立体影像精细三维重建[J].光学精密工程,2023,31(14):2147-2159.

GONG Danchao,LIU Songlin,HAN Yilong,et al.Fine 3D reconstruction methods with Gaofen-7 satellite stereo images[J].Optics and Precision Engineering,2023,31(14):2147-2159.
巩丹超,刘松林,韩轶龙等.高分七号卫星立体影像精细三维重建[J].光学精密工程,2023,31(14):2147-2159. DOI： 10.37188/OPE.20233114.2147.

GONG Danchao,LIU Songlin,HAN Yilong,et al.Fine 3D reconstruction methods with Gaofen-7 satellite stereo images[J].Optics and Precision Engineering,2023,31(14):2147-2159. DOI： 10.37188/OPE.20233114.2147.

摘要

为了实现高分七号卫星亚米级影像的高精度精细三维重建，针对高分七号卫星前后视线阵相机的成像特点，围绕影像的定向、影像畸变消除、密集匹配方法优化等方面，提出一套完整的精细三维重建方法和流程。利用影像间连接点几何约束关系对有理函数模型进行了二次定向消除系统误差；其次采用一种基于物方投影面的水平纠正方法对原始影像进行纠正，消除了立体像对之间大的倾斜误差；在密集匹配阶段，将全球公开数字高程模型（Digital Elevation Model，DEM）数据作为视差约束，同时引入顾及影像灰度和特征信息的AD-Census作为匹配测度，有效削弱重复纹理引起的匹配错误问题，提升了数字表面模型（Digital Surface Model，DSM）的质量。利用覆盖我国宁夏和新疆某地的两组高分七号的立体影像进行了试验，结果表明本文所提出方法可将相对误差精度由平差前的0.847 pixel和0.725 pixel分别提升到平差后的0.652 pixel和0.593 pixel，相对误差精度最大可提高23.02%，基于物方投影面的水平纠正方法能够显著消除大倾角差异带来的几何畸变，对高分七号卫星影像取得了较好质量的DSM产品，尤其是对于小尺度密集建筑物区域的重复纹理取得了较好的效果。

Abstract

To achieve high-precision and fine 3D reconstruction with the Gaofen-7 satellite sub-meter-level images， this paper proposes a method that focuses on the relative error correction of stereo pairs， image horizontal plane correction， and semi-global matching optimization， forming a fine 3D reconstruction pipeline. First， concerning the relative error in the orientation model of Gaofen-7 stereo images， the geometric constraint relationship of the connection point among images is used to eliminate the systematic error of the rational function model. Second， a horizontal correction method based on the projection plane of the object is used to correct the original image； this eliminates the large inclination error difference between stereo images and provides a better data basis for subsequent processes. In the dense matching stage， global publicly available digital elevation model （DEM） data are used as the disparity constraint. AD-Census， which consider both the grayscale and feature information of the image， is employed as the matching cost metric， addressing the matching error problem caused by repeated texture and improving the digital surface model （DSM） production. The results of experiments conducted using Gaofen-7stereo images covering areas in Ningxia and Xinjiang indicate that the proposed method can improve the relative error accuracy from 0.847 and 0.725 pixels to 0.652 and 0.593 pixels， respectively， representing up to 23.02% improvement. The horizontal correction method based on the projection plane of the object can significantly eliminate the geometric distortion caused by the difference in large inclination angle， and good-quality DSM products can be obtained， especially for the repetitive texture of small-scale dense building areas.

关键词

Keywords

references

赵杰，陈小梅，侯玮旻，等 . 基于城市遥感卫星影像对的立体匹配［J］. 光学精密工程， 2022 ， 30 （ 7 ）： 830 - 839 . doi: 10.37188/OPE.20223007.0830 http://dx.doi.org/10.37188/OPE.20223007.0830

ZHAO J ， CHEN X M ， HOU W M ， et al . Stereo matching based on urban satellite remote sensing image pair ［J］. Opt. Precision Eng. ， 2022 ， 30 （ 7 ）： 830 - 839 . （in Chinese） . doi: 10.37188/OPE.20223007.0830 http://dx.doi.org/10.37188/OPE.20223007.0830

简剑锋，胡燕，李新涛 . 基于天绘一号卫星影像的大范围高精度数字高程模型［J］. 光学精密工程， 2017 ， 25 （ 12 z）： 152 - 159 .

JIAN J F ， HU Y ， LI X T . Digital elevation model with large scale and high precision based on image of TH-01 mapping satellite ［J］. Opt. Precision Eng. ， 2017 ， 25 （ 12 z）： 152 - 159 . （in Chinese）

张永军，张祖勋，龚健雅 . 天空地多源遥感数据的广义摄影测量学［J］. 测绘学报， 2021 ， 50（ 1 ） 1 - 11 . doi: 10.11947/j.AGCS.2021.20200245 http://dx.doi.org/10.11947/j.AGCS.2021.20200245

ZHANG Y J ， ZHANG Z X ， GONG J Y . Generalized photogrammetry of spaceborne， airborne and terrestrial multi-source remote sensing datasets ［J］. Acta Geodaetica et Cartographica Sinica ， 2021 ， 50（ 1 ） 1 - 11 （in Chinese） . doi: 10.11947/j.AGCS.2021.20200245 http://dx.doi.org/10.11947/j.AGCS.2021.20200245

王任享，王建荣 . 我国卫星摄影测量发展及其进步［J］. 测绘学报， 2022 ， 51（ 6 ） 804 - 810 . doi: 10.11947/j.issn.1001-1595.2022.6.chxb202206005 http://dx.doi.org/10.11947/j.issn.1001-1595.2022.6.chxb202206005

WANG R X ， WANG J R . Development and progress of satellite photogrammetry in China ［J］. Acta Geodaetica et Cartographica Sinica ， 2022 ， 51（ 6 ） 804 - 810 （in Chinese） . doi: 10.11947/j.issn.1001-1595.2022.6.chxb202206005 http://dx.doi.org/10.11947/j.issn.1001-1595.2022.6.chxb202206005

张永军，万一，史文中，等 . 多源卫星影像的摄影测量遥感智能处理技术框架与初步实践［J］. 测绘学报， 2021 ， 50（ 8 ） 1068 - 1083 . doi: 10.11947/j.AGCS.2021.20210079 http://dx.doi.org/10.11947/j.AGCS.2021.20210079

ZHANG Y J ， WAN Y ， SHI W Z ， et al . Technical framework and preliminary practices of photogrammetric remote sensing intelligent processing of multi-source satellite images ［J］. Acta Geodaetica et Cartographica Sinica ， 2021 ， 50（ 8 ） 1068 - 1083 （in Chinese） . doi: 10.11947/j.AGCS.2021.20210079 http://dx.doi.org/10.11947/j.AGCS.2021.20210079

巩丹超，韩轶龙，黄旭 . 线特征约束的建筑物密集匹配边缘全局优化方法［J］. 测绘学报， 2021 ， 50 （ 6 ）： 833 - 846 . doi: 10.11947/j.AGCS.2021.20200305 http://dx.doi.org/10.11947/j.AGCS.2021.20200305

GONG D C ， HAN Y L ， HUANG X . Global refinement of building boundary with line feature constraints for stereo dense image matching ［J］. Acta Geodaetica et Cartographica Sinica ， 2021 ， 50 （ 6 ）： 833 - 846 . （in Chinese） . doi: 10.11947/j.AGCS.2021.20200305 http://dx.doi.org/10.11947/j.AGCS.2021.20200305

WANG Y ， GONG D ， HU H ， et al . State of the art in dense image matching cost computation for high-resolution satellite stereo ［J］. The International Archives of the Photogrammetry， Remote Sensing and Spatial Information Sciences ， 2021 ， 43 ： 109 - 114 . doi: 10.5194/isprs-archives-xliii-b2-2021-109-2021 http://dx.doi.org/10.5194/isprs-archives-xliii-b2-2021-109-2021

HAN Y ， WANG S ， GONG D ， et al . State of the art in digital surface modelling from multi-view high-resolution satellite images ［J］. ISPRS Annals of the Photogrammetry， Remote Sensing and Spatial Information Sciences ， 2020 ， 2 ： 351 - 356 . doi: 10.5194/isprs-annals-v-2-2020-351-2020 http://dx.doi.org/10.5194/isprs-annals-v-2-2020-351-2020

唐新明，王鸿燕 . 我国民用光学卫星测绘产品体系的建立与应用［J］. 测绘学报， 2022 ， 51 （ 7 ）： 1386 - 1397 . doi: 10.11947/j.issn.1001-1595.2022.7.chxb202207025 http://dx.doi.org/10.11947/j.issn.1001-1595.2022.7.chxb202207025

TANG X M ， WANG H Y . Establishment and application of China civil optical satellite surveying and mapping products ［J］. Acta Geodaetica et Cartographica Sinica ， 2022 ， 51 （ 7 ）： 1386 - 1397 . （in Chinese） . doi: 10.11947/j.issn.1001-1595.2022.7.chxb202207025 http://dx.doi.org/10.11947/j.issn.1001-1595.2022.7.chxb202207025

WANG Y ， HAN Y L ， PU L J ， et al . A novel model for detecting urban fringe and its expanding patterns： an application in Harbin city， China ［J］. Land ， 2021 ， 10 （ 8 ）： 876 . doi: 10.3390/land10080876 http://dx.doi.org/10.3390/land10080876

唐新明，谢俊峰，付兴科，等 . 资源三号02星激光测高仪在轨几何检校与试验验证［J］. 测绘学报， 2017 ， 46 （ 6 ）： 384 - 395 . doi: 10.11947/j.AGCS.2017.20160597 http://dx.doi.org/10.11947/j.AGCS.2017.20160597

TANG X M ， XIE J F ， FU X K ， et al . ZY3-02 laser altimeter on-orbit geometrical calibration and test ［J］. Acta Geodaetica et Cartographica Sinica ， 2017 ， 46 （ 6 ）： 384 - 395 . （in Chinese） . doi: 10.11947/j.AGCS.2017.20160597 http://dx.doi.org/10.11947/j.AGCS.2017.20160597

李国元，唐新明，周晓青，等 . 高分七号卫星激光测高仪无场几何定标法［J］. 测绘学报， 2022 ， 51 （ 3 ）： 401 - 412 . doi: 10.11947/j.AGCS.2022.20200181 http://dx.doi.org/10.11947/j.AGCS.2022.20200181

LI G Y ， TANG X M ， ZHOU X Q ， et al . The method of GF-7 satellite laser altimeter on-orbit geometric calibration without field site ［J］. Acta Geodaetica et Cartographica Sinica ， 2022 ， 51 （ 3 ）： 401 - 412 . （in Chinese） . doi: 10.11947/j.AGCS.2022.20200181 http://dx.doi.org/10.11947/j.AGCS.2022.20200181

FRASER C S ， HANLEY H B . Bias compensation in rational functions for ikonos satellite imagery ［J］. Photogrammetric Engineering & Remote Sensing ， 2003 ， 69 （ 1 ）： 53 - 57 . doi: 10.14358/pers.69.1.53 http://dx.doi.org/10.14358/pers.69.1.53

FRASER C S ， HANLEY H B . Bias-compensated RPCs for sensor orientation of high-resolution satellite imagery ［J］. Photogrammetric Engineering & Remote Sensing ， 2005 ， 71 （ 8 ）： 909 - 915 . doi: 10.14358/pers.71.8.909 http://dx.doi.org/10.14358/pers.71.8.909

FRASER C S ， DIAL G ， GRODECKI J . Sensor orientation via RPCs ［J］. ISPRS Journal of Photogrammetry and Remote Sensing ， 2006 ， 60 （ 3 ）： 182 - 194 . doi: 10.1016/j.isprsjprs.2005.11.001 http://dx.doi.org/10.1016/j.isprsjprs.2005.11.001

GRODECKI J ， DIAL G . Block adjustment of high-resolution satellite images described by rational polynomials ［J］. Photogrammetric Engineering & Remote Sensing ， 2003 ， 69 （ 1 ）： 59 - 68 . doi: 10.14358/pers.69.1.59 http://dx.doi.org/10.14358/pers.69.1.59

NOH MJ ， HOWAT IM . Automatic relative RPC image model bias compensation through hierarchical image matching for improving DEM quality ［J］. ISPRS Journal of Photogrammetry and Remote Sensing ， 2018 ， 136 ： 120 - 133 . doi: 10.1016/j.isprsjprs.2017.12.008 http://dx.doi.org/10.1016/j.isprsjprs.2017.12.008

TONG X H ， LIU S J ， WENG Q H . Bias-corrected rational polynomial coefficients for high accuracy geo-positioning of QuickBird stereo imagery ［J］. ISPRS Journal of Photogrammetry and Remote Sensing ， 2010 ， 65 （ 2 ）： 218 - 226 . doi: 10.1016/j.isprsjprs.2009.12.004 http://dx.doi.org/10.1016/j.isprsjprs.2009.12.004

KIM T . A study on the epipolarity of linear pushbroom images ［J］. Photogrammetric Engineering and Remote Sensing ， 2000 ， 66 （ 8 ）： 961 - 966 .

HABIB A F ， MORGAN M ， JEONG S ， et al . Analysis of epipolar geometry in linear array scanner scenes ［J］. The Photogrammetric Record ， 2005 ， 20 （ 109 ）： 27 - 47 . doi: 10.1111/j.1477-9730.2005.00303.x http://dx.doi.org/10.1111/j.1477-9730.2005.00303.x

MORGAN MICHEL KIM KYUNG-OK JEONG SOO HABIB AYMAN . Epipolar resampling of space-borne linear array scanner scenes using parallel projection ［J］. Photogrammetric Engineering & Remote Sensing ， 2006 ， 72 （ 11 ）： 1255 - 1263 . doi: 10.14358/pers.72.11.1255 http://dx.doi.org/10.14358/pers.72.11.1255

张永生，巩丹超 . 高分辨率遥感卫星应用：成像模型、处理算法及应用技术［M］. 北京：科学出版社， 2004 .

ZHANG Y SH ， GONG D CH . Application of High Resolution Remote Sensing Satellite ： Imaging Model ， Processing Algorithm And Application Technology ［M］. Beijing ： Science Press ， 2004 . （in Chinese）

胡芬，王密，李德仁，等 . 基于投影基准面的线阵推扫式卫星立体像对近似核线影像生成方法［J］. 测绘学报， 2009 ， 38 （ 5 ）： 428 - 436 . doi: 10.3321/j.issn:1001-1595.2009.05.009 http://dx.doi.org/10.3321/j.issn:1001-1595.2009.05.009

HU F ， WANG M ， LI D R ， et al . Generation of approximate epipolar images from linear pushbroom satellite stereo-imagery based on projection reference plane ［J］. Acta Geodaetica et Cartographica Sinica ， 2009 ， 38 （ 5 ）： 428 - 436 . （in Chinese） . doi: 10.3321/j.issn:1001-1595.2009.05.009 http://dx.doi.org/10.3321/j.issn:1001-1595.2009.05.009

HIRSCHMULLER H . Accurate and Efficient Stereo Processing by Semi-Global Matching and Mutual Information ［C］. 2005 IEEE Computer Society Conference on Computer Vision and Pattern Recognition （CVPR'05） . 20 - 25 ， 2005， San Diego， CA， USA. IEEE ， 2005： 807 - 814 . doi: 10.1109/cvpr.2005.56 http://dx.doi.org/10.1109/cvpr.2005.56

HIRSCHMULLER H . Stereo processing by semiglobal matching and mutual information ［J］. IEEE Transactions on Pattern Analysis and Machine Intelligence ， 2008 ， 30 （ 2 ）： 328 - 341 . doi: 10.1109/tpami.2007.1166 http://dx.doi.org/10.1109/tpami.2007.1166

ROTHERMEL M ， WENZEL K ， FRITSCH D ， et al . SURE： Photogrammetric Surface Reconstruction from Imagery ［C］. In Proceedings LC3D Workshop ， Berlin ， 2013 ， 8 （ 2 ）.

ZHANG K ， LU J B ， LAFRUIT G . Cross-based local stereo matching using orthogonal integral images ［J］. IEEE Transactions on Circuits and Systems for Video Technology ， 2009 ， 19 （ 7 ）： 1073 - 1079 . doi: 10.1109/tcsvt.2009.2020478 http://dx.doi.org/10.1109/tcsvt.2009.2020478

Views

1617

下载量

CSCD

Alert me when the article has been cited

提交

Tools

Publicity Resources

Review of MEMS vibration-mirror-based 3D reconstruction of structured light

Registration of heterogeneous point cloud and precise reconstruction of 3D terrain via complex slope surface fitting

Binocular vision-based trackside pantograph anomaly detection under strong environmental noise

Multi-scale point cloud fusion based on dual-projection structured light system

3D reconstruction technique based on SURF-OKG feature matching

Related Author

LI Xinghui

ZHANG Zonghua

ZHANG Chenping

HAN Min

WAN Yu

TANG Yiliang

YANG Yun

XU Yongjie

Related Institution

School of Mechanical Engineering， Hebei University of Technology

Shenzhen International Graduate School， Tsinghua University

Cooperation Department of Chang'an University， State Key Laboratory of Geographic Information Engineering

College of Geological Engineering and Geomatics， Chang'an University

ISVision（Hangzhou） Technology Co.， Ltd.

AI问答

Address：No.3888 Dong Nanhu Road, Changchun, Jilin, China Postal code：130033
Tel：0431-86176855 Email：gxjmgc@ciomp.ac.cn
Technical support is provided by Beijing Founder electronics co., LTD 吉ICP备11002662号-17 京公网安备11010802024621
It is recommended to read the content of this site in Chrome&IE9+. Please switch to extreme mode in browser 360.
Cookies We use cookies to help provide and enhance our service and tailor content. By continuing, you agree to the use of cookies.

⁰