高分七号卫星立体影像精细三维重建

巩丹超; 刘松林; 韩轶龙; 张威

doi:10.37188/OPE.20233114.2147

您当前的位置：

首页 >

文章列表页 >

高分七号卫星立体影像精细三维重建

信息科学 | 更新时间：2023-08-26

- 高分七号卫星立体影像精细三维重建
- Fine 3D reconstruction methods with Gaofen-7 satellite stereo images
- 光学精密工程 2023年31卷第14期页码：2147-2159
- 作者机构：
  
  1.地理信息工程国家重点实验室，陕西西安 710054
  2.西安测绘研究所，陕西西安 710054
  3.山东科技大学测绘与空间信息学院，山东青岛 266590
  4.山东省“3S”工程技术研究中心，山东青岛 266590
- 作者简介：
  
  [ "巩丹超（1975-），男，陕西丹凤人，博士，研究员，博士生导师，2003年毕业于原解放军信息工程大学，获摄影测量与遥感专业博士学位，主要从事卫星摄影测量及遥感影像处理与分析方面的研究。E-mail： sx_gdch@sina.com" ]
  [ "韩轶龙（1988-），男，河北深泽人，博士，讲师，2020年毕业于武汉大学，获摄影测量与遥感专业博士学位，主要从事数字摄影测量与计算机视觉等方面的研究。E-mail：hanyl@sdust.edu.cn" ]
- 基金信息：
  
  山东省自然科学基金资助项目(ZR2022QD141);国家自然科学基金资助项目(62101395;42271273;42201278)
- DOI：10.37188/OPE.20233114.2147
  中图分类号：
扫描看全文
巩丹超, 刘松林, 韩轶龙, 等. 高分七号卫星立体影像精细三维重建[J]. 光学精密工程, 2023,31(14):2147-2159.

GONG Danchao, LIU Songlin, HAN Yilong, et al. Fine 3D reconstruction methods with Gaofen-7 satellite stereo images[J]. Optics and Precision Engineering, 2023,31(14):2147-2159.
巩丹超, 刘松林, 韩轶龙, 等. 高分七号卫星立体影像精细三维重建[J]. 光学精密工程, 2023,31(14):2147-2159. DOI： 10.37188/OPE.20233114.2147.

GONG Danchao, LIU Songlin, HAN Yilong, et al. Fine 3D reconstruction methods with Gaofen-7 satellite stereo images[J]. Optics and Precision Engineering, 2023,31(14):2147-2159. DOI： 10.37188/OPE.20233114.2147.

摘要

为了实现高分七号卫星亚米级影像的高精度精细三维重建，针对高分七号卫星前后视线阵相机的成像特点，围绕影像的定向、影像畸变消除、密集匹配方法优化等方面，提出一套完整的精细三维重建方法和流程。利用影像间连接点几何约束关系对有理函数模型进行了二次定向消除系统误差；其次采用一种基于物方投影面的水平纠正方法对原始影像进行纠正，消除了立体像对之间大的倾斜误差；在密集匹配阶段，将全球公开数字高程模型（Digital Elevation Model，DEM）数据作为视差约束，同时引入顾及影像灰度和特征信息的AD-Census作为匹配测度，有效削弱重复纹理引起的匹配错误问题，提升了数字表面模型（Digital Surface Model，DSM）的质量。利用覆盖我国宁夏和新疆某地的两组高分七号的立体影像进行了试验，结果表明本文所提出方法可将相对误差精度由平差前的0.847 pixel和0.725 pixel分别提升到平差后的0.652 pixel和0.593 pixel，相对误差精度最大可提高23.02%，基于物方投影面的水平纠正方法能够显著消除大倾角差异带来的几何畸变，对高分七号卫星影像取得了较好质量的DSM产品，尤其是对于小尺度密集建筑物区域的重复纹理取得了较好的效果。

Abstract

To achieve high-precision and fine 3D reconstruction with the Gaofen-7 satellite sub-meter-level images， this paper proposes a method that focuses on the relative error correction of stereo pairs， image horizontal plane correction， and semi-global matching optimization， forming a fine 3D reconstruction pipeline. First， concerning the relative error in the orientation model of Gaofen-7 stereo images， the geometric constraint relationship of the connection point among images is used to eliminate the systematic error of the rational function model. Second， a horizontal correction method based on the projection plane of the object is used to correct the original image； this eliminates the large inclination error difference between stereo images and provides a better data basis for subsequent processes. In the dense matching stage， global publicly available digital elevation model （DEM） data are used as the disparity constraint. AD-Census， which consider both the grayscale and feature information of the image， is employed as the matching cost metric， addressing the matching error problem caused by repeated texture and improving the digital surface model （DSM） production. The results of experiments conducted using Gaofen-7stereo images covering areas in Ningxia and Xinjiang indicate that the proposed method can improve the relative error accuracy from 0.847 and 0.725 pixels to 0.652 and 0.593 pixels， respectively， representing up to 23.02% improvement. The horizontal correction method based on the projection plane of the object can significantly eliminate the geometric distortion caused by the difference in large inclination angle， and good-quality DSM products can be obtained， especially for the repetitive texture of small-scale dense building areas.

关键词

三维重建有理函数模型影像纠正影像匹配半全局匹配

Keywords

3D reconstructionRational Function Model （RFM）image correctionimage matchingsemi-global matching

references

赵杰，陈小梅，侯玮旻，等. 基于城市遥感卫星影像对的立体匹配［J］. 光学精密工程， 2022， 30（7）：830-839. doi: 10.37188/OPE.20223007.0830http://dx.doi.org/10.37188/OPE.20223007.0830

ZHAO J， CHEN X M， HOU W M， et al. Stereo matching based on urban satellite remote sensing image pair［J］. Opt. Precision Eng.， 2022， 30（7）： 830-839.（in Chinese）. doi: 10.37188/OPE.20223007.0830http://dx.doi.org/10.37188/OPE.20223007.0830

简剑锋，胡燕，李新涛. 基于天绘一号卫星影像的大范围高精度数字高程模型［J］. 光学精密工程， 2017，25（12z）： 152-159.

JIAN J F， HU Y， LI X T. Digital elevation model with large scale and high precision based on image of TH-01 mapping satellite［J］. Opt. Precision Eng.， 2017，25（12z）： 152-159. （in Chinese）

张永军，张祖勋，龚健雅. 天空地多源遥感数据的广义摄影测量学［J］. 测绘学报， 2021， 50（1）1-11. doi: 10.11947/j.AGCS.2021.20200245http://dx.doi.org/10.11947/j.AGCS.2021.20200245

ZHANG Y J， ZHANG Z X， GONG J Y. Generalized photogrammetry of spaceborne， airborne and terrestrial multi-source remote sensing datasets［J］. Acta Geodaetica et Cartographica Sinica， 2021， 50（1）1-11（in Chinese）. doi: 10.11947/j.AGCS.2021.20200245http://dx.doi.org/10.11947/j.AGCS.2021.20200245

王任享，王建荣. 我国卫星摄影测量发展及其进步［J］. 测绘学报， 2022， 51（6）804-810. doi: 10.11947/j.issn.1001-1595.2022.6.chxb202206005http://dx.doi.org/10.11947/j.issn.1001-1595.2022.6.chxb202206005

WANG R X， WANG J R. Development and progress of satellite photogrammetry in China［J］. Acta Geodaetica et Cartographica Sinica， 2022， 51（6）804-810（in Chinese）. doi: 10.11947/j.issn.1001-1595.2022.6.chxb202206005http://dx.doi.org/10.11947/j.issn.1001-1595.2022.6.chxb202206005

张永军，万一，史文中，等. 多源卫星影像的摄影测量遥感智能处理技术框架与初步实践［J］. 测绘学报， 2021， 50（8）1068-1083. doi: 10.11947/j.AGCS.2021.20210079http://dx.doi.org/10.11947/j.AGCS.2021.20210079

ZHANG Y J， WAN Y， SHI W Z， et al. Technical framework and preliminary practices of photogrammetric remote sensing intelligent processing of multi-source satellite images［J］. Acta Geodaetica et Cartographica Sinica， 2021， 50（8）1068-1083（in Chinese）. doi: 10.11947/j.AGCS.2021.20210079http://dx.doi.org/10.11947/j.AGCS.2021.20210079

巩丹超，韩轶龙，黄旭. 线特征约束的建筑物密集匹配边缘全局优化方法［J］. 测绘学报， 2021， 50（6）：833-846. doi: 10.11947/j.AGCS.2021.20200305http://dx.doi.org/10.11947/j.AGCS.2021.20200305

GONG D C， HAN Y L， HUANG X. Global refinement of building boundary with line feature constraints for stereo dense image matching［J］. Acta Geodaetica et Cartographica Sinica， 2021， 50（6）：833-846. （in Chinese）. doi: 10.11947/j.AGCS.2021.20200305http://dx.doi.org/10.11947/j.AGCS.2021.20200305

WANG Y， GONG D， HU H， et al. State of the art in dense image matching cost computation for high-resolution satellite stereo［J］. The International Archives of the Photogrammetry， Remote Sensing and Spatial Information Sciences， 2021， 43：109-114. doi: 10.5194/isprs-archives-xliii-b2-2021-109-2021http://dx.doi.org/10.5194/isprs-archives-xliii-b2-2021-109-2021

HAN Y， WANG S， GONG D， et al. State of the art in digital surface modelling from multi-view high-resolution satellite images［J］. ISPRS Annals of the Photogrammetry， Remote Sensing and Spatial Information Sciences， 2020， 2： 351-356. doi: 10.5194/isprs-annals-v-2-2020-351-2020http://dx.doi.org/10.5194/isprs-annals-v-2-2020-351-2020

唐新明，王鸿燕. 我国民用光学卫星测绘产品体系的建立与应用［J］. 测绘学报， 2022， 51（7）： 1386-1397. doi: 10.11947/j.issn.1001-1595.2022.7.chxb202207025http://dx.doi.org/10.11947/j.issn.1001-1595.2022.7.chxb202207025

TANG X M， WANG H Y. Establishment and application of China civil optical satellite surveying and mapping products［J］. Acta Geodaetica et Cartographica Sinica， 2022， 51（7）： 1386-1397.（in Chinese）. doi: 10.11947/j.issn.1001-1595.2022.7.chxb202207025http://dx.doi.org/10.11947/j.issn.1001-1595.2022.7.chxb202207025

WANG Y， HAN Y L， PU L J， et al. A novel model for detecting urban fringe and its expanding patterns： an application in Harbin city， China［J］. Land， 2021， 10（8）： 876. doi: 10.3390/land10080876http://dx.doi.org/10.3390/land10080876

唐新明，谢俊峰，付兴科，等. 资源三号02星激光测高仪在轨几何检校与试验验证［J］. 测绘学报， 2017， 46（6）： 384-395. doi: 10.11947/j.AGCS.2017.20160597http://dx.doi.org/10.11947/j.AGCS.2017.20160597

TANG X M， XIE J F， FU X K， et al. ZY3-02 laser altimeter on-orbit geometrical calibration and test［J］. Acta Geodaetica et Cartographica Sinica， 2017， 46（6）： 384-395.（in Chinese）. doi: 10.11947/j.AGCS.2017.20160597http://dx.doi.org/10.11947/j.AGCS.2017.20160597

李国元，唐新明，周晓青，等. 高分七号卫星激光测高仪无场几何定标法［J］. 测绘学报， 2022， 51（3）： 401-412. doi: 10.11947/j.AGCS.2022.20200181http://dx.doi.org/10.11947/j.AGCS.2022.20200181

LI G Y， TANG X M， ZHOU X Q， et al. The method of GF-7 satellite laser altimeter on-orbit geometric calibration without field site［J］. Acta Geodaetica et Cartographica Sinica， 2022， 51（3）： 401-412. （in Chinese）. doi: 10.11947/j.AGCS.2022.20200181http://dx.doi.org/10.11947/j.AGCS.2022.20200181

FRASER C S， HANLEY H B. Bias compensation in rational functions for ikonos satellite imagery［J］. Photogrammetric Engineering & Remote Sensing， 2003， 69（1）： 53-57. doi: 10.14358/pers.69.1.53http://dx.doi.org/10.14358/pers.69.1.53

FRASER C S， HANLEY H B. Bias-compensated RPCs for sensor orientation of high-resolution satellite imagery［J］. Photogrammetric Engineering & Remote Sensing， 2005， 71（8）： 909-915. doi: 10.14358/pers.71.8.909http://dx.doi.org/10.14358/pers.71.8.909

FRASER C S， DIAL G， GRODECKI J. Sensor orientation via RPCs［J］. ISPRS Journal of Photogrammetry and Remote Sensing， 2006， 60（3）： 182-194. doi: 10.1016/j.isprsjprs.2005.11.001http://dx.doi.org/10.1016/j.isprsjprs.2005.11.001

GRODECKI J， DIAL G. Block adjustment of high-resolution satellite images described by rational polynomials［J］. Photogrammetric Engineering & Remote Sensing， 2003， 69（1）： 59-68. doi: 10.14358/pers.69.1.59http://dx.doi.org/10.14358/pers.69.1.59

NOH MJ， HOWAT IM. Automatic relative RPC image model bias compensation through hierarchical image matching for improving DEM quality［J］. ISPRS Journal of Photogrammetry and Remote Sensing， 2018， 136： 120-133. doi: 10.1016/j.isprsjprs.2017.12.008http://dx.doi.org/10.1016/j.isprsjprs.2017.12.008

TONG X H， LIU S J， WENG Q H. Bias-corrected rational polynomial coefficients for high accuracy geo-positioning of QuickBird stereo imagery［J］. ISPRS Journal of Photogrammetry and Remote Sensing， 2010， 65（2）： 218-226. doi: 10.1016/j.isprsjprs.2009.12.004http://dx.doi.org/10.1016/j.isprsjprs.2009.12.004

KIM T. A study on the epipolarity of linear pushbroom images［J］. Photogrammetric Engineering and Remote Sensing， 2000， 66（8）： 961-966.

HABIB A F， MORGAN M， JEONG S， et al. Analysis of epipolar geometry in linear array scanner scenes［J］. The Photogrammetric Record， 2005， 20（109）： 27-47. doi: 10.1111/j.1477-9730.2005.00303.xhttp://dx.doi.org/10.1111/j.1477-9730.2005.00303.x

MORGAN MICHEL KIM KYUNG-OK JEONG SOO HABIB AYMAN. Epipolar resampling of space-borne linear array scanner scenes using parallel projection［J］. Photogrammetric Engineering & Remote Sensing， 2006， 72（11）： 1255-1263. doi: 10.14358/pers.72.11.1255http://dx.doi.org/10.14358/pers.72.11.1255

张永生，巩丹超. 高分辨率遥感卫星应用：成像模型、处理算法及应用技术［M］. 北京：科学出版社， 2004.

ZHANG Y SH， GONG D CH. Application of High Resolution Remote Sensing Satellite： Imaging Model， Processing Algorithm And Application Technology［M］. Beijing： Science Press， 2004.（in Chinese）

胡芬，王密，李德仁，等. 基于投影基准面的线阵推扫式卫星立体像对近似核线影像生成方法［J］. 测绘学报， 2009， 38（5）： 428-436. doi: 10.3321/j.issn:1001-1595.2009.05.009http://dx.doi.org/10.3321/j.issn:1001-1595.2009.05.009

HU F， WANG M， LI D R， et al. Generation of approximate epipolar images from linear pushbroom satellite stereo-imagery based on projection reference plane［J］. Acta Geodaetica et Cartographica Sinica， 2009， 38（5）： 428-436. （in Chinese）. doi: 10.3321/j.issn:1001-1595.2009.05.009http://dx.doi.org/10.3321/j.issn:1001-1595.2009.05.009

HIRSCHMULLER H. Accurate and Efficient Stereo Processing by Semi-Global Matching and Mutual Information［C］. 2005 IEEE Computer Society Conference on Computer Vision and Pattern Recognition （CVPR'05）.20-25， 2005， San Diego， CA， USA. IEEE， 2005： 807-814. doi: 10.1109/cvpr.2005.56http://dx.doi.org/10.1109/cvpr.2005.56

HIRSCHMULLER H. Stereo processing by semiglobal matching and mutual information［J］. IEEE Transactions on Pattern Analysis and Machine Intelligence， 2008， 30（2）： 328-341. doi: 10.1109/tpami.2007.1166http://dx.doi.org/10.1109/tpami.2007.1166

ROTHERMEL M， WENZEL K， FRITSCH D， et al. SURE： Photogrammetric Surface Reconstruction from Imagery［C］. In Proceedings LC3D Workshop， Berlin， 2013， 8（2）.

ZHANG K， LU J B， LAFRUIT G. Cross-based local stereo matching using orthogonal integral images［J］. IEEE Transactions on Circuits and Systems for Video Technology， 2009， 19（7）： 1073-1079. doi: 10.1109/tcsvt.2009.2020478http://dx.doi.org/10.1109/tcsvt.2009.2020478

浏览量

下载量

CSCD

文章被引用时，请邮件提醒。

提交

工具集

关联资源

基于深度学习的多视图立体重建方法综述

基于Harris-SIFT算法和全卷积深度预测的显微镜成像的三维重建研究

融合NFFD与图卷积的单视图三维物体重建

线阵垂轨环扫式光学遥感卫星影像几何纠正

面向低分辨率单目内窥镜图像的三维多孔结构重建