Superresolution reconstruction of infrared polarization microscan images in focal plane

MA Yizhe; WANG Shiyong; LEI Teng; LI Bohan; LI Fanming

doi:10.37188/OPE.20233116.2418

您当前的位置：

首页 >

文章列表页 >

Superresolution reconstruction of infrared polarization microscan images in focal plane

Information Sciences | 更新时间：2023-08-25

- Superresolution reconstruction of infrared polarization microscan images in focal plane
- Optics and Precision Engineering Vol. 31, Issue 16, Pages: 2418-2429(2023)
- 作者机构：
  
  1.中国科学院上海技术物理研究所，上海 200083
  2.中国科学院大学，北京 100049
  3.中国科学院红外探测与成像技术实验室，上海 200083
- 作者简介：
- 基金信息：
- DOI：10.37188/OPE.20233116.2418
  CLC： TP391
- Received：13 February 2023，
  
  Revised：13 March 2023，
  
  Published：25 August 2023
- 稿件说明：
移动端阅览
马一哲,王世勇,雷腾等.分焦平面红外偏振微扫描图像超分辨重建[J].光学精密工程,2023,31(16):2418-2429.

MA Yizhe,WANG Shiyong,LEI Teng,et al.Superresolution reconstruction of infrared polarization microscan images in focal plane[J].Optics and Precision Engineering,2023,31(16):2418-2429.
马一哲,王世勇,雷腾等.分焦平面红外偏振微扫描图像超分辨重建[J].光学精密工程,2023,31(16):2418-2429. DOI： 10.37188/OPE.20233116.2418.

MA Yizhe,WANG Shiyong,LEI Teng,et al.Superresolution reconstruction of infrared polarization microscan images in focal plane[J].Optics and Precision Engineering,2023,31(16):2418-2429. DOI： 10.37188/OPE.20233116.2418.

摘要

分焦平面偏振探测系统受其探测器结构的影响，成像分辨率低于探测器实际分辨率，本文在不改变光学系统结构下使用微扫描获取亚像元微位移帧序列，提出一种改进的凸集投影(Projection On Convex Sets

POCS)算法用于提升偏振成像系统的成像分辨率。该算法首先对获取到的偏振微扫描图像序列进行检偏角分离，将同组检偏角图像序列作为输入，其次进行位移匹配与凸集投影迭代初步重建高分辨率图像，然后将图像分组进行滑动窗口非邻域聚类，利用主成分分析将聚类后的图像进行降维，最后将每一维信息视为时间采样函数，在小波域进行软阈值降噪。实验表明，本算法可以有效的提高传统POCS算法的抗噪性能，提高分焦平面偏振探测系统的成像分辨率，和同类算法相比结构相似性系数提升0.02，峰值信噪比提升约1 dB，并且拥有更高的噪声鲁棒性。

Abstract

The imaging resolution of a polarization detection system in the focal plane is lower than the actual resolution of the detector owing to the influence of the detector structure. In this study， micro-scanning is used to obtain the micro-displacement frame sequence without changing the optical system structure， and an improved convex set projection （POCS） algorithm is proposed to improve the imaging resolution of the polarization imaging system. In the algorithm， the obtained polarization microscan image sequences were first separated through angle detection， and the same group of angle detection image sequences were used as the input. Second， displacement matching and convex set projection iteration were conducted to initially reconstruct high-resolution images. Thereafter， the images were grouped into sliding window non-neighborhood clustering， and the dimensionality of the clustered images was reduced through principal component analysis. Finally， each one-dimensional information was regarded as a time sampling function， and soft threshold denoising was conducted in the wavelet domain. Experiments demonstrate that this algorithm can effectively improve the anti-noise performance of the conventional POCS algorithm， improve the imaging resolution of the high-resolution focal plane polarization detection system， increase the structural similarity coefficient by 0.02， increase the peak signal-to-noise ratio by 1 dB compared with similar algorithms， and achieve higher noise robustness.

关键词

Keywords

references

张俊超，陈溅来，罗海波，等 . 基于张量非负稀疏分解的偏振图像插值算法［J］. 光学学报， 2021 ， 41 （ 14 ）： 1411001 . doi: 10.3788/aos202141.1411001 http://dx.doi.org/10.3788/aos202141.1411001

ZHANG J C ， CHEN J L ， LUO H B ， et al . Polarized image interpolation algorithm based on tensor nonnegative sparse decomposition ［J］. Acta Optica Sinica ， 2021 ， 41 （ 14 ）： 1411001 . （in Chinese） . doi: 10.3788/aos202141.1411001 http://dx.doi.org/10.3788/aos202141.1411001

朱福珍，刘越，黄鑫，等 . 改进的稀疏表示遥感图像超分辨重建［J］. 光学精密工程， 2019 ， 27 （ 3 ）： 718 - 725 . doi: 10.13482/j.issn1001-7011.2019.05.004 http://dx.doi.org/10.13482/j.issn1001-7011.2019.05.004

ZHU F Z ， LIU Y ， HUANG X ， et al . Remote sensing image super-resolution based on improved sparse representation ［J］. Opt. Precision Eng. ， 2019 ， 27 （ 3 ）： 718 - 725 . （in Chinese） . doi: 10.13482/j.issn1001-7011.2019.05.004 http://dx.doi.org/10.13482/j.issn1001-7011.2019.05.004

GAO S K ， GRUEV V . Bilinear and bicubic interpolation methods for division of focal plane polarimeters ［J］. Optics Express ， 2011 ， 19 （ 27 ）： 26161 . doi: 10.1364/oe.19.026161 http://dx.doi.org/10.1364/oe.19.026161

GAO S K ， GRUEV V . Gradient-based interpolation method for division-of-focal-plane polarimeters ［J］. Optics Express ， 2013 ， 21 （ 1 ）： 1137 . doi: 10.1364/oe.21.001137 http://dx.doi.org/10.1364/oe.21.001137

AHMED A ， ZHAO X J ， GRUEV V ， et al . Residual interpolation for division of focal plane polarization image sensors ［J］. Optics Express ， 2017 ， 25 （ 9 ）： 10651 . doi: 10.1364/oe.25.010651 http://dx.doi.org/10.1364/oe.25.010651

LI N ， ZHAO Y Q ， PAN Q ， et al . Demosaicking DoFP images using Newton’s polynomial interpolation and polarization difference model ［J］. Optics Express ， 2019 ， 27 （ 2 ）： 1376 . doi: 10.1364/oe.27.001376 http://dx.doi.org/10.1364/oe.27.001376

LIU S M ， CHEN J J ， XUN Y ， et al . A new polarization image demosaicking algorithm by exploiting inter-channel correlations with guided filtering ［J］. IEEE Transactions on Image Processing ， 2020 ， 29 ： 7076 - 7089 . doi: 10.1109/tip.2020.2998281 http://dx.doi.org/10.1109/tip.2020.2998281

ZHANG J C ， SHAO J B ， LUO H B ， et al . Learning a convolutional demosaicing network for microgrid polarimeter imagery ［J］. Optics Letters ， 2018 ， 43 （ 18 ）： 4534 - 4537 . doi: 10.1364/ol.43.004534 http://dx.doi.org/10.1364/ol.43.004534

ZENG X L ， LUO Y ， ZHAO X J ， et al . An end-to-end fully-convolutional neural network for division of focal plane sensors to reconstruct S 0 ， DoLP， and AoP ［J］. Optics Express ， 2019 ， 27 （ 6 ）： 8566 . doi: 10.1364/oe.27.008566 http://dx.doi.org/10.1364/oe.27.008566

HU H F ， LIN Y ， LI X B ， et al . IPLNet： a neural network for intensity-polarization imaging in low light ［J］. Optics Letters ， 2020 ， 45 （ 22 ）： 6162 - 6165 . doi: 10.1364/ol.409673 http://dx.doi.org/10.1364/ol.409673

SUN Y Y ， ZHANG J C ， LIANG R G . Color polarization demosaicking by a convolutional neural network ［J］. Optics Letters ， 2021 ， 46 （ 17 ）： 4338 . doi: 10.1364/ol.431919 http://dx.doi.org/10.1364/ol.431919

LIU X B ， LI X B ， CHEN S C . Enhanced polarization demosaicking network via a precise angle of polarization loss calculation method ［J］. Optics Letters ， 2022 ， 47 （ 5 ）： 1065 . doi: 10.1364/ol.451335 http://dx.doi.org/10.1364/ol.451335

XU G M ， WANG J ， ZHANG L ， et al . Multi-scale adaptive weighted network for polarization computational imaging super-resolution ［J］. Applied Physics B ， 2022 ， 128 （ 11 ）： 1 - 15 . doi: 10.1007/s00340-022-07900-0 http://dx.doi.org/10.1007/s00340-022-07900-0

XU M ， WANG C ， WANG K K ， et al . Polarization super-resolution imaging method based on deep compressed sensing ［J］. Sensors ， 2022 ， 22 （ 24 ）： 9676 . doi: 10.3390/s22249676 http://dx.doi.org/10.3390/s22249676

王杰，徐国明，马健，等 . 轻量级注意力级联网络的偏振计算成像超分辨率重建［J］. 光学精密工程， 2022 ， 30 （ 19 ）： 2404 - 2419 . doi: 10.37188/OPE.20223019.2404 http://dx.doi.org/10.37188/OPE.20223019.2404

WANG J ， XU G M ， MA J ， et al . Polarization computational imaging super-resolution reconstruction with lightweight attention cascading network ［J］. Opt. Precision Eng. ， 2022 ， 30 （ 19 ）： 2404 - 2419 . （in Chinese） . doi: 10.37188/OPE.20223019.2404 http://dx.doi.org/10.37188/OPE.20223019.2404

浦利，金伟其，刘玉树 . 基于后小波处理的超分辨力图像复原算法［J］. 红外与激光工程， 2008 ， 37 （ 1 ）： 173 - 176 . doi: 10.3969/j.issn.1007-2276.2008.01.040 http://dx.doi.org/10.3969/j.issn.1007-2276.2008.01.040

PU L ， JIN W Q ， LIU Y S . Super-resolution algorithm based on post wavelet treatment ［J］. Infrared and Laser Engineering ， 2008 ， 37 （ 1 ）： 173 - 176 . （in Chinese） . doi: 10.3969/j.issn.1007-2276.2008.01.040 http://dx.doi.org/10.3969/j.issn.1007-2276.2008.01.040

CHEN J ， WANG W G ， LIU T X ， et al . A POCS super resolution restoration algorithm based on BM3D ［J］. Scientific Reports ， 2017 ， 7 ： 15049 . doi: 10.1038/s41598-017-15273-0 http://dx.doi.org/10.1038/s41598-017-15273-0

ZHANG X F ， HUANG W ， XU M F ， et al . Super-resolution imaging for infrared micro-scanning optical system ［J］. Optics Express ， 2019 ， 27 （ 5 ）： 7719 . doi: 10.1364/oe.27.007719 http://dx.doi.org/10.1364/oe.27.007719

赵浩光，曲涵石，王鑫，等 . 高速微扫描图像超分辨重建［J］. 光学精密工程， 2021 ， 29 （ 10 ）： 2456 - 2464 . doi: 10.37188/OPE.20212910.2456 http://dx.doi.org/10.37188/OPE.20212910.2456

ZHAO H G ， QU H S ， WANG X ， et al . Super-resolution reconstruction of micro-scanning images ［J］. Opt. Precision Eng. ， 2021 ， 29 （ 10 ）： 2456 - 2464 . （in Chinese） . doi: 10.37188/OPE.20212910.2456 http://dx.doi.org/10.37188/OPE.20212910.2456

MILLER JL ， WILTSE JM . Benefits of microscan for staring infrared imagers ［C］. Infrared Imaging Systems ： Design， Analysis， Modeling， and Testing XV， SPIE ， 2004 ， 5407 ： 127 - 138 . doi: 10.1117/12.541432 http://dx.doi.org/10.1117/12.541432

SUBBARAO M ， CHOI TS ， NIKZAD A . Focusing techniques ［C］. Machine Vision Applications， Architectures， & Systems Integration. International Society for Optics and Photonics ， 1992 . doi: 10.1117/12.132073 http://dx.doi.org/10.1117/12.132073

曾燕来 . 基于小波变换语音去噪的研究及应用［D］. 西安：长安大学， 2016 .

ZENG Y L . Research and Application of Speech Denoising Based on Wavelet Transform ［D］. Xi'an ： Changan University ， 2016 . （in Chinese）

MORIMATSU M ， MONNO Y ， TANAKA M ， et al . Monochrome and color polarization demosaicking using edge-aware residual interpolation ［C］. 2020 IEEE International Conference on Image Processing （ICIP）. 2528，2020 ， Abu Dhabi， United Arab Emirates. IEEE ， 2020 ： 2571 - 2575 . doi: 10.1109/icip40778.2020.9191085 http://dx.doi.org/10.1109/icip40778.2020.9191085

张晓菲 . 红外成像系统及其超分辨率重建技术的研究［D］. 北京：中国科学院大学， 2019 .

ZHANG X F . Research on Infrared Imaging System and its Super-Resolution Reconstruction Technology ［D］. Beijing ： University of Chinese Academy of Sciences ， 2019 . （in Chinese）

LAPRAY P J ， GENDRE L ， FOULONNEAU A ， et al . Database of Polarimetric and Multispectral Images in the Visible and NIR Regions ［C］. SPIE Photonics Europe. Proc SPIE 10677 ， Unconventional Optical Imaging ， Strasbourg ， France . 2018 ， 10677 ： 666 - 679 . doi: 10.1117/12.2306244 http://dx.doi.org/10.1117/12.2306244

王贵全，徐志文，段永进，等 . 一种基于图像处理的红外微扫描器件测量与校准的方法［J］. 红外技术， 2022 ， 44 （ 9 ）： 964 - 971 . doi: 10.11846/j.issn.1001-8891.2022.9.hwjs202209010 http://dx.doi.org/10.11846/j.issn.1001-8891.2022.9.hwjs202209010

WANG G Q ， XU Z W ， DUAN Y J ， et al . An infrared micro scanner measurement and calibration method based on image processing ［J］. Infrared Technology ， 2022 ， 44 （ 9 ）： 964 - 971 . （in Chinese） . doi: 10.11846/j.issn.1001-8891.2022.9.hwjs202209010 http://dx.doi.org/10.11846/j.issn.1001-8891.2022.9.hwjs202209010

田晨，陈鹏，张晓杰，等 . 基于微扫描的红外偏振成像光学系统研制［J］. 光子学报， 2022 ， 51 （ 6 ）： 0622001 .

TIAN C ， CHEN P ， ZHANG X J ， et al . Manufacturing of infrared polarization imaging optical system based on micro-scanning ［J］. Acta Photonica Sinica ， 2022 ， 51 （ 6 ）： 0622001 . （in Chinese）

李晓莹，李慧敏，常洪龙，等 . 微机电系统光学组件的系统级建模［J］. 光学精密工程， 2012 ， 20 （ 5 ）： 1069 - 1075 . doi: 10.3788/ope.20122005.1069 http://dx.doi.org/10.3788/ope.20122005.1069

LI X Y ， LI H M ， CHANG H L ， et al . System-level modeling for MEMS optical components ［J］. Opt. Precision Eng. ， 2012 ， 20 （ 5 ）： 1069 - 1075 . （in Chinese） . doi: 10.3788/ope.20122005.1069 http://dx.doi.org/10.3788/ope.20122005.1069

Views

119

下载量

CSCD

Alert me when the article has been cited

提交

Tools

Publicity Resources

Analysis of the atmospheric multi-angle polarimetric radiometer for aerial remote sensing and its test experiments

Backscattering polarization characteristics of pulsed laser fuze with coaxial optical system in water fog

Effect of polarization, phase and amplitude on depletion focus spot in STED

Restraining speckle of laser imaging system in accurate measurement

Method for High Precision Alignment of Larger Aperture Optical System

Related Author

TI Rufang

ZHANG Aiwen

WU Yang

SONG Maoxin

SUN Xiaobing

CHEN Hui-min

LIU Xin-yang

WEI Tong-da

Related Institution

Hefei Institutes of Physical Science， Anhui Institute of Optics and Fine Mechanics， Chinese Academy of Sciences

Key Laboratory of Optical Calibration and Characterization， Chinese Academy of Sciences

Hefei Agricultural Industry Chief Expert Studio

Science and Technology on Electromechanical Dynamic Control Laboratory, Beijing Institute of Technology

State Key Laboratory of Explosion Science and Technology, Beijing Institute of Technology

AI问答

Address：No.3888 Dong Nanhu Road, Changchun, Jilin, China Postal code：130033
Tel：0431-86176855 Email：gxjmgc@ciomp.ac.cn
Technical support is provided by Beijing Founder electronics co., LTD 吉ICP备11002662号-17 京公网安备11010802024621
It is recommended to read the content of this site in Chrome&IE9+. Please switch to extreme mode in browser 360.
Cookies We use cookies to help provide and enhance our service and tailor content. By continuing, you agree to the use of cookies.

⁰