フーリエ畳み込みとチャネル注意機構を組み合わせた光場角度再構築

ZHOU Tao ,  

YU Mei ,  

CHEN Yeyao ,  

JIANG Zhidi ,  

JIANG Gangyi ,  

摘要

ライトフィールドカメラは光の強度と方向情報を同時に捉えることができますが、撮像センサーのサイズ制限により、高空間解像度と高角度解像度の光場画像を同時に取得することはできません。本研究では、フーリエ畳み込みとチャネル注意機構を組み合わせた光場角度再構築法を提案します。本手法は、疎な光場画像の4つの隅に位置する参照視点を利用して密な光場画像を間接的に再構築できます。光場データの内在する4次元構造を考慮し、チャネルレベルの密な高速フーリエ残差畳み込みブロックを用いて空間領域および周波数領域で光場画像の空間的・角度的相関をモデル化し、その後全局応答正規化に基づくチャネル注意ブロックを適用してチャネル間の適応的融合を実現しました。さらに、各参照視点に信頼度マップを割り当て、参照視点間の関係を構築してよりリアルな新しい視点を合成する改良型視点加重間接合成手法も提案します。実験結果は、既存の先進的な光場角度再構築アルゴリズムIRVAEと比較して、自然光場データセット30Scenes、Occlusion、Reflectiveにおける本手法の再構築光場画像品質がそれぞれ平均PSNRで0.08、0.13、0.13 dB向上したことを示しています。本手法は光場角度の一貫性を保ちながら鮮明な再構築結果を達成しました。

关键词

光場角度再構築; フーリエ畳み込み; 全局応答正規化; 視点加重間接合成

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website