圖像融合深度學習 賦能智能視覺感知——《圖像融合的深度學習方法》正式出版

圖像融合，即整合多幅源圖像包含的重要/互補信息，生成單幅更加全面且準確描述場景內容的融合圖像，是視覺感知研究領域中一項至關重要的基礎工作，也為實現精準智能感知奠定了重要的基礎。圖像融合本質上是信息的篩選優化問題，源圖像對的復雜退化及視差、多類型圖像的顯著模態差異、融合目標的主觀性，通常造成融合圖像的信息量及圖像質量大幅下降，嚴重制約了其實際應用落地。因此，研究寬應用高效用的圖像融合算法具有重要的理論意義和實用價值。

學術價值

為解決圖像融合的深度學習方法中的主要技術難點， 本書對多模態圖像融合、數字攝影圖像融合、遙感圖像融合、通用圖像融合及兼顧圖像配準與高級語義的圖像融合等問題進行深入探討，介紹一系列基于深度學習的圖像融合方法，挖掘多種圖像融合任務的特點及共性，探索圖像融合技術在下游視覺任務中的重要作用，并從理論創新和實驗驗證上對所介紹方法進行充分的分析與性能評估。

章節簡介

第1 章首先對圖像融合問題進行描述和定義，依據成像設備的差異和任務特性介紹圖像融合的分類，并給出三類典型的基于深度學習的圖像融合框架。其次，對各類圖像融合任務中常用的數據集與評估指標進行詳細介紹，為后續的研究奠定基礎。

第2 章介紹兩種多模態圖像融合方法，包括基于生成對抗網絡的紅外和可見光圖像融合（FusionGAN）方法和基于無監督信息保留增強的醫學圖像融合（EMFusion）方法。

第3 章介紹數字攝影圖像融合方法，并針對多聚焦圖像融合、多曝光圖像融合任務分別介紹基于生成對抗網絡與自適應梯度聯合約束的多聚焦圖像融合（MFF-GAN）方法和基于本征圖像分解的多曝光圖像融合（IID-MEF）方法。

第4 章介紹遙感圖像融合方法，并從消除對參考圖像依賴、強化模型尺度泛化性兩個角度分別介紹基于生成對抗網絡的無監督多光譜與全色圖像融合（Pan-GAN）方法和基于尺度遷移學習與光譜觀測模型估計的多光譜與全色圖像融合（STP-SOM）方法。

第5 章介紹通用圖像融合的深度學習方法，分析和挖掘多模態、多曝光及多聚焦圖像融合等多種任務的共性，構建統一通用的融合框架甚至融合網絡。

第6章結合圖像融合技術在實際應用中面臨的挑戰，介紹兼顧圖像配準與高級語義的圖像融合新范式。

本書特點

本書以深度學習為主線，系統構建了圖像融合領域的完整方法論體系。其核心特點在于全面覆蓋與前沿深度結合，不僅系統闡述了多模態、數字攝影、遙感及通用圖像融合等關鍵方向，更聚焦于解決實際應用中的核心痛點——如模型泛化能力、對參考數據的依賴、與配準和高級視覺任務的協同等。全書通過引入生成對抗網絡、Transformer、無監督學習等一系列前沿技術，提出了多個創新性融合框架，并從理論創新與實驗驗證兩個維度進行嚴謹闡述，結構清晰，兼具理論深度與實踐指導價值，為領域研究者與工程師提供了重要的技術參考和發展思路。

左右滑動查看全書目錄

ISBN：978-7-03-078422-3

本文編輯：杜權

地球為你而轉！

歡迎關注：賽杰奧（sci_geo）

科學出版社地球科學訂閱號

傳播科學，歡迎您點亮★星標

文末分享、點贊、在看