水下偏振成像技術《2》

2023年09月05日18:52:10 科學 1955

1. 水下光譜成像技術

光譜成像技術是一類將成像技術與光譜技術結合的多維信息獲取技術,通過成像光譜儀在電磁波譜的可見光、近紅外和紅外等波段區域獲取研究對象的多個二維空間圖像信息和一維光譜信息,構成三維數據立方體,經過處理能夠獲得目標物的空間、輻射、光譜信息。與幾何成像儀相比,光譜成像儀在獲得目標形態圖像的同時,還能夠得到空間可分辨單元的光譜特徵。


水下偏振成像技術《2》 - 天天要聞

光譜技術分為多光譜技術(Multispectral,MS)和高光譜技術(Hyperspectral,HS);其中多光譜技術在電磁波譜的紫外、可見光和近紅外部分使用10~20 個波段,光譜解析度大於5 nm。高光譜基於相同原理,使用數百個波段,比多光譜有更高的光譜解析度,可提供具有1 nm 光譜解析度的波長。雖然多光譜技術的光譜解析度不如高光譜技術,但多光譜技術有更高的空間解析度。

2017 年,CHENNU A 等開發了一種潛水員可操作的水下高光譜成像探測系統(HyperDiver)(圖26),使用彩色相機替換了原有的灰度相機,用於獲取海底生物及地形剖面的高解析度的彩色和高光譜圖像。

水下偏振成像技術《2》 - 天天要聞


水下偏振成像技術《2》 - 天天要聞

浙江大學魏賀等研製了一套基於輪轉濾光片的水下光譜成像系統,將31 個半高全寬為10 nm 的窄帶濾光片安裝在兩個濾光輪上,兩個濾光輪獨立運行,成像時,將不同濾光片切換到成像光路上,以實現不同波段的光譜圖像,如圖29(a)所示。通過使用基於色彩恢復的多尺度Retinex 圖像增強演算法對獲取的不同窄帶波段的圖像進行增強,最後進行彩色合成並計算信息熵,結果如圖29(b)所示,與空氣中的圖像對比結果表明,該方法可以明顯提高水下圖像的色彩還原效果。


水下偏振成像技術《2》 - 天天要聞

光譜成像獲取的數據立方體可通過與目標物體的先驗光譜信息進行匹配,對水下物體進行識別,或通過水體吸收、散射等光譜分辨特性變化對水體進行建模,探測成像距離。光譜成像獲取研究對象二維空間圖像信息和一維光譜信息,並依此來獲得目標物的空間、輻射、光譜特性,對目標進行識別分類等。

然而,要實現目標物的精確定位和分類識別,仍需要清晰的水下圖像,一般採用圖像融合方法,將獲取的具有高空間解析度的多光譜圖像(High-Resolution Multispectral,HRMS)和具有低空間解析度的高光譜圖像(Low-Resolution Hyperspectral,LRHS)進行融合,獲得既具有高光譜解析度又具有高空間解析度的圖像。

基於深度學習的融合方法利用神經網路在非線性關係表示和高層次圖像特徵提取的優勢,來簡化圖像融合過程,如CNN 無需單獨的圖像變換和融合規則即可進行圖像融合。


水下偏振成像技術《2》 - 天天要聞

2. 水下壓縮感知成像技術

與傳統的需要採樣率大於兩倍信號帶寬的奈奎斯特採樣定理不同,壓縮感知理論採樣速率僅由信息的結構和內容來決定,並且可在遠低於奈奎斯特採樣率的情況下,將信號的採樣過程和壓縮過程同步完成,在採樣的過程中即完成信號中所含信息的提取,包括信號的稀疏表示,測量矩陣構造和信號重構演算法三個部分。

在壓縮感知的應用層面,最受關注的是基於該理論的而研製的單像素成像系統(Single-PixelImaging,SPI),不同於使用數百萬個像素感測器的CCD 或CMOS 像素化感測器相機,該成像系統僅使用一個光子探測器對圖像進行少於像素點的測量,並恢復出原始圖像。2008 年,美國萊斯大學開發出世界上第一台單像素相機。

SPI 系統中,核心元件是用於調製圖像的空間光調製器數字微鏡陣列(DMD),不同的調製圖像影響著單像素成像的質量和效率。


水下偏振成像技術《2》 - 天天要聞


早期SPI 使用隨機圖案對照明光場進行強度調製,並將其與單像素相機獲取的探測值進行相關運算,重建出物體圖像。但這種方式需要進行遠多於重建圖像像素數的採樣次數,才可恢復出質量較好的圖像,若採樣次數較少,則恢復的圖像質量較差。近年來提出了確定掩膜的單像素成像技術,可解決恢復圖像質量差的問題,如離散餘弦變換單像素成像、小波變換單像素成像、Hadamard 單像素成像(Hadamard Single-PixelImaging,HSI)和傅里葉單像素成像(Fourier Single-PixelImaging,FSI),它們均採用完備的正交變換基底圖案進行空間光調製,可以很好地恢復物體圖像。

對比了CSSI,HSI 及FSI 在渾濁水體下的成像效果,結果表明HSI 在高混濁水體的解析度和抗干擾能力方面優於其他SPI 模式,最高可在90NTU 的情況下清晰觀測水下物體。

FSI 基於傅里葉分析理論,利用傅里葉基底圖案調製空間光場,根據單像素探測器獲取的光強值計算出物體圖像的傅里葉變換譜,最後通過逆傅里葉變換重構出物體圖像。FSI 在成像中有較多應用,但水下單像素傅里葉成像尚未得到深入研究,水體散射效應對水下FSI 成像質量的影響也較為缺乏。針對水體前向散射導致傳統SPI 散斑圖分布產生畸變的問題,提出基於水退化函數補償的水下FSI 系統,該系統根據測量到的目標空間譜位置設計正弦結構圖,並將其作為散斑圖照射目標,根據系統接收的的空間頻譜,擬合水降解函數,反求目標的真實空間頻譜分布,最後利用傅里葉反變換,重構出目標的圖 。水下FSI 相對傳統FSI 有更好的抗水體正向散射能力和較高的空間解析度

FSI 有較高的成像質量和成像效率,但FSI 在重建圖像時通常採用從低頻到高頻的採集策略,容易出現高頻細節丟失,圖像含有振鈴偽影(RingArtifact)等問題。此外SPI 存在測量時間與重建圖像質量之間的權衡問題,為了獲得完美重建需要重建圖像像素1.5~2 倍的測量次數,花費較多測量時間,若通過欠採樣的方式重建圖像,會導致圖像模糊和環形偽影,針對這些問題,傳統方法要做出實質性改進較為困難。

國防科技大學胡等人針對FSI 丟失高頻細節的問題,提出基於Wasserstein 生成對抗網路(WGAN)和梯度懲罰(GP)的快速圖像重建網路(GAN-FSI),在生成對抗網路的基礎上,連接額外的生成器以提高重建圖像的保真度,在低採樣率的情況下,GAN-FSI 仍能很好地恢復圖像,並保有相當細節。目前主流方法多採用深度學習直接對一維SPI 強度信號進行解析,重建圖像。但該方法從一維信號重建二維圖像是線性過程,採用神經網路容易出現過擬合現象,且神經網路存在的適應性和魯棒性問題也會對最終結果造成較大影響,此外深度學習方法還存在需要大量數據集,訓練時間長的問題。

科學分類資訊推薦

中國交付全球最大「人造太陽」重要部件 - 天天要聞

中國交付全球最大「人造太陽」重要部件

近日,全球最大「人造太陽」國際熱核聚變實驗堆(ITER)計劃磁體饋線採購包項目迎來關鍵節點,其最後一套校正場線圈內饋線部件在合肥竣工,並交付起運位於法國的ITER現場。這標誌著ITER磁體饋線系統中所有超大部件的研製順利完成。ITER磁體饋線系統由中國科學院合肥物質科學研究院等離子體物理研究所研製,被稱為ITER磁體系...
張振豐調研溫州學研究聯合會 構建中國學視野下的溫州學研究體系 - 天天要聞

張振豐調研溫州學研究聯合會 構建中國學視野下的溫州學研究體系

4月13日,副省長、市委書記張振豐在溫州學研究聯合會調研時強調,要深入學習貫徹習近平文化思想和習近平總書記考察浙江重要講話精神,堅持「立足溫州、研究溫州、服務溫州」,深化時間維度、放大空間維度,貫通歷史研究溫州、跳出溫州研究溫州,努力打造溫州建設高水平文化強市的重要窗口、具有全國影響力的地方學術研究的...
土撥鼠等動植物不得攜帶入境!關於國門生物安全,你要知道這些 - 天天要聞

土撥鼠等動植物不得攜帶入境!關於國門生物安全,你要知道這些

極目新聞記者 張秀娟通訊員 趙夢潔 黃曉彧 林敏「小朋友們,外來入侵物種包括哪些呢?」「在咱們出國旅遊前,需注意哪些問題呢?」4月12日,在第十個全民國家安全教育日來臨之際,武漢海關在武漢天河國際機場開展了一場別開生面的「海關開放日」活動。15名小學生化身「國門小衛士」,零距離體驗、參與海關全民國家安全教育...
月球上跳一跳,輕鬆打破跳高世界紀錄!這個展會,解密引力奧秘 - 天天要聞

月球上跳一跳,輕鬆打破跳高世界紀錄!這個展會,解密引力奧秘

頂端新聞記者 楊逍 文 時碩 圖如果你嚮往星辰宇宙,那你是否幻想過在其他星球上跳躍?在本次國防展的「星球重力」互動體驗機前,你每次的縱身一躍,都會化身成屏幕中身穿宇航員服的小人,來到月球、金星、火星、火衛二、土衛一等星體上,屏幕的上方記錄著你的跳躍高度。在月球,你輕輕一躍就能達到3米高度,輕鬆打破2.45米...
4月13日石家莊強風顯著增強的原因 - 天天要聞

4月13日石家莊強風顯著增強的原因

4月13日石家莊強風顯著增強的原因,是多重氣象條件和地理因素共同作用的結果。根據氣象監測和專家分析,此次強風具有以下關鍵成因:一、極端天氣系統的疊加效應1.
神十九乘組「太空出差」倒計時:各項空間科學實(試)驗穩步推進 - 天天要聞

神十九乘組「太空出差」倒計時:各項空間科學實(試)驗穩步推進

IT之家 4 月 13 日消息,據央視網報道,神舟十九號航天員乘組的「太空出差」之旅即將進入倒計時。上周,神十九乘組穩步推進各項空間科學實(試)驗,在開展站內環境監測、設備檢查維護等工作同時,積極開展健康維護。神十九乘組利用腦電設備開展了多項實驗的測試工作,地面科研人員將利用獲取的數據探究重力對視覺運動信息...
感受活力丨機器人正在進化中……這樣的「生活搭子」,你喜歡嗎? - 天天要聞

感受活力丨機器人正在進化中……這樣的「生活搭子」,你喜歡嗎?

模仿人類奔跑、跳躍、空翻,像人一樣說話、思考甚至察言觀色。這不是科幻電影對未來的虛構,而是2025中國機器人產業闊步向前的現實。小時候的你,是不是也曾暢想過:家裡有一個機器人,能買菜、做飯、鋪床、掃地,幫你干農活,還可以照顧家裡老人……時至今日,這些「天馬行空」的想像,正在變成現實。「12點了,您該吃藥了...