水下偏振成像技术《2》

2023年09月05日18:52:10 科学 1955

1. 水下光谱成像技术

光谱成像技术是一类将成像技术与光谱技术结合的多维信息获取技术,通过成像光谱仪在电磁波谱的可见光、近红外和红外等波段区域获取研究对象的多个二维空间图像信息和一维光谱信息,构成三维数据立方体,经过处理能够获得目标物的空间、辐射、光谱信息。与几何成像仪相比,光谱成像仪在获得目标形态图像的同时,还能够得到空间可分辨单元的光谱特征。


水下偏振成像技术《2》 - 天天要闻

光谱技术分为多光谱技术(Multispectral,MS)和高光谱技术(Hyperspectral,HS);其中多光谱技术在电磁波谱的紫外、可见光和近红外部分使用10~20 个波段,光谱分辨率大于5 nm。高光谱基于相同原理,使用数百个波段,比多光谱有更高的光谱分辨率,可提供具有1 nm 光谱分辨率的波长。虽然多光谱技术的光谱分辨率不如高光谱技术,但多光谱技术有更高的空间分辨率。

2017 年,CHENNU A 等开发了一种潜水员可操作的水下高光谱成像探测系统(HyperDiver)(图26),使用彩色相机替换了原有的灰度相机,用于获取海底生物及地形剖面的高分辨率的彩色和高光谱图像。

水下偏振成像技术《2》 - 天天要闻


水下偏振成像技术《2》 - 天天要闻

浙江大学魏贺等研制了一套基于轮转滤光片的水下光谱成像系统,将31 个半高全宽为10 nm 的窄带滤光片安装在两个滤光轮上,两个滤光轮独立运行,成像时,将不同滤光片切换到成像光路上,以实现不同波段的光谱图像,如图29(a)所示。通过使用基于色彩恢复的多尺度Retinex 图像增强算法对获取的不同窄带波段的图像进行增强,最后进行彩色合成并计算信息熵,结果如图29(b)所示,与空气中的图像对比结果表明,该方法可以明显提高水下图像的色彩还原效果。


水下偏振成像技术《2》 - 天天要闻

光谱成像获取的数据立方体可通过与目标物体的先验光谱信息进行匹配,对水下物体进行识别,或通过水体吸收、散射等光谱分辨特性变化对水体进行建模,探测成像距离。光谱成像获取研究对象二维空间图像信息和一维光谱信息,并依此来获得目标物的空间、辐射、光谱特性,对目标进行识别分类等。

然而,要实现目标物的精确定位和分类识别,仍需要清晰的水下图像,一般采用图像融合方法,将获取的具有高空间分辨率的多光谱图像(High-Resolution Multispectral,HRMS)和具有低空间分辨率的高光谱图像(Low-Resolution Hyperspectral,LRHS)进行融合,获得既具有高光谱分辨率又具有高空间分辨率的图像。

基于深度学习的融合方法利用神经网络在非线性关系表示和高层次图像特征提取的优势,来简化图像融合过程,如CNN 无需单独的图像变换和融合规则即可进行图像融合。


水下偏振成像技术《2》 - 天天要闻

2. 水下压缩感知成像技术

与传统的需要采样率大于两倍信号带宽的奈奎斯特采样定理不同,压缩感知理论采样速率仅由信息的结构和内容来决定,并且可在远低于奈奎斯特采样率的情况下,将信号的采样过程和压缩过程同步完成,在采样的过程中即完成信号中所含信息的提取,包括信号的稀疏表示,测量矩阵构造和信号重构算法三个部分。

在压缩感知的应用层面,最受关注的是基于该理论的而研制的单像素成像系统(Single-PixelImaging,SPI),不同于使用数百万个像素传感器的CCD 或CMOS 像素化传感器相机,该成像系统仅使用一个光子探测器对图像进行少于像素点的测量,并恢复出原始图像。2008 年,美国莱斯大学开发出世界上第一台单像素相机。

SPI 系统中,核心元件是用于调制图像的空间光调制器数字微镜阵列(DMD),不同的调制图像影响着单像素成像的质量和效率。


水下偏振成像技术《2》 - 天天要闻


早期SPI 使用随机图案对照明光场进行强度调制,并将其与单像素相机获取的探测值进行相关运算,重建出物体图像。但这种方式需要进行远多于重建图像像素数的采样次数,才可恢复出质量较好的图像,若采样次数较少,则恢复的图像质量较差。近年来提出了确定掩膜的单像素成像技术,可解决恢复图像质量差的问题,如离散余弦变换单像素成像、小波变换单像素成像、Hadamard 单像素成像(Hadamard Single-PixelImaging,HSI)和傅里叶单像素成像(Fourier Single-PixelImaging,FSI),它们均采用完备的正交变换基底图案进行空间光调制,可以很好地恢复物体图像。

对比了CSSI,HSI 及FSI 在浑浊水体下的成像效果,结果表明HSI 在高混浊水体的分辨率和抗干扰能力方面优于其他SPI 模式,最高可在90NTU 的情况下清晰观测水下物体。

FSI 基于傅里叶分析理论,利用傅里叶基底图案调制空间光场,根据单像素探测器获取的光强值计算出物体图像的傅里叶变换谱,最后通过逆傅里叶变换重构出物体图像。FSI 在成像中有较多应用,但水下单像素傅里叶成像尚未得到深入研究,水体散射效应对水下FSI 成像质量的影响也较为缺乏。针对水体前向散射导致传统SPI 散斑图分布产生畸变的问题,提出基于水退化函数补偿的水下FSI 系统,该系统根据测量到的目标空间谱位置设计正弦结构图,并将其作为散斑图照射目标,根据系统接收的的空间频谱,拟合水降解函数,反求目标的真实空间频谱分布,最后利用傅里叶反变换,重构出目标的图 。水下FSI 相对传统FSI 有更好的抗水体正向散射能力和较高的空间分辨率

FSI 有较高的成像质量和成像效率,但FSI 在重建图像时通常采用从低频到高频的采集策略,容易出现高频细节丢失,图像含有振铃伪影(RingArtifact)等问题。此外SPI 存在测量时间与重建图像质量之间的权衡问题,为了获得完美重建需要重建图像像素1.5~2 倍的测量次数,花费较多测量时间,若通过欠采样的方式重建图像,会导致图像模糊和环形伪影,针对这些问题,传统方法要做出实质性改进较为困难。

国防科技大学胡等人针对FSI 丢失高频细节的问题,提出基于Wasserstein 生成对抗网络(WGAN)和梯度惩罚(GP)的快速图像重建网络(GAN-FSI),在生成对抗网络的基础上,连接额外的生成器以提高重建图像的保真度,在低采样率的情况下,GAN-FSI 仍能很好地恢复图像,并保有相当细节。目前主流方法多采用深度学习直接对一维SPI 强度信号进行解析,重建图像。但该方法从一维信号重建二维图像是线性过程,采用神经网络容易出现过拟合现象,且神经网络存在的适应性和鲁棒性问题也会对最终结果造成较大影响,此外深度学习方法还存在需要大量数据集,训练时间长的问题。

科学分类资讯推荐

新国标落地 女性健康被阳光照见丨中听 - 天天要闻

新国标落地 女性健康被阳光照见丨中听

评论员 王晓娜7月1日,一项关乎所有女性(和部分男性)日常生活的强制性国标正式落地!《一次性使用卫生用品卫生要求》不仅把卫生巾、护垫、成人纸尿裤等产品划进“重点监管区”,还新增了pH值、荧光剂检测等硬核指标。简单来说,以后厂家再想用“毒卫生
生态头条 | 四川贡嘎山国家级自然保护区发现物种新记录 - 天天要闻

生态头条 | 四川贡嘎山国家级自然保护区发现物种新记录

记者7月2日从四川贡嘎山国家级自然保护区管理局获悉,该局与中国科学院植物研究所联合组织的贡嘎山植物多样性综合科学考察活动顺利收官。科考团队在此次野外调查中,发现大量国家重点保护物种及珍稀濒危植物,也收获了多项物种新记录,为保护区生态保护与科
用TEM您能看到什么? - 天天要闻

用TEM您能看到什么?

透射电子显微镜(Transmission Electron Microscope, TEM)是一种功能强大的分析工具,利用高能电子束穿透超薄样品,通过收集透射电子和相互作用产生的信号,能获得极其丰富的信息,分辨率可达原子级别(亚埃级)。
低烟无卤光缆 - 天天要闻

低烟无卤光缆

低烟无卤光缆(Low Smoke Zero Halogen, LSZH Optical Fiber Cable)是一种采用环保材料制造的光缆,其核心优势在于燃烧时释放的烟雾极少且不含卤素(如氯、溴等),从而显著降低火灾风险,保护人员安全和设
从治疗神经疾病到增强人类智能 马斯克脑机接口科幻式蓝图,现实吗? - 天天要闻

从治疗神经疾病到增强人类智能 马斯克脑机接口科幻式蓝图,现实吗?

Neuralink脑机接口的目标是实现全脑接口,打造生物大脑与外部机器之间的“高带宽连接”,甚至让人类与AI集成。图片来源:美国纽约城市大学官网埃隆·马斯克的Neuralink公司在最新一次发布会上展示了其脑机接口(BCI)研究成果和发展愿景。此次令人瞩目的不仅是他们的现阶段成就,还包括其未来3年的科幻式蓝图。人们惊呼BCI...
超千岁荔枝树再结硕果!迄今有1024岁,是广州目前树龄最老的荔枝树 - 天天要闻

超千岁荔枝树再结硕果!迄今有1024岁,是广州目前树龄最老的荔枝树

文/图 羊城晚报记者 卢佳圳 通讯员 冯冬枚在广州黄埔玉岩书院,有一棵千年古荔,是广州目前有记载的树龄最老的荔枝树,为一级古树,据估测迄今有1024岁。7月2日,羊城晚报记者走访时惊奇发现,虽已经历千年沧桑,这棵荔枝树依旧枝繁叶茂,时隔4年再度结满硕果。据史料记载,这是一棵“宋荔”,从北宋即已存在。明代时,荔树...
天赐材料起诉永太科技 液体锂盐“商业秘密连环案”揭秘 - 天天要闻

天赐材料起诉永太科技 液体锂盐“商业秘密连环案”揭秘

财联社7月2日讯(记者 曾楚楚 王平安)【引子】今日盘后,天赐材料(002709.SZ)公告,就“商业秘密侵权案件”民事起诉永太科技(002326.SZ)等。这是自今年2月初,天赐材料首次公告披露,对浙江研一、永太科技“将另案处理”后,天赐方面就液体锂盐“商业秘密”系列案件的再次公开曝光。在两家百亿级上市公司,以及作为锂业“...
晶圆键合工艺及键合设备市场情况 - 天天要闻

晶圆键合工艺及键合设备市场情况

一、晶圆键合发展背景在摩尔定律的引导下,集成电路行业一直高速发展,晶体管特征尺寸己经从90nm向7nm迈进。然而,由于随着晶体管特征尺寸已日益接近物理极限,量子效应和短沟道效应越来越严重,内部电子自发地通过源极和漏极,导致漏电流增加,进而限