大数跨境

ACS Photonics:水下双目超构透镜

ACS Photonics:水下双目超构透镜 两江科技评论
2023-02-21
3
导读:香港城市大学电机工程系蔡定平教授课题组



欢迎课题组投递中文宣传稿,投稿方式见文末

撰稿|由课题组供稿

导读

近日,香港城市大学电机工程系蔡定平教授课题组在《ACS Photonics》期刊上发表了题为“Underwater Binocular Meta-lens”的文章(DOI: 10.1021/acsphotonics.2c01667)。该篇文章针对紧凑、小型化、便携、轻便和低能耗的需求,开发了一种新型水下双目深度传感和成像超构光学装置。该水下双目超构透镜视觉系统采用了独特设计和制造的GaN双目超构透镜,并实验展示了水下立体视觉和深度感应。

● 关键词:

水下成像,超构透镜,双目视觉,立体视觉,深度学习

研究背景

眼睛是大多数动物获取视觉信息的主要器官。在自然界中,很多种动物都有两只眼睛。众所周知,鹰的视力是出了名的,它的眼睛拥有动物界中最好的立体视觉。我们很多人都听过“鹰眼”这个词,用来称赞眼力敏锐的人。老鹰也是捕鱼高手。对于秃鹰来说,鱼类占全年饮食的70%左右。老鹰出色的立体视觉可以准确判断水下鱼群的深度。鹰眼的超立体感关键在于高度重叠的双眼视觉。当左眼和右眼同时观察时,大脑会获取图像的空间偏移量。这种偏移称为双眼视差。视差的大小与观察物体的深度密切相关。通过视差分析,老鹰可以建立对场景的三维感知。这样的双目立体视觉系统对水下机器视觉具有很大的参考价值。
传统的双目机器视觉系统由两个摄像头组成,需要复杂的矩阵运算来校准双摄像头系统。复杂的配置不仅导致体积庞大,最重要的是,在水下管道、自主微型潜艇和活体器官等空间有限且脆弱的全水生环境中,笨重而复杂的设备可能无法接近被测对象。在水生环境中,对用于水下成像和传感的小型化超构设备系统有着强烈的需求,特别是紧凑、多功能、耐用、便携、轻便等特点。这样的超构设备对环境管理、生物地球化学、浮游植物生态学、底栖过程、全球变化等水下光学科学具有重要意义。

研究亮点

本工作中每个超构透镜的直径为2.6mm,两个超构透镜中心之间的测量距离为4.04mm。该双目超构透镜的优点是摆脱了传统双相机立体视觉系统所必需的球差畸变校正和相机系统校准,使得系统操作简单流畅。同时基于实验结果,一套适用于全尺寸双目视觉系统的广义深度计算公式被提出。在深度学习的支持下,该立体视觉系统可以实现快速的水下物体深度和图像计算,以保证实时处理能力。人工智能成像结果表明,该系统深度测量精度能够达到50微米。我们首次实验量测到GaN超构透镜大于150度疏水角的超疏水性。因此除了平面超构光学元件的无像差优势外,纳米结构的GaN超构透镜的固有超疏水特性还可以实现抗粘附、耐污染和自清洁的新型水下成像设备。


图1.水下双目超构镜头视觉系统场景示意图。一对超构透镜制造在同一基板上并共享一个成像传感器。双目图像的视差可以反映成像场景的深度。


图2.双目超构透镜的光学和SEM图像以及放大图片。(a)在基板上制造的双目超构透镜的光学图像。(b)一个直径为2.6mm的双目超构透镜的光学照片。(c)放大的顶视图SEM图像。(d)超构透镜边缘的放大倾斜视图SEM图像。



图3.双目超构镜头立体视觉系统的性能分析。(a)双目超构透镜系统的照片。左下方的插图是内部结构草图。(b)超构透镜表面水滴接触角的照片。右上角的插图显示了水滴在基板表面上的接触角。(c)双目系统拍摄的带有水平(绿色)和垂直(红色)线的棋盘图片。(d)通过拍摄一个大的明亮物体,用形态分割注释定义成像范围。红色圆圈注释成像边界。蓝线穿过通过形态学分析获得的两个主点。(e)(d)中沿蓝线的强度分布。(f)带有测量数据的水下视差-深度函数曲线图。插图是测量差异的STD分布。


图4.水下深度感应结果。左栏是左超构镜头拍摄的原始图像。中间一栏是深度图。右栏是两个图像的集成。深度是从物体到双目超构透镜的距离。(a)一根管子的范围从7.8到16厘米,章鱼贴纸放置在12厘米的距离。(b)玩具鱼位于 15 厘米的距离处。(c) 三个玩具鱼分别位于 14.5、22和 28 厘米的距离处。

总结与展望  


在这项工作中,我们展示了一种基于新型双目GaN元透镜的光学水下立体视觉系统。我们的立体视觉系统比起商用双目相机镜头能更灵活地匹配各种科技应用场景。作为平面元光学器件,没有球面像差或图像失真。共享基板制造的设计消除了系统校准的繁琐先决条件。基于GaN的透镜元件在各种应用环境甚至极端条件下都很稳定。纳米结构GaN元透镜固有的超疏水特性带来了抗粘附、耐污染和自清洁等优点。同时我们开发了适用于全尺寸双目视觉系统的深度计算公式。我们的立体视觉系统可以在深度学习的支持下实现快速、智能的深度成像。非平面物体、单个物体和多物体的三维成像和深度传感在水下或空中成功实现。实验测量结果甚至达到了50微米的深度感应精度。这种立体视觉双目超构透镜将显着有益于水下微/纳米机器人、自主潜艇、海洋机器视觉、海洋生态调查等。

论文信息  

论文第一作者为香港城市大学博士生刘小源,论文通讯作者为香港城市大学助理教授陈沐谷,日本理化学研究所教授Takuo Tanaka,和香港城市大学讲座教授蔡定平。
香港城市大学电机工程系为论文第一完成单位。该研究得到中国香港特别行政区大学教育资助委员会/研究资助委员会(项目编号AoE/P-502/20和GRF项目15303521和11310522)、深圳市科技创新委员会(SGDX2019081623281169),广东省科学技术厅(2020B1515120073),香港城市大学(9380131)和JST CREST (JPMJCR1904)资助。

作者简介:


蔡定平教授,现任香港城市大学讲座教授。多年来致力于纳米光子学及光电物理领域前沿的理论与实验工作,积累了丰富的研究成果。在Science, Nature Nanotechnology, Nature Communications, Light: Science & Applications, Advanced Materials, Nano Energy, Nano Letters等国际期刊发表论文共351篇(SCI Citation > 19,772 次, SCI H-index 66; Google Scholar Citation > 25,898 次, Google Scholar Hindex 78)、专书(或专书节章)及会议论文共65篇、技术报告及其它论文共38篇、国内外(美国加拿大、日本及德国专利共45项(68个)。先后当选中国光学学会(COS)、美国物理学会(APS)、国际电子电机工程师学会(IEEE)、光学学会(Optica)、国际光电工程学会(SPIE)、电磁科学院(EMA)、美国科学促进会(AAAS)、日本应用物理学会(JSAP) 、和亚太人工智能学会(AAIA)的会士(Fellow)。也先后当选亚太材料科学院(APAM)院士、俄罗斯国际工程学院(IAE)院士和美国国家发明家科学院(NAI)院士。曾荣获四十多项荣誉与奖励,包括:2020年度和2018年度中国光学十大进展、2020年和2019年全球高被引科学家(Web of Science Group/ Clarivate Analytics)、2018年国际光电工程学会(SPIE)墨子奖,以及多届国际学术会议最佳论文奖。迄今在国际会议做316余次特邀报告,担任12个国际期刊的编辑委员或编辑,多项国际知名期刊的文章审稿人。


  •  论文信息:

Xiaoyuan Liu, Mu Ku Chen*, Cheng Hung Chu, Jingcheng Zhang, Borui Leng, Takeshi Yamaguchi, Takuo Tanaka*, and Din Ping Tsai*, “Underwater Binocular Meta-lens.” ACS Photonics 2023, doi.org/10.1021/acsphotonics.2c01667.

   

https://pubs.acs.org/doi/10.1021/acsphotonics.2c01667

免责声明:本文旨在传递更多科研资讯及分享,所有其他媒、网来源均注明出处,如涉及版权问题,请作者第一时间后台联系,我们将协调进行处理,所有来稿文责自负,两江仅作分享平台。转载请注明出处,如原创内容转载需授权,请联系下方微信号。

【声明】内容源于网络
0
0
两江科技评论
聚焦“光声力热”超构材料、凝聚态物理、生物医学、智能制造等领域,打造科研人便捷的交流平台,发布优质新鲜的科研资讯。
内容 6001
粉丝 0
两江科技评论 聚焦“光声力热”超构材料、凝聚态物理、生物医学、智能制造等领域,打造科研人便捷的交流平台,发布优质新鲜的科研资讯。
总阅读9.2k
粉丝0
内容6.0k