传统图像传感器仅仅测量光的强度，但是机器视觉的进步还需要提取光的入射角度、光谱和相位等信息。
传统图像传感器（左）和多模态图像传感器（右）
据麦姆斯咨询报道，近期，美国威斯康星大学麦迪逊分校（University of Wisconsin–Madison）、圣路易斯华盛顿大学（Washington University in St. Louis）和豪威科技（OmniVision）的研究人员介绍了可集成在图像传感器芯片上的最新纳米结构组件，这些组件“最有可能对多模态成像产生很大的影响”。这项研究以“Multimodal light-sensing pixel arrays”为题发表于《应用物理快报》（Applied Physics Letters）。
合作伙伴表示，纳米结构组件的研究进展“可以使自动驾驶汽车看到拐角处状况，而不仅仅是直线视觉，也可以让生物医学成像检测不同组织深度的异常，甚至能让望远镜看到星际尘埃。”
“人工眼（Artificial eyes）”
威斯康星大学麦迪逊分校的论文合著者Yurui Qu说：“图像传感器将逐渐转变为机器的理想人工眼。通过现有图像传感器的卓越进化可能会产生更直接的影响。”
将光信号转换为电信号的图像传感器由单颗芯片上的数百万/数千万像素组成。开发人员面临的挑战是如何将多功能组件作为传感器的一部分进行集成化和小型化。
在论文中，研究人员详细介绍了一种通过制造“片上光谱仪（on-chip spectrometer）”来检测多波段光谱的有前途的方法。他们将硅光子晶体滤光片薄膜直接沉积在图像传感器像素顶部，以在入射光与传感器之间产生复杂的相互作用。
滤光片薄膜下方的传感器像素记录了光能的分布，从中可以推断出光谱信息。该器件尺寸面积小于6平方毫米，可以通过编程方式以满足各种动态范围、分辨率水平以及从可见光到红外光的光谱范围。
研究人员还介绍了构建可以检测光入射角度的纳米结构组件，以探测深度信息并在亚细胞尺度上构建3D形状。该工作灵感来自于壁虎等动物身上发现的定向听觉传感器，例如壁虎的头部太小而无法确定声音的来源，但他们使用“耦合耳膜”来测量声音的方向，其尺寸比相应的声波波长小几个数量级。
类似地，耦合的硅纳米线被构造为谐振器以实现光学谐振。存储在两个谐振器中的光能对入射角很敏感。离光最近的纳米线产生强电流，而另一条纳米线产生弱电流。通过比较来自两条纳米线的强电流和弱电流，就可以确定入射光的角度。
由两条耦合的硅纳米线组成的角度传感像素
数以百万计的这些纳米线可以集成于一个1平方毫米的芯片。研究人员表示，他们的研究工作可以支持各种视觉应用的进步，例如无镜头相机、增强现实（AR）和机器人视觉。
论文信息：
https://aip.scitation.org/doi/10.1063/5.0090138
延伸阅读：
《光学和射频领域的超构材料和超构表面-2022版》
《汽车激光雷达（LiDAR）专利全景分析-2022版》
《小型、微型和芯片级光谱仪技术及市场-2020版》
《新兴图像传感器技术、应用及市场-2021版》
