计算光学成像:突破传统光学成像极限

MEMS 2023-01-21 00:00

概要

计算光学成像是一个新兴多学科交叉领域。它以具体应用任务为准则,通过多维度获取或编码光场信息(如角度、偏振、相位等),为传感器设计远超人眼的感知新范式;同时,结合数学和信号处理知识,深度挖掘光场信息,突破传统光学成像极限。目前,计算光学成像处于高速发展阶段,已取得许多令人振奋的研究成果,并在手机摄像、医疗、无人驾驶等领域开始规模化应用。未来,计算光学成像有望进一步颠覆传统成像体系,带来更具创造力和想象力的应用,如无透镜成像、非视域成像等。

趋势解读

传统光学成像建立在几何光学基础上,借鉴人眼视觉“所见即所得”的原理,而忽略了诸多光学高维信息。当前传统光学成像在硬件功能、成像性能方面接近物理极限,在众多领域已无法满足应用需求。例如 ,在手机摄影领域,无法在保证成像效果的同时缩小器件重量和体积,出现令人诟病的“前刘海”和“后浴霸”的情况;在显微成像领域,无法同时满足宽视场和高分辨率的需求;在监控遥感领域,难以在光线较暗、能见度较低的复杂环境中获得清晰图像。

随着传感器、云计算、人工智能等新一代信息技术的不断演进,新型解决方案逐步浮出水面——计算光学成像。计算光学成像以具体应用任务为准则,通过多维度获取或编码光场信息(如角度、偏振、相位等),为传感器设计远超人眼的感知新范式;同时,结合数学和信号处理知识,深度挖掘光场信息,突破传统光学成像极限(如图1所示)。


图1 传统光学成像(左)和计算光学成像(右)

计算光学成像是一个新兴多学科交叉领域,早期概念在上个世纪70年代中期才逐步形成。随着信息技术的蓬勃发展,计算光学成像已成为国际研究热点。由于计算光学成像研究内容覆盖范围广,目前还没有一个比较明确的分类方法。按照计算成像技术所解决的应用问题来分类,可以大致分为以下三类:(1)功能提升:对传统方式无法获取的光学信息,如光场、偏振、相干度等进行成像或测量;(2)性能提升:即提升现有成像技术的性能指标,如空间分辨率、时间分辨率、景深、复杂环境鲁棒性等;(3)简化与智能化:通过单像素、无透镜等特定技术简化成像系统,或者以光速实现特定人工智能任务(如图2所示)。


图2 计算光学成像技术分类

计算光学成像技术现处于高速发展阶段,还需克服诸多挑战:首先,需以传感器为中心重新设计光学系统;其次,由于需要获取多维度光学信息,需引入新型光学器件和光场调控机制,随之而来的是更多的硬件成本和研发/调试时间成本;再次,为了使计算成像硬件和软件有更好的协同,则需重新开发算法工具;最后,对算力要求非常高,对应用设备芯片及其适配性提出更高要求。

计算光学成像虽然是一个新兴技术,但已取得了很多令人振奋的研究成果(2014诺贝尔奖——超分辨荧光显微成像、2017年诺贝尔奖——冷冻电镜),并在手机摄像、医疗、监控、工业检测、无人驾驶等领域开始规模化应用。如在手机摄像领域,主流手机厂商均初步融入了计算光学成像思路,从比拼硬件光学,转而追求硬件加算法的协同;目前手机摄像在相当一部分场景的拍摄效果达到、甚至超过一般单反相机。

未来,计算光学成像将进一步颠覆传统成像体系,带来更具创造力和想象力的应用。元成像芯片可实现大范围无像差三维感知,有望彻底解决手机后置摄像头突出的问题。无透镜成像(FlatCam)能够简化传统基于透镜的相机成像系统,进一步减小成像系统体积并有望用于各类可穿戴设备。此外,利用偏振成像技术能够透过可见度不高的介质清晰成像,实现穿云透雾。还有非视域成像,能够通过记录并解析光传播的高速过程来对非视域下目标进行有效探测,实现隔墙而视,在反恐侦察、医疗检测等领域具有广泛的应用价值。

专家点评

在过去的十多年来,信息技术的高速发展为光学成像注入了新的生命,计算成像应运而生,悄无声息中颠覆了人类与机器感知世界的方式。从“所见即所得”的一一映射到对高维光场的耦合编码与计算重构,计算成像将光作为信息载体的一部分,模糊了物理世界与数字世界的边界,从而突破了物理约束,见所未见。从此,我们能够捕捉光传播的轨迹,看到千里之外的声音,解析生命活动的奥秘,穿云透雾,洞察秋毫。从毫厘微末间的细胞病毒,到广袤宇宙中的第一缕光,计算成像将不断开拓人类的认知边界;从无人系统手机摄影,到工业监测安防监控,计算成像将融入人们生活的方方面面,推动数字经济高速发展。

(摘自:达摩院2023十大科技趋势)

延伸阅读:
《光学和射频应用的超构材料-2022版》
《光学和射频领域的超构材料和超构表面-2022版》
《AR/VR/MR光学元件技术及市场-2022版》

MEMS 中国首家MEMS咨询服务平台——麦姆斯咨询(MEMS Consulting)
评论 (0)
  • 后摄像头是长这个样子,如下图。5孔(D-,D+,5V,12V,GND),说的是连接线的个数,如下图。4LED,+12V驱动4颗LED灯珠,给摄像头补光用的,如下图。打开后盖,发现里面有透明白胶(防水)和白色硬胶(固定),用合适的工具,清理其中的胶状物。BOT层,AN3860,Panasonic Semiconductor (松下电器)制造的,Cylinder Motor Driver IC for Video Camera,如下图。TOP层,感光芯片和广角聚焦镜头组合,如下图。感光芯片,看着是玻
    liweicheng 2025-05-07 23:55 256浏览
  • 文/郭楚妤编辑/cc孙聪颖‍相较于一众措辞谨慎、毫无掌舵者个人风格的上市公司财报,利亚德的财报显得尤为另类。利亚德光电集团成立于1995年,是一家以LED显示、液晶显示产品设计、生产、销售及服务为主业的高新技术企业。自2016年年报起,无论业绩优劣,董事长李军每年都会在财报末尾附上一首七言打油诗,抒发其对公司当年业绩的感悟。从“三年翻番顺大势”“智能显示我第一”“披荆斩棘幸从容”等词句中,不难窥见李军的雄心壮志。2012年,利亚德(300296.SZ)在深交所创业板上市。成立以来,该公司在细分领
    华尔街科技眼 2025-05-07 19:25 334浏览
  • 随着智能驾驶时代到来,汽车正转变为移动计算平台。车载AI技术对存储器提出新挑战:既要高性能,又需低功耗和车规级可靠性。贞光科技代理的紫光国芯车规级LPDDR4存储器,以其卓越性能成为国产芯片产业链中的关键一环,为智能汽车提供坚实的"记忆力"支持。作为官方授权代理商,贞光科技通过专业技术团队和完善供应链,让这款国产存储器更好地服务国内汽车厂商。本文将探讨车载AI算力需求现状及贞光科技如何通过紫光国芯LPDDR4产品满足市场需求。 车载AI算力需求激增的背景与挑战智能驾驶推动算力需求爆发式
    贞光科技 2025-05-07 16:54 184浏览
  • 飞凌嵌入式作为龙芯合作伙伴,隆重推出FET-2K0300i-S全国产自主可控工业级核心板!FET-2K0300i-S核心板基于龙芯2K0300i工业级处理器开发设计,集成1个64位LA264处理器,主频1GHz,提供高效的计算能力;支持硬件ECC;2K0300i还具备丰富的连接接口USB、SDIO、UART、SPI、CAN-FD、Ethernet、ADC等一应俱全,龙芯2K0300i支持四路CAN-FD接口,具备良好的可靠性、实时性和灵活性,可满足用户多路CAN需求。除性价比超高的国产处理器外,
    飞凌嵌入式 2025-05-07 11:54 62浏览
  • Matter协议是一个由Amazon Alexa、Apple HomeKit、Google Home和Samsung SmartThings等全球科技巨头与CSA联盟共同制定的开放性标准,它就像一份“共生契约”,能让原本相互独立的家居生态在应用层上握手共存,同时它并非另起炉灶,而是以IP(互联网协议)为基础框架,将不同通信协议下的家居设备统一到同一套“语义规则”之下。作为应用层上的互通标准,Matter协议正在重新定义智能家居行业的运行逻辑,它不仅能向下屏蔽家居设备制造商的生态和系统,让设备、平
    华普微HOPERF 2025-05-08 11:40 240浏览
  • 硅二极管温度传感器是一种基于硅半导体材料特性的测温装置,其核心原理是利用硅二极管的电学参数(如正向压降或电阻)随温度变化的特性实现温度检测。以下是其工作原理、技术特点及典型应用:一、工作原理1、‌PN结温度特性‌硅二极管由PN结构成,当温度变化时,其正向电压 VF与温度呈线性负相关关系。例如,温度每升高1℃,VF约下降2 mV。2、‌电压—温度关系‌通过jing确测量正向电压的微小变化,可推算出环境温度值。部分型号(如SI410)在宽温域内(如1.4 K至475 K)仍能保持高线性度。
    锦正茂科技 2025-05-09 13:52 95浏览
  • UNISOC Miracle Gaming奇迹手游引擎亮点:• 高帧稳帧:支持《王者荣耀》等主流手游90帧高画质模式,连续丢帧率最高降低85%;• 丝滑操控:游戏冷启动速度提升50%,《和平精英》开镜开枪操作延迟降低80%;• 极速网络:专属游戏网络引擎,使《王者荣耀》平均延迟降低80%;• 智感语音:与腾讯GVoice联合,弱网环境仍能保持清晰通话;• 超高画质:游戏画质增强、超级HDR画质、游戏超分技术,优化游戏视效。全球手游市场规模日益壮大,游戏玩家对极致体验的追求愈发苛刻。紫光展锐全新U
    紫光展锐 2025-05-07 17:07 268浏览
  • 这款无线入耳式蓝牙耳机是长这个样子的,如下图。侧面特写,如下图。充电接口来个特写,用的是卡座卡在PCB板子上的,上下夹紧PCB的正负极,如下图。撬开耳机喇叭盖子,如下图。精致的喇叭(HY),如下图。喇叭是由电学产生声学的,具体结构如下图。电池包(AFS 451012  21 12),用黄色耐高温胶带进行包裹(安规需求),加强隔离绝缘的,如下图。451012是电池包的型号,聚合物锂电池+3.7V 35mAh,详细如下图。电路板是怎么拿出来的呢,剪断喇叭和电池包的连接线,底部抽出PCB板子
    liweicheng 2025-05-06 22:58 490浏览
  • 温度传感器的工作原理依据其类型可分为以下几种主要形式:一、热电阻温度传感器利用金属或半导体材料的电阻值随温度变化的特性实现测温:l ‌金属热电阻‌(如铂电阻 Pt100、Pt1000):高温下电阻值呈线性增长,稳定性高,适用于工业精密测温。l ‌热敏电阻‌(NTC/PTC):NTC 热敏电阻阻值随温度升高而下降,PTC 则相反;灵敏度高但线性范围较窄,常用于电子设备温控。二、热电偶传感器基于‌塞贝克效应‌(Seebeck effect):两种不同
    锦正茂科技 2025-05-09 13:31 88浏览
  • 二位半 5线数码管的驱动方法这个2位半的7段数码管只用5个管脚驱动。如果用常规的7段+共阳/阴则需要用10个管脚。如果把每个段看成独立的灯。5个管脚来点亮,任选其中一个作为COM端时,另外4条线可以单独各控制一个灯。所以实际上最多能驱动5*4 = 20个段。但是这里会有一个小问题。如果想点亮B1,可以让第3条线(P3)置高,P4 置低,其它阳极连P3的灯对应阴极P2 P1都应置高,此时会发现C1也会点亮。实际操作时,可以把COM端线P3设置为PP输出,其它线为OD输出。就可以单独控制了。实际的驱
    southcreek 2025-05-07 15:06 375浏览
我要评论
0
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦