尽管智能手机摄像头的图像处理算法很复杂,可它们的自动白平衡(AWB)算法在某些情况下可能会完全失效。本文讨论了白平衡技术的有效性,以及如何使用高精度颜色传感器辅助智能手机摄像头AWB算法,进而提升图像质量。

我们的视觉系统会根据光谱内容调整长、中、短视锥细胞的相对响应。人眼具有一种色度适应机制,可以理解不同的环境光条件。这种反应机制让我们在不同的环境光条件下,将白色和灰色的物体仍看成是白色和灰色。图5描述了这种色度适应原则采用的光增益调整。

20191125-007.jpg
图 5:色度适应

然而,摄像头的图像处理AWB算法无法像人眼那样测量物体表面与不断变化的照明条件之间的动态关系。这些算法缺乏色度适应能力,无法了解不同的环境光条件并作出反应,将不同环境下的白色和灰色的物体仍看成是白色和灰色。

图6显示了XYZ颜色传感器及其光谱功率分布(SPD)响应。

20191125-008.jpg
图 6:TCS3430的XYZ光谱功率分布(SPD)响应

XYZ光谱响应以人眼为基础,因此能够更加准确地提供与人类如何感知颜色有关的信息。虽然有一些将RGB值转换为XYZ的方法,但RGB光谱响应函数并非切实的颜色匹配函数,因此转换后的结果与人眼感知颜色的方式并不完全匹配。通过准确匹配人眼的颜色响应,分析XYZ传感器的数据也可以像人眼一样来检测颜色的差异。使用高精度XYZ颜色传感器(输出入射光的CIE XYZ三色刺激值),能够在测量环境照明条件时提供最好的测量结果。

图7显示了普朗克轨迹:CIE色度图中间的实心曲线。

20191125-009.jpg
图 7:CIE1931色彩空间色度图 – 显示普朗克轨迹

轨迹上的每个点都对应一个黑体色温,具有对应的CCT值。

使用XYZ颜色传感器改善摄像头AWB增强效果

配备均柔片的TCS3430 XYZ颜色传感器,可以感测半球形视场(FOV)的光线(与人眼的FOV类似),且能够更准确地捕捉所有光源发出的光线,从而极大地改善图像的白平衡。图8显示了图片示例,其中AWB算法被混淆,无法从场景中提取干净的白点。

20191125-010.jpg
图 8:采用AWB校正与否的照片区别

右侧图片的蓝色背景看起来更加灰暗,肤色更偏向于橘色或黄色,而左侧图像的白平衡效果更好,看起来更自然。

图9展示了如何通过使用高精度XYZ颜色传感器来实现True-White功能,以防止摄像头的AWB算法失效,并拍摄出高质量图像。

20191125-011.jpg

图 9:处理TCS3430信息的AWB算法函数子集

图10显示了AWB算法流的一个子集,标注了将TCS3430 XYZ三色刺激值输入到流中进行处理的位置。由于RGB图像传感器视场有限,可能无法准确地测量光源条件充足的场景内的色温。TCS3430的漫射器位于封装孔径上方,扩大了视场,显著提高了摄像头测量场景色温的精确度,并改善了照片的白平衡。

利用场景的实测CIE色温,调整AWB算法,可以实现True-white图像的拍摄。摄像头的AWB算法经过配置,以避免使用自动模式预设,而是使用来自CIE标准光源的预设色温F2(4,230K)。从图10 CIE图的中心区域可以看出,如何使用TCS3430测量CIE色温;采用工业标准的色度调整算法,转换场景光源的白点。

20191125-012.jpg
图 10:从预设标准光源起始的CIE色度坐标图与测量的XYZ处理信息

一些智能手机OEM已经采用了这种true-white技术,通过Android API来控制每个通道的RGGB(在BAYER域中),并校正AWB算法的RGB-RGB阵列。

DXOMark使用XYZ颜色传感器改进AWB摄像头图像

图11的DXOMark图片展示了颜色传感器如何在微弱光线环境光条件下测量CIE色度坐标,以更好的细节和更低的噪点水平提供最佳的AWB图像结果。

20191125-013.png
图 11:DXOMark图片,左侧使用颜色传感器的智能手机与右侧没有颜色传感器的智能手机比较

总结

当一个场景被一种突出的颜色所主导,或在混合光环境(既有自然光照又有人工照明)中,智能手机摄像头的AWB算法都容易失效。在混合光环境中,AWB算法只能错误地锁定照明颜色中的一种,而忽略其它光源的贡献。灰度世界、白色斑块和色域映射算法在上述情况下都会失效,因为它们需要校正光源的颜色。然而,它们并不总是准确测量光照环境的色温,并且错误地依靠对场景的某些假设,从图像像素的子集中推断出光源的颜色。

因此,如果摄像头AWB算法被混淆,无法从场景中提取干净的白点,或被一种突出的颜色所主导的场景,如草地或涂有醒目颜色的墙壁,则背景看起来更加灰暗,肤色更偏向于橘色或黄色。

智能手机OEM可以利用最新上市的XYZ颜色传感器(比如TCS3430),通过true-white摄像头AWB增强功能来实现差异化。使用XYZ颜色传感器可以拍出更好的照片,它可以帮助摄像头使用AWB算法处理图像。通过准确测量场景的色温,可以获得更好的图像,使人看起来更自然,准确地捕捉场景的颜色,使图像的白平衡效果更好。

本文为《电子工程专辑》11月刊杂志文章,版权所有,禁止转载。点击申请免费杂志订阅

责编:Yvonne Geng

阅读全文,请先
您可能感兴趣
Rapidus将与博通合作分享其2纳米制程芯片原型,并推动芯片生产的外包。一旦博通确认了芯片性能,Rapidus将能够向博通的客户提供芯片。
尽管Imagination在RISC-V领域取得了一定的成就,但公司似乎认为继续投入资源于RISC-V处理器核心的开发并不符合其长期战略目标。Imagination决定终止其基于RISC-V指令集架构的GPGPU内核的研发工作,并将重心转向其擅长的GPU和AI领域......
Ken Glueck认为,美国2800亿美元的芯片法案所取得的成就,将被出口管制框架夺走,“因为在一项IFR中,它成功地将美国公司的全球芯片市场缩小了80%,并将其交给了中国。”
Intel在CES上发布了面向笔记本的酷睿Ultra 200H, 200HX, 200U系列,基本完善了这一代酷睿Ultra处理器产品线...这也是面向高性能笔记本的酷睿Ultra二代处理器初次亮相。
英特尔临时联席CEO Michelle Johnston还表示,“英特尔会在2025年及以后继续增强AI PC产品组合,向客户提供领先的英特尔18A产品样品,并在2025年下半年量产”。
NVIDIA刚才在CES上发布了GeForce RTX 50系显卡,据说这一代的5070就能达到上代4090的性能水平...
• 目前,iPhone在翻新市场中是最热门的商品,并将长期主导着翻新机的平均销售价格。 • 全球翻新机市场持续向高端化发展,其平均销售价格(ASP)现已超过新手机。 • 新兴市场是增长的最大驱动力,消费者对高端旗舰产品有着迫切需求。 • 由于市场固化和供应链的一些问题限制推高中国、东南亚和非洲等大市场的价格。 • 2024年,这些翻新机平均销售价格将首次超过新手机。
从全球厂商竞争来看,三季度凭借多个新品发布,石头科技市场份额提升至16.4%,连续两季度排名全球第一……
最新Wi-Fi HaLow片上系统(SoC)为物联网的性能、效率、安全性与多功能性设立新标准,配套USB网关,可轻松实现Wi-Fi HaLow在新建及现有Wi-Fi基础设施中的快速稳健集成
其中包含Wi-Fi 7和蓝牙5.4 模组FME170Q-865、Wi-Fi 6和蓝牙5.4 模组FCS962N-LP、Wi-Fi 6和蓝牙5.3模组FCU865R 、独立Wi-Fi和蓝牙模组FGM840R、高功率Wi-Fi HaLow模组FGH100M-H……
大疆发布DJI Matrice 4T旗舰无人机,售价38888元。该无人机可用于电力巡检、应急抢险、公共安全、水利林业监测等众多应用场景。DJI Matrice 4T的镜头模组拥有“六个眼”,除了广角
来源:《中国半导体大硅片年度报告2024》2016 年至 2023 年间,全球半导体硅片(不含 SOI)销售额从 72.09 亿美元上升至121.29 亿美元,年均复合增长率达 7.72%。2016
小米15 Ultra目前已经三证齐全,静待2月份发布了,大概率会是2025年第一款超大杯旗舰。博主定焦数码最新公布了一张该机的渲染图,后摄区域是根据内部结构绘制,展示了全新的排列方式。四摄呈L形排列,
近日,联想在CES 2025展会上展示了全球首款卷轴屏PC——ThinkBook Plus Gen 6。据悉,ThinkBook Plus Gen 6卷轴屏AI PC的核心魅力在于其独有的可卷曲显示屏
手机充电器ic U6773S助推充电便利好享受面对手机存储空间不足的问题,我们可以从多个方面入手,清理缓存、卸载不必要的应用、移动文件至外部存储、使用云存储服务等等。面对手机充电器充电速度慢、效率低的
亚化咨询重磅推出《中国半导体材料、晶圆厂、封测项目及设备中标、进口数据全家桶》。本数据库月度更新,以EXCEL表格的形式每月发送到客户指定邮箱。中国大陆半导体大硅片项目表(月度更新)中国大陆再生晶圆项
    大联大控股宣布,其旗下世平推出基于安森美(onsemi)NCP5156x芯片的双通道隔离驱动IC评估板方案。    图
 △广告 与正文无关 日前,苏州西典新能源电气股份有限公司(股票代码:603312,以下简称“西典新能”)发布公告称,公司经过3年多的产品和工艺研发及设备攻关,信号采集组件FCC技术取得重大进展,公司
近日,闻泰科技在一场电话会议中阐述了其出售ODM(原始设计制造)业务的战略考量。           闻泰科技表示,基于地缘政治环境变化,考虑到 ODM 业务稳健发展和员工未来发展利益最大化,公司对战
 △广告 与正文无关 1月3日,The Elec援引电子元件专业媒体内容表示,尽管取代中国PCB的努力仍在继续,但预计到2028年,中国(包括大陆和台湾省)在全球PCB销售中的份额将超过60%,在市场