尽管智能手机摄像头的图像处理算法很复杂,可它们的自动白平衡(AWB)算法在某些情况下可能会完全失效。本文讨论了白平衡技术的有效性,以及如何使用高精度颜色传感器辅助智能手机摄像头AWB算法,进而提升图像质量。

我们的视觉系统会根据光谱内容调整长、中、短视锥细胞的相对响应。人眼具有一种色度适应机制,可以理解不同的环境光条件。这种反应机制让我们在不同的环境光条件下,将白色和灰色的物体仍看成是白色和灰色。图5描述了这种色度适应原则采用的光增益调整。

20191125-007.jpg
图 5:色度适应

然而,摄像头的图像处理AWB算法无法像人眼那样测量物体表面与不断变化的照明条件之间的动态关系。这些算法缺乏色度适应能力,无法了解不同的环境光条件并作出反应,将不同环境下的白色和灰色的物体仍看成是白色和灰色。

图6显示了XYZ颜色传感器及其光谱功率分布(SPD)响应。

20191125-008.jpg
图 6:TCS3430的XYZ光谱功率分布(SPD)响应

XYZ光谱响应以人眼为基础,因此能够更加准确地提供与人类如何感知颜色有关的信息。虽然有一些将RGB值转换为XYZ的方法,但RGB光谱响应函数并非切实的颜色匹配函数,因此转换后的结果与人眼感知颜色的方式并不完全匹配。通过准确匹配人眼的颜色响应,分析XYZ传感器的数据也可以像人眼一样来检测颜色的差异。使用高精度XYZ颜色传感器(输出入射光的CIE XYZ三色刺激值),能够在测量环境照明条件时提供最好的测量结果。

图7显示了普朗克轨迹:CIE色度图中间的实心曲线。

20191125-009.jpg
图 7:CIE1931色彩空间色度图 – 显示普朗克轨迹

轨迹上的每个点都对应一个黑体色温,具有对应的CCT值。

使用XYZ颜色传感器改善摄像头AWB增强效果

配备均柔片的TCS3430 XYZ颜色传感器,可以感测半球形视场(FOV)的光线(与人眼的FOV类似),且能够更准确地捕捉所有光源发出的光线,从而极大地改善图像的白平衡。图8显示了图片示例,其中AWB算法被混淆,无法从场景中提取干净的白点。

20191125-010.jpg
图 8:采用AWB校正与否的照片区别

右侧图片的蓝色背景看起来更加灰暗,肤色更偏向于橘色或黄色,而左侧图像的白平衡效果更好,看起来更自然。

图9展示了如何通过使用高精度XYZ颜色传感器来实现True-White功能,以防止摄像头的AWB算法失效,并拍摄出高质量图像。

20191125-011.jpg

图 9:处理TCS3430信息的AWB算法函数子集

图10显示了AWB算法流的一个子集,标注了将TCS3430 XYZ三色刺激值输入到流中进行处理的位置。由于RGB图像传感器视场有限,可能无法准确地测量光源条件充足的场景内的色温。TCS3430的漫射器位于封装孔径上方,扩大了视场,显著提高了摄像头测量场景色温的精确度,并改善了照片的白平衡。

利用场景的实测CIE色温,调整AWB算法,可以实现True-white图像的拍摄。摄像头的AWB算法经过配置,以避免使用自动模式预设,而是使用来自CIE标准光源的预设色温F2(4,230K)。从图10 CIE图的中心区域可以看出,如何使用TCS3430测量CIE色温;采用工业标准的色度调整算法,转换场景光源的白点。

20191125-012.jpg
图 10:从预设标准光源起始的CIE色度坐标图与测量的XYZ处理信息

一些智能手机OEM已经采用了这种true-white技术,通过Android API来控制每个通道的RGGB(在BAYER域中),并校正AWB算法的RGB-RGB阵列。

DXOMark使用XYZ颜色传感器改进AWB摄像头图像

图11的DXOMark图片展示了颜色传感器如何在微弱光线环境光条件下测量CIE色度坐标,以更好的细节和更低的噪点水平提供最佳的AWB图像结果。

20191125-013.png
图 11:DXOMark图片,左侧使用颜色传感器的智能手机与右侧没有颜色传感器的智能手机比较

总结

当一个场景被一种突出的颜色所主导,或在混合光环境(既有自然光照又有人工照明)中,智能手机摄像头的AWB算法都容易失效。在混合光环境中,AWB算法只能错误地锁定照明颜色中的一种,而忽略其它光源的贡献。灰度世界、白色斑块和色域映射算法在上述情况下都会失效,因为它们需要校正光源的颜色。然而,它们并不总是准确测量光照环境的色温,并且错误地依靠对场景的某些假设,从图像像素的子集中推断出光源的颜色。

因此,如果摄像头AWB算法被混淆,无法从场景中提取干净的白点,或被一种突出的颜色所主导的场景,如草地或涂有醒目颜色的墙壁,则背景看起来更加灰暗,肤色更偏向于橘色或黄色。

智能手机OEM可以利用最新上市的XYZ颜色传感器(比如TCS3430),通过true-white摄像头AWB增强功能来实现差异化。使用XYZ颜色传感器可以拍出更好的照片,它可以帮助摄像头使用AWB算法处理图像。通过准确测量场景的色温,可以获得更好的图像,使人看起来更自然,准确地捕捉场景的颜色,使图像的白平衡效果更好。

本文为《电子工程专辑》11月刊杂志文章,版权所有,禁止转载。点击申请免费杂志订阅

责编:Yvonne Geng

阅读全文,请先
您可能感兴趣
9月10日,苹果发布了一系列新品,包括iPhone 16系列手机、Apple Watch Series 10智能手表和AirPods 4耳机。发布会后网上响起了一片吐嘈声,带着这些吐槽,我们来看看这次苹果到底有没有新玩意……
不管怎么样,英特尔仍在努力推进18A芯片工艺,以期未来在最先进的芯片工艺上能与台积电、三星有一定的领先优势,毕竟其已经率先拿到ASML两台最先进的High NA(高数值孔径)EUV光刻机。未来,英特尔没有选择,只有抓住任何的可能性,硬着头皮上。
一直听说x86指令集天生做不了低功耗,真的是这样吗?这篇文章着重谈谈酷睿Ultra二代是怎么考量低功耗的,有没有可能做到低功耗...
Xockets认为,英伟达凭借侵犯该企业专利的DPU产品垄断了AI GPU服务器市场,而微软则垄断了支持GPU的AI平台领域。此外,Xockets还称这两家科技公司就授权费建立了垄断同盟。
经营业绩下滑,以及在代工业务上的巨额亏损以及市场需求疲软,也或是英特尔出售Mobileye股份的重要原因之一。
英伟达的CUDA生态系统和高性能AI GPU仍将作为核心竞争力,但要支撑其像以往那样的飞速的发展态势,必然要面临更大的挑战,或者已到增长的天花板。
• 得益于西欧、关键亚洲市场和拉丁美洲市场的增长,以及中国品牌的持续领先,全球折叠屏手机出货量在2024年第二季度同比增长了48%。 • 荣耀凭借其在西欧特别强劲的表现,成为最大的贡献者,成为该地区排名第一的品牌。 • 摩托罗拉的Razr 40系列在北美和拉丁美洲表现良好,为其手机厂商的出货量贡献了三位数的同比增长。 • 我们预计,头部中国手机品牌厂商的不断增加将至少在短期内抑制三星Z6系列在第三季度的发布。
AI技术的发展极大地推动了对先进封装技术的需求,在高密度,高速度,高带宽这“三高”方面提出了严苛的要求。
奕斯伟计算2024首届开发者伙伴大会以“绿色、开放、融合”为主题,从技术创新、产品应用、生态建设等方面,向开发者、行业伙伴等相关方发出开放合作倡议,加速RISC-V在各行各业的深度融合和应用落地,共同推动RISC-V新一代数字基础设施生态创新和产业发展。
2024年 Canalys 中国云计算渠道领导力矩阵冠军厂商分别是:阿里云、华为云和亚马逊云科技(AWS)
在全球智能手机竞争日益激烈的情况下,谁能在高端市场站稳脚跟,谁就占据了主动权。一直以来全球智能手机市场格局都是,苹果专吃高端,其他各大厂商分食全球中低端市场。但现在市场正在其变化。根据Canalys最
文|沪上阿YI路特斯如今处在一个什么样的地位?吉利控股集团高级副总裁、路特斯集团首席执行官冯擎峰一直有着清晰的认知:“这个品牌的挑战依然非常大。首先,整个中国市场豪华汽车整体数据下滑了30%~40%,
‍‍Mobileye 将终止内部激光雷达开发Mobileye 宣布终止用于自动驾驶的激光雷达的开发,并裁员 100 人。Mobileye 认为,下一代 FMCW 激光雷达对可脱眼的自动驾驶来说必要性没
周二,捷普科技(Jabil)官员与印度泰米尔纳德邦代表团在泰米尔纳德邦首席部长MK Stalin的见证下,签署了一份备忘录。MK Stalin正在美国进行为期17天的访问,旨在吸引新的投资。MK St
据市场调查机构Allied Market Research的《单晶硅晶圆市场》报告指出,2022年单晶硅晶圆市场价值为109亿美元,预计到2032年将达到201亿美元,2023年~2032年的复合年均
疫情后的劳动力囤积和强有力的员工保护规则掩盖了德国高薪制造业工作市场令人担忧的变化。根据联邦劳工办公室的数据,欧元区最大经济体德国的失业率在2019年春季曾达到历史最低点4.9%,现已上升至6%。虽然
在苹果和华为的新品发布会前夕,Counterpoint公布了2024年第一季度的操作系统详细数据,数据显示, 鸿蒙操作系统在2024年第一季度继续保持强劲增长态势,全球市场份额成功突破4%。在中国市场
9月6日,“智进AI•网易数智创新企业大会”在秦皇岛正式举行,300+企业高管及代表、数字化技术专家齐聚一堂,探讨当AI从技术探索迈入实际应用,如何成为推动组织无限进化的新引擎。爱分析创始人兼CEO金
近日,3个电驱动项目迎来最新进展,包括项目量产下线、投产、完成试验等,详情请看:[关注“行家说动力总成”,快速掌握产业最新动态]青山工业:大功率电驱项目下线9月5日,据“把动力传递到每一处”消息,重庆