随着手机录像需求的激增,需要使用软件来为高质量视频创建理想的取景框。 Immervision的新算法可在一系列智能手机中实现“20/20视觉”,实时纠正视频失真,以改善捕获到的显示体验,同时不会影响视角。

成像技术公司Immervision宣称,他们已经开发出能够对视频失真进行实时校正的软件算法,比如校正被拉伸的物体、改变线条、对象和人脸比例,可以实时调整手机拍摄的图像和视频场景。

该公司将通过其分销合作伙伴和主要投资者CEVA将这些新算法直接授权给移动OEM厂商。 Immervision联合创始人兼副总裁Patrice Roulet Fontani在接受EE Times采访时说,这种新的实时失真校正算法以前从未有过。“以前也有一些算法,但是能够在不额外消耗电池电量的前提下,在便携式设备上运行,并提供适当的校正,这是前所未有的。”

Immervision联合创始人兼副总裁Patrice Roulet Fontani

Patrice对相关背景知识做了一些解释。“智能手机屏幕越做越宽,但迄今为止,无论怎么看,手机上的视频仍然是4x3的比例。如果要让视频满屏,则需要处理图像,先裁剪再分割,然后增加传感器上的图像大小。现在的摄影镜头和广角镜头可以让视频充满整个屏幕,但仍然存在一些人工痕迹或者失真。图片校正相对简单,你拍摄一张图片,也许只花半秒钟的时间就可以完成处理和修改。但是对于30-120 fps的视频来说,这就没那么简单了。”

 “为了实现失真校正,我们引入了一种新算法,它不仅可以根据一种设置来校正失真,还可以根据不同情景来选择不同类型的失真校正。这种校正可以实时进行,例如在有人的区域,我们可能希望人物看起来更正常一些。而对全景图,你可能想要提供一种广阔无边际的感觉。”

随着手机录像需求的激增,需要使用软件来为高质量视频创建理想的取景框。 Immervision的新算法可在一系列智能手机中实现“20/20视觉”,实时纠正视频失真,以改善捕获到的显示体验,同时不会影响视角。(图片来源:Immervision)

 “现在的设备根本无法校正失真。图像和视频也许有一些失真校正处理,但大都集中在直线处理上。而且,他们仅提供一种失真校正馈送来应对所有的应用场景。但问题是,你无法实现一次处理不但校正直线,而且还保持身体或人脸比例。因此,在如今的大多数智能手机中,当您朝着FOV(视场)边缘移动时,身体和人脸会扭曲变形,它们会被拉伸到比实际要宽的比例。”

 “我们并不是为所有场景仅提供一个处理馈送,而是根据不同场景为智能手机OEM提供不同的视频失真校正处理。因此,如果要拍摄风景,那么对它的处理将与人群或头像场景的处理不同。我们开发了视频畸变校正以及我们称之为“人脸保护”的功能,可以使人脸看起来更真实,而不会扭曲和拉伸。而且,这个过程是实时进行的。我们对客户的承诺是所见即所得。”

许多新式的手机都拥有更宽的视角,但也会产生更明显的失真。Immervision公司声称其新软件算法可提供一站式解决方案,实时校正拉伸的物体、改变线条、对象和面部比例,以适应不同场景,并缩减编辑时间。该软件可提供不同级别的校正、变化的投影,并且实时适应场景。手机厂商采用它就能够为用户提供多种选择,例如,保留预设配置不变,或者完全自定义,又或者让用户自己决定;同时还可以让手机控制定向,或利用机器学习来增强用户体验。

Fontani表示,能够实时校正失真非常重要。“因为拍摄时会同时发生两件事,一是录制,二是播放,这两个功能需要同时进行,你不能录制完再进行处理。”

Immervision公司表示,随着手机视频录制需求的飞速增长,需要使用软件来为高质量视频创建理想的取景框。Immervision与客户合作已有20年,其硬件和软件专家一直与OEM紧密合作,微调算法以满足特定需求。他们的新算法有助于在一系列智能手机中实现“20/20视觉”,实时纠正视频失真,以改善捕获到的显示体验,而不会损害视角。

添加现成的125度广角镜头

Immervision公司在声明种还介绍了其125度广角镜头,据称是市面上性能最高的广角镜头。该镜头已预先配置流行的传感器,无需定制摄像头,其目标客户为二级和三级手机厂商。

广角镜头可以减少摄像头数量与成本,同时提高用手机拍摄风景、人群、特写和视频的图像质量。大多数一级手机厂商现在都装有广角镜头,但二、三级的移动品牌都还尚未配备。目前,Immervision的技术已经预配置在一些较流行的传感器上,包括索尼、豪威科技和三星。

 “二、三级手机厂商面临的挑战是如何提供与行业领先手机同等水平的图像质量。” Immervision执行副总裁、运营和首席商务官Alessandro Gasparini表示。“Immervision的125度广角镜头将行业所有领先的指标集成到一个镜头中。过去,这些一流的指标分散在多种手机中。现在它们通过现成的软件,合成到一个镜头中,这样就可以减少摄像头的定制和集成时间,并提供与知名手机品牌同样的图像质量。”

“这是一种新的光学设计,可在不同参数之间实现最佳平衡,以尽可能获取最大的FOV,而不会影响f值和相对照明度,而且即使在边缘处分辨率都不会下降,高达21兆像素。它将让二、三级手机供应商仅用一个摄像头即可提供从广角到传统成像的完整体验。换句话说,同一个摄像头具有两种不同的功能特性。”

他补充道:“我们致力于使这项技术变得简单易用,因为这些功能通常仅在大品牌旗舰手机中才有。就广角性能而言,我们提供的将是最好的镜头。”

(参考原文:Distortion Correction Algorithms Adapt Video in Real-Time

责编:Amy Guan

本文为《电子工程专辑》2020年9月刊杂志文章,版权所有,禁止转载。点击申请免费杂志订阅  

阅读全文,请先
您可能感兴趣
不管怎么样,英特尔仍在努力推进18A芯片工艺,以期未来在最先进的芯片工艺上能与台积电、三星有一定的领先优势,毕竟其已经率先拿到ASML两台最先进的High NA(高数值孔径)EUV光刻机。未来,英特尔没有选择,只有抓住任何的可能性,硬着头皮上。
Xockets认为,英伟达凭借侵犯该企业专利的DPU产品垄断了AI GPU服务器市场,而微软则垄断了支持GPU的AI平台领域。此外,Xockets还称这两家科技公司就授权费建立了垄断同盟。
经营业绩下滑,以及在代工业务上的巨额亏损以及市场需求疲软,也或是英特尔出售Mobileye股份的重要原因之一。
英伟达的CUDA生态系统和高性能AI GPU仍将作为核心竞争力,但要支撑其像以往那样的飞速的发展态势,必然要面临更大的挑战,或者已到增长的天花板。
Intel刚刚发布了至强W-2500与W-3500系列处理器,最高60个核心,面向工作站设备。现在的工作站,相比从前似乎已经大不一样了...
在性能方面,Granite Rapids-D至强6 SoC采用了英特尔最新的Intel 3工艺计算小芯片与基于Intel 4的边缘优化I/O小芯片相结合的创新设计,提供了显著的性能、能效和晶体管密度提升。
• 得益于西欧、关键亚洲市场和拉丁美洲市场的增长,以及中国品牌的持续领先,全球折叠屏手机出货量在2024年第二季度同比增长了48%。 • 荣耀凭借其在西欧特别强劲的表现,成为最大的贡献者,成为该地区排名第一的品牌。 • 摩托罗拉的Razr 40系列在北美和拉丁美洲表现良好,为其手机厂商的出货量贡献了三位数的同比增长。 • 我们预计,头部中国手机品牌厂商的不断增加将至少在短期内抑制三星Z6系列在第三季度的发布。
AI技术的发展极大地推动了对先进封装技术的需求,在高密度,高速度,高带宽这“三高”方面提出了严苛的要求。
奕斯伟计算2024首届开发者伙伴大会以“绿色、开放、融合”为主题,从技术创新、产品应用、生态建设等方面,向开发者、行业伙伴等相关方发出开放合作倡议,加速RISC-V在各行各业的深度融合和应用落地,共同推动RISC-V新一代数字基础设施生态创新和产业发展。
2024年 Canalys 中国云计算渠道领导力矩阵冠军厂商分别是:阿里云、华为云和亚马逊云科技(AWS)
点击蓝字 关注我们德州仪器全球团队坚持克服挑战,为电源模块开发新的 MagPack™ 封装技术,这是一项将帮助推动电源设计未来的突破性技术。  ■ ■ ■作为一名经验丰富的马拉松运动员,Kenji K
在全球智能手机竞争日益激烈的情况下,谁能在高端市场站稳脚跟,谁就占据了主动权。一直以来全球智能手机市场格局都是,苹果专吃高端,其他各大厂商分食全球中低端市场。但现在市场正在其变化。根据Canalys最
文|萝吉今年下半年开始,国内新能源市场正式跨过50%历史性节点,且份额依然在快速增长——7月渗透率破50%,8月份破55%……在这一片勃勃生机万物竞发的景象下,新能源市场占比最高的纯电车型,却在下半年
文|德福很多去成都旅游的朋友都有个疑惑——为什么在成都官方的城市标志上看不到熊猫,而是一个圆环?其实这个“圆环”大有来头,它被唤作太阳神鸟,2001年出土于大名鼎鼎的金沙遗址,距今已有三千余年历史。0
据市场调查机构Allied Market Research的《单晶硅晶圆市场》报告指出,2022年单晶硅晶圆市场价值为109亿美元,预计到2032年将达到201亿美元,2023年~2032年的复合年均
会议预告向世界展示中国最具创新力、领导力和品牌化的产品与技术!9月27号,“第6届国际移动机器人集成应用大会暨复合机器人峰会”将在上海举行,敬请关注!逐个击破现有痛难点。文|新战略半导体行业高标准、灵
‍‍‍‍上市PCB厂商竞国(6108)日前出售泰国厂给予陆资厂胜宏科技后,近日惊传台湾厂惊传12月前关厂,并对客户发布通知预告客户转移生產,最后出货日期2024年12月25日。至於后续台湾厂400名员
‍‍据龙芯中科介绍,近日,基于龙芯3A6000处理器的储迹NAS在南京师范大学附属小学丹凤街幼儿园、狮山路小学、南京大学附属中学等学校相继落地。储迹NAS是基于最新的龙芯CPU--3A6000,其代表
疫情后的劳动力囤积和强有力的员工保护规则掩盖了德国高薪制造业工作市场令人担忧的变化。根据联邦劳工办公室的数据,欧元区最大经济体德国的失业率在2019年春季曾达到历史最低点4.9%,现已上升至6%。虽然
随着汽车智能化升级进入深水区,车载ECU(域)以及软件复杂度呈现指数级上升趋势。尤其是多域、跨域和未来的中央电子架构的普及,以及5G/V2X等车云通信的增强,如何保障整车的信息与网络安全,以及防范外部