现在国产手机OEM厂商发布自研芯片时,真正透露的技术细节少之又少,只会给个大致的概念。前几天vivo召开了X80系列手机发布会,以“双芯”为主题,主要是指联发科天玑9000 + vivo自研的V1+芯片。自打手机OEM厂商“自研芯片”大热以来,vivo应用于X70系列手机的V1 ISP芯片就很吸引眼球,V1+即为V1的迭代款……

前几天vivo召开了X80系列手机发布会——实际上早在4月20日,vivo就和联发科一起举办了一场“双芯影像技术沟通会”。这从去年开始就已经成为vivo的传统了。所谓的“双芯”,主要是指联发科天玑9000 + vivo自研的V1+芯片。

自打手机OEM厂商“自研芯片”大热以来,vivo应用于X70系列手机的V1 ISP芯片就很吸引眼球——且同期ISP(图像处理器,并可能配套AI单元)也成为众多手机厂商自研芯片的起点。V1+即为V1的迭代款。不过这次的V1+应当还是vivo与合作伙伴共同设计完成的,比如vivo仍然不做V1+的流片。去年的V1也是如此。

vivo在本次采访会上再度谈到:“目前vivo自己的资源主要布局在算法、IP转化和芯片架构的设计上,IC线路设计、流片、生产等流程上我们会交托给合作伙伴,双方利用各自的专业和优势,合理分工协作,让我们的产品更加出色。”(所以是做了数字前端?)

vivo在介绍中说,V1+不仅用于视频、照片拍摄之类的影像处理,还能应用于游戏插帧。所以理论上这是一颗ISP+MEMC芯片。具体参数上,V1+芯片配合片上SRAM(部分媒体在报道中提到“等效32MB主机级别SRAM”,猜测“等效”一词可能表明有帧切片一类的方案来提高系统效率),“数据吞吐速度可维持约8GB/s”、“数据吞吐速度理论最高可达约25GB/s”,“能效提高约300%”、“功耗降低约72%”。

只是不知道对比的是谁,具体是怎么比的。ISP配cache(或与其他处理单元共享cache)来降低功耗、提升带宽其实也是这两年的主旋律,不过我们对这几个数字仍然没有太多可横向对比的量级概念。

我们知道,类似天玑9000、骁龙8 Gen 1之类的手机SoC芯片上本身就集成了ISP,而国内的手机OEM厂商却仍旧热衷于自己造单独的ISP芯片。这就让我们十分好奇联发科、高通对此是什么态度,毕竟这两年的手机旗舰SoC本身在ISP上也是发力的重点。比如骁龙8 Gen 1宣传“三核18-bit ISP”,天玑9000则宣传配置包括“3个18bit HDR Fusion ISP”。加上此前海思麒麟9000就已经在大力宣传ISP+NPU融合架构,这两年ISP的内卷程度还真是严重。

不过联发科这次愿意和vivo坐在一起谈“双芯”,还在沟通会后专门召开了一场采访会,就表明起码联发科并不排斥手机厂商自己造ISP芯片。那么抛开自研、国产提振信心,厂商技术积累之类的作用不谈,“双芯”对于体验的价值究竟在有多大,实则才是用户和市场应当关心的话题。

聊聊“双芯”能做什么

现在国产手机OEM厂商发布自研芯片时,真正透露的技术细节少之又少,只会给个大致的概念。所以我们无法很确切地搞明白V1+架构如何、怎么工作的,以及当它与天玑9000一起工作时,具体走的管线是什么样。不过从沟通会和发布会透露的少许信息来看,起码有一个功能是在“双芯”配合时比较出彩的,即游戏。

大致思路是天玑9000的GPU(与CPU)做画面渲染,APU(AI专核)识别游戏场景动态调整资源分配、节约能耗、优化效率,最后画面交给V1+进行游戏画面的插帧,以提升游戏的流畅度。《原神》都能藉由V1+芯片插帧到90fps——插帧自然就意味着很多帧都不是GPU算出来的了。

vivo发言人的说法是:“通过联发科APU的AI运算能力,联动外部多枚处理器协同工作,与GPU共同完成游戏的画面渲染,进而释放GPU的一部分负载;调用自研芯片的硬件级插帧算法,对帧率稳定性进行优化。最终达到性能和功耗平衡的效果。”

这里APU的作用,很像是联发科HyperEngine中的“智能调控引擎”的某种变体,比如HyperEngine基于AI进行VRS(可变速率着色)就能提升帧率、降低功耗。或许联发科和vivo在此有进一步的合作。

不过我们认为,如果游戏AI超分算法解封,则GPU、APU、V1+的协同才算真正的有看点。

在《玩手游为什么需要AI芯片?谈谈AI超分技术在手机上的落地》一文中,我们阐述了当代游戏为了同时兼顾画面的清晰度与流畅度,游戏过程中GPU+AI专核一起工作会成为趋势。这一点在PC游戏上已经开始大范围应用:GPU首先渲染低分辨率的画面,然后通过卷积神经网络和AI专核(如英伟达GPU的tensor core)将低分辨率升格(upscale)为高分辨率。这样一来,GPU的渲染任务就不会那么繁重,与此同时获得的游戏画面也接近其原生高分辨率。英伟达、Intel、微软等都在推进类似的计划。

联发科则是在移动平台推进这种AI超分技术的芯片厂商,天玑9000之上的这一生态应当已经准备就绪。联发科Game AI-SR将GPU与APU进行了结合。而游戏AI超分似乎也是本次vivo X80系列手机的宣传点之一,虽然我们尚未看到对联发科Game AI-SR超分特性专门做出支持的游戏列表。

理想情况下,游戏画面经过天玑9000的GPU渲染+APU分辨率升格之后,交给V1+芯片再进行一次插帧——虽然不清楚具体是何种算法的插帧。理想全过程,应当是GPU先以低分辨率渲染游戏画面(如渲染720p分辨率画面),再由APU对低分辨率画面做升格变为高分辨率(如720p升格为1080p),最后V1+对其做插帧以提升最终呈现到屏幕上的帧率(如《王者荣耀》能以120fps来跑)。就流程来看,也算是帧率、分辨率、功耗兼顾的一套方案了。

当然或许受限于手游超分生态尚不完备,目前APU在游戏过程中做的主要是资源调度的合理化(如早年的GPU Turbo)。这也是采访会上,vivo举的一个应用“双芯”的例子。另外联发科还提到天玑芯片中的MiraVision媒体与显示引擎可针对游戏做画面HDR也能发挥作用,与V1+插帧做协同。

不过从过往游戏画面插帧实现的历史(如iQOO Neo 5,骁龙870+MEMC芯片)来看,游戏插帧方案产生的额外交互延迟是可感知的。从画面开始渲染到最终显示到屏幕上,多出一个流程,多出一部分延迟是意料之中的;芯片之间要交互(且应当需要借助DRAM)还会叠加延迟。不知V1+在这方面是否会有改善。

无论如何,这种提升游戏分辨率、帧率的思路,实则也能够体现计算机科学正在寻求提升GPU图形算力之外的技术,来提升最终的游戏体验。这在学术和产业界都算是大势所趋,毕竟我们说摩尔定律放缓致GPU堆料不再像过去那么容易了,所以从其他角度着手会是更优解。或许将来在流程、算法上乃至芯片形态上都还有进化空间,但这样的思路是有探索价值的。

当然,V1+的主职还是影像处理和增强——在影像处理过程中自然也需要与天玑9000做“双芯”配合。vivo在发布会上主要宣传了夜景视频拍摄、成像色彩、人像画质方面的优势。不过我们认为,照片与视频拍摄方面的优势主要更在于算法;专用ISP硬件的价值则在提高吞吐与算力、提升工作效率和拍摄体验。

只是我们迄今也不怎么清楚在影像处理和增强上,“双芯”究竟具体是怎么分工协作的。现代影像处理通路上,与V1+主要协同的应当就是天玑9000内部的APU;天玑9000自身的ISP可能也会参与一部分工作。这其中还是有挺多门道的,尤其如何减少双方的闲置率等等问题,都需要花时间去研究......

芯片厂商的定制化选项

自研芯片,体现了手机OEM厂商都在积极寻求体验差异化。毕竟现在依旧存活的手机厂商,除了苹果之外,绝大部分都用着类似的硬件和软件。实际上联发科作为手机芯片供应商,本身也在向OEM厂商提供某种程度的定制化服务。vivo的“双芯”也能体现联发科此前预留的定制化解决方案。

其实去年的天玑1200芯片之上就已经有类似的例子了,一加Nord 2采用的芯片名为天玑1200-AI,vivo X70用的芯片则叫做天玑1200-vivo,还有小米11T用了天玑1200-ULTRA——这些尾缀体现的即是手机厂商与联发科的合作,以及芯片定制化操作。

去年的天玑旗舰技术媒体沟通会上,联发科就特别提到了天玑“5G开放架构”。这种开放架构的思路是将“自家软件、硬件引擎开放给客户”。比如说联发科有个AI-Display的能力选项,手机OEM厂商如果期望在画面显示到屏幕的这条显示链路上增加AI节点(通过APU超分后显示画面),联发科就将“显示链路界面”(interface)开放给手机厂商。

在这种开放架构下,芯片厂商和手机厂商会提前很久做沟通。联发科在interface之下进行调校,手机厂商基于interface来开发功能;另外联发科还拉来第三方提供算法、功能,可向手机厂商做开放。

此前联发科在接受采访时说:“以前联发科针对某个功能提供的链路可能是ABCD,四个模块、四个固定的硬件,客户可以调参数。而在客户提出定制化需求后,或许C的位置开放部分代码,客户可以排在C里面去改一些效果,或者插一些东西进去。在天玑开放架构之下,我们开放ABCD四个模块,客户可以用BCAD的方法做排列,甚至可以做AABBC,或者把C换成客户自己的C。”

这席话是否就很好地解释了V1+所处的位置?联发科也在本次采访会上表示:“天玑9000这边提供了天玑开放架构,跟vivo V1+深度整合。”“去年联发科和vivo就针对天玑系列的开放架构有一些合作。天玑开放架构可以让终端或第三方充分发掘天玑旗舰平台的潜力,包括AI拍照、游戏等。不只是接口,未来我们也会跟客户进行协同和深入合作,共同探讨如何打造创新的差异化、个性化的体验。”

具体到天玑9000开放架构,“新增了显示链路屏幕高精度校准的硬件,结合vivo全新开发的校准算法,在显示链路上达成低功耗、超旗舰等级的‘千屏一色’表现。而且我们领先业界,能在不同的亮度下维持一致的色准,这是比较大的突破。”联发科发言人说,“相机方面,我们在录像链路中新增了AI-ISP开放架构接口,让vivo的AI算法可以实现更低功耗、效果更好的一些AI功能。”

vivo发言人在接受采访时则是这么说的:“在合作深度上,我们在天玑9000定义的初期,双方就共同启动了全面的联调工作,树立了天玑9000之王的研发目标,开始了我们从芯片底层到终端应用通过天玑开放架构打造全链路、标杆级的硬件体验。”vivo介绍说双方投入“超过300人的精英团队,超过350天的研发周期,大幅革新了软件通路架构,将V1+和天玑9000调通。”

有关“双芯”合作的一些思考

其实我们获知有关V1+和双芯协作的技术细节还是有限,但从两家企业这两年来给出的有限信息来看,至少能得出两个结论。

第一,摩尔定律放缓,导致“大芯片”的堆料不会再像过去那么容易。像GPU这类很大程度需求堆料来实现性能扩展的处理器,无法像过去那样成倍堆砌晶体管,普遍开始借助其他硬件来实现性能和体验的进步,包括AI技术及更多DSA(domain-specific architecture)硬件单元。

比如说英伟达给自家GPU加了tensor core;Intel GPU架构直接引入XMX矩阵引擎;还有联发科开始在移动平台推广超分技术-利用APU的AI运算能力来提升游戏画面清晰度;vivo作为手机OEM厂商则为实现游戏流畅度的提升,开始在显示管线中加入插帧算法。可见单是GPU的性能进步已经无法完全满足当代图形算力贪婪需求。

第二,手机OEM厂商在相当内卷的环境里都在寻求差异化竞争优势。这种差异化不仅表现在系统层面,还全面扩展到了底层的自研芯片上。于是部分手机OEM厂商选择从难度没那么大的外围芯片着手,ISP是其中一个选择。

而手机芯片供应商,则顺应市场开始为手机厂商提供这方面的适配与服务,甚至可为其引入第三方算法、功能,比如联发科的天玑开放架构即是其中代表。这可能是两者在手机产业价值链上,角色定位发生转变的开端。未知这种竞争是否还将深化,致产业链上,不同角色未来更大程度的角色变化——虽然现在讨论这个问题可能还为时尚早。

最后值得一提的是,即便市面上已经有了不少采用天玑9000芯片的手机,vivo仍然多次表示这次和联发科合作,是期望X80系列手机能够“成为天玑9000之王”,“释放天玑9000最强性能”,以最高安兔兔跑分为佐证——虽然这大概和V1+没有太大关系。vivo在发布会上提到“通过算法调整CPU资源分配,减少发热,解决性能概率性波动问题”,设计“高并发计算模式,解决CPU资源抢占和闲置的问题,优化应用的连续启动速度”,利用“内存资源管理、建立虚拟缓存单元提升数据处理速度,提升使用流畅度”。

vivo说X80之所为没有赶上天玑9000的首发,是因为“对于芯片的精细化打磨”,以及“要让天玑9000更好地适配自研芯片V1+”。并且“双方实现了从底层硬件到软件的多层面联合研发,比如说从性能、AI、影像、游戏、通讯、多媒体等各个领域…”联发科也提到:“…包括性能、功耗、游戏、拍照、视频等体验,都是我们一起完成的优化。”

现在的手机厂商竞争还真是卷:不仅要和芯片厂商深度合作,还要自己造芯片。虽说外围芯片在复杂度上还无法与手机AP SoC相提并论;“双芯”现阶段的价值大概主要体现在对vivo而言的技术储备以及市场宣传的差异化上;不过这是vivo持续积累技术的迈进,也奠定了联发科和vivo探索市场的基础。

在持续不断的进化中,不知明后年后,像vivo这样的厂商有没有机会将“双芯”合作抬升到新的高度。

责编:Luffy
本文为EET电子工程专辑原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
  • 软件差异很难,硬件差异化能让客户一目了然
阅读全文,请先
您可能感兴趣
这是《2024 Top 80 国产传感器(Sensor)芯片厂商调研分析报告》第七部分:Top 80国产传感器芯片厂商信息汇总,包括80家国产传感器芯片厂商基本信息统计表、厂商画像(公司简介、核心技术、主要产品、目标市场和竞争优势)。
这是《2024 Top 80 国产传感器(Sensor)芯片厂商调研分析报告》第六部分:国产传感器厂商综合排名及对比分析,包括2023 Fabless100排行榜之Top 10传感器公司、传感器类上市公司对比分析。
这是《2024 Top 80 国产传感器(Sensor)芯片厂商调研分析报告》第五部分:传感器新兴应用及方案(Application Solutions),涉及AIoT应用、ADAS/自动驾驶、智能安防。
这是《2024 Top 80 国产传感器(Sensor)芯片厂商调研分析报告》第四部分:传感器最新技术趋势(New Technologies),涉及智能传感器、MEMS、激光雷达、EVS传感器。
作为Fabless100系列分析报告的重要组成部分,AspenCore分析师团队于2022年发布了《60 家国产传感器芯片厂商调查统计报告》,得到了电子和IC设计工程师及业界朋友的极大肯定和支持。2023年,传感器行业和国产传感器芯片厂商也经历了巨大变化。我们在原报告基础上,参考行业权威调研机构的传感器市场数据,汇总整理出2024版《Top 80国产传感器(Sensor)芯片厂商调研分析报告》,希望为业界朋友展现出最新传感器技术和应用发展趋势,以及国产传感器芯片厂商的市场竞争实力。
目前,智能终端NFC功能的使用频率越来越高,面对新场景新需求,ITMA多家成员单位一起联合推动iTAP(智能无感接近式协议)标准化项目,预计25年上半年发布1.0标准,通过功能测试、兼容性测试,确保新技术产业应用。
中科院微电子所集成电路制造技术重点实验室刘明院士团队提出了一种基于记忆交叉阵列的符号知识表示解决方案,首次实验演示并验证了忆阻神经-模糊硬件系统在无监督、有监督和迁移学习任务中的应用……
C&K Switches EITS系列直角照明轻触开关提供表面贴装 PIP 端子和标准通孔配置,为电信、数据中心和专业音频/视频设备等广泛应用提供创新的多功能解决方案。
投身国产浪潮向上而行,英韧科技再获“中国芯”认可
今日,长飞先进武汉基地建设再次迎来新进展——项目首批设备搬入仪式于光谷科学岛成功举办,长飞先进总裁陈重国及公司主要领导、嘉宾共同出席见证。对于半导体行业而言,厂房建设一般主要分为四个阶段:设备选型、设
来源:苏州工业园区12月17日,江苏路芯半导体技术有限公司掩膜版生产项目迎来重要进展——首批工艺设备机台成功搬入。路芯半导体自2023年成立以来,专注于半导体掩膜版的研发与生产,掌握130nm至28n
‍‍12月18日,深圳雷曼光电科技股份有限公司(下称“雷曼光电”)与成都辰显光电有限公司(下称“辰显光电”)在成都正式签署战略合作协议。双方将充分发挥各自在技术创新、产品研发等方面的优势,共同推进Mi
对于华为来说,今年的重磅机型都已经发完了,而明年的机型已经在研发中,Pura 80就是期待很高的一款。有博主爆料称,华为Pura 80将会用上了豪威OV50K传感器,同时电池容量达到5600毫安时。至
万物互联的时代浪潮中,以OLED为代表的新型显示技术,已成为人机交互、智能联结的重要端口。维信诺作为中国OLED赛道的先行者和引领者,凭借自主创新,实现了我国OLED技术的自立自强,成为中国新型显示产
12月18 日,据报道,JNTC与印度Welspun BAPL就车载盖板玻璃的开发及量产签订了投资引进业务合作备忘录(MOU)。资料显示,JNTC是韩国的一家盖板玻璃厂商。Welspun的总部位于印度
 “ 担忧似乎为时过早。 ”作者 | RichardSaintvilus编译 | 华尔街大事件由于担心自动驾驶汽车可能取消中介服务,Uber ( NYSE: UBER ) 的股价在短短几周内从 202
近期,高科视像、新视通、江苏善行智能科技等企业持续扩充COB产能。插播:加入LED显示行业群,请加VX:hangjia188■ 高科视像:MLED新型显示面板生产项目(二期)招标12月18日,山西高科
又一地,新型储能机会来了?■ 印度:2032储能增长12倍,超60GW据印度国家银行SBI报告,印度准备大幅提升能源存储容量,预计到2032财年将增长12 倍,超60GW左右。这也将超过可再生能源本身
上个月,亿万富翁埃隆·马斯克谈到了年轻一代的生育问题。他强调生育的紧迫性,认为无论面临何种困难,生育后代都是必要的,否则人类可能会在无声中走向消亡。他认为人们对于生育的担忧有些过头,担心经济压力等问题