亚马逊云科技re:Invent现场访谈:定制芯片将是大势所趋

原创 趣味科技v 2022-12-12 13:56

关注云服务市场的读者朋友想必都知道,虽然芯片市场早已有着英特尔、AMD、英伟达、高通、联发科技等诸多强有力的厂商,但是近年来针对某些应用,越来越多的云服务商开始推出自研芯片。

那么问题就来了:究竟是什么样的原因,让这些云服务商走上了定制芯片的道路?与大家熟知的传统芯片相比,这些定制芯片究竟拥有哪些优势?对于芯片市场而言,这种变化又预示着怎样的未来?

作为亚马逊云科技EC2产品管理总监,Chetan Kapoor主要负责人工智能、机器学习、高性能计算、图像处理、游戏开发等业务。在2022亚马逊云科技re:Invent全球大会现场,趣味科技通过对Chetan Kapoor的采访,逐一揭晓了以上问题的答案。

亚马逊云科技的三类计算服务

在计算领域,亚马逊云科技的产品与服务主要有三个大的分类。

1、按需索取:以Amazon EC2为代表。Amazon EC2的核心能力,就是将重要资源分离开来并按需交给客户。客户无需在本地进行硬件堆砌,只需使用一个API或者在亚马逊云科技的控制台发出计算资源请求后,即可向客户提供所需的服务。

2、无服务器:以Amazon Lambda系列为代表。该系列产品是一种无服务器计算组件,客户无需管理计算资源,只需提供相关代码并允许亚马逊云科技执行代码,亚马逊云科技就会围绕该代码提供一系列的相关应用,客户只需做好应用即可。

3、容器计算:容器化计算的所有应用都是基于容器,亚马逊云科技提供了一系列可以帮助客户开发容器化应用的服务;Amazon Fargate则让客户只需要创建容器,给出指令“这是我的容器,运行它”即可。

亚马逊云科技的自研芯片之旅

Chetan Kapoor透露,之前亚马逊云科技在很长时间里都是用英特尔、英伟达、AMD等合作伙伴的芯片,譬如Amazon EC2就是基于英特尔提供的芯片开发的,在机器学习领域采用了英伟达的GPU效果也非常不错。然而后续亚马逊云科技也不断收到客户的积极反馈,希望能够有更加细化的产品服务可供选择,帮助客户围绕某些应用降本增效,提升性能,以及更好地匹配应用需求。

“十年前亚马逊云科技开始做自研芯片,刚开始是Amazon Nitro虚拟化芯片,后面又开始打造Amazon Graviton CPU芯片。过去的四到五年里,我们的重点都是持续构建芯片来加速人工智能和机器学习应用的开发。”Chetan Kapoor介绍道,亚马逊云科技的自研芯片之旅是从开发Amazon Nitro芯片开始,它是帮助用户卸载虚拟化工作负载的专用芯片。通常硬件虚拟化的主要方式是让虚拟化软件在同一台服务器上运行,支持客户的工作负载。假设客户的服务器是48核心,那么大概需要预留10%-15%的算力来运行虚拟化软件。而Amazon Nitro是有自己独立CPU的芯片,具备单独完成虚拟化的能力,服务器就不需要承担虚拟化软件的资源开销,可以给客户交付更高性能的实例(云主机)。从此,亚马逊云科技就走上了定制芯片之路,也开始开发通用处理器,其中第一个版本就是4年前推出的Amazon Graviton。

除此之外,人工智能与机器学习也是客户向亚马逊云科技反馈较多的领域,尤其是当前深度学习模型的应用普及非常迅速,每年都会有十几倍的增长,训练这些深度学习模型需要消耗大量算力和成本,让许多企业不堪重负。为了帮助客户降低成本,亚马逊云科技开始进行自研深度学习推理芯片的开发,发布的第一款芯片就是2019年推出的Amazon Inferentia。随后亚马逊云科技又再接再厉推出了Amazon Trainium,主要针对机器学习训练工作负载。

在亚马逊云科技2022 re:Invent全球大会上,亚马逊云科技高级副总裁Peter DeSantis重磅发布了Nitro v5,其晶体管数量是前一代产品的2倍,提供了更多的计算性能,同时带来了50%的DRAM内存性能提升,2倍的PCle 带宽提升,每秒数据包速率(PPS) 提高60%,延迟改善30%,每瓦性能提高40%。亚马逊云科技CEO Adam Selipsky也在会上发布了下一代Amazon Inferentia2(简称Inf2),与Inf1实例相比可提供高3倍的计算性能、高4倍的吞吐量和低10倍的延迟。

定制芯片性能高成本低的奥秘

为什么与商用芯片相比,定制芯片既可以做到非常高的性能,又能够做到非常低的成本?

Chetan Kapoor揭晓了其中的奥秘:“因为专用芯片把运算能力都给到了客户,极大地提升了效率。以刚才介绍的Amazon Nitro为例,Nitro的特殊之处在于独立性,整个虚拟化是在独立的芯片和服务器运行,因此可以让客户得到服务器100%的算力资源,这也意味着客户得到的计算性能更高、成本更低。”

在Amazon Nitro芯片研发取得成功之后,亚马逊云科技就开始着手研发自己的处理器,希望能够帮助客户降低成本,提升效率。事实也证明,Amazon Graviton2的同规格实例性价比提升高达40%。而在人工智能与机器学习领域,亚马逊云科技也专门研发了针对机器学习推理的芯片,可以带来更好的性能、更低的成本以及更强的机器学习推理能力。与Amazon Graviton带来的收益类似,客户可以看到亚马逊云科技提供的机器学习芯片无论是用于模型训练还是日常生产,性价比都要比其他同类产品高出40%-50%。

在2022亚马逊云科技re:Invent全球大会上,亚马逊云科技高级副总裁Peter DeSantis还发布了Amazon Graviton3E 芯片以及高性能计算实例HPC7g、C7gn,与现有的Graviton系列产品相比,新的Amazon Graviton3E芯片无论是性能还是精度都有着更高的提升,其中对依赖矢量计算指令的工作负载其性能提高了35%。

定制芯片将会成为未来主流

从2006年3月14日亚马逊云科技发布第一个云存储服务Amazon Simple Storage Service(简称S3)至今,云计算已经走过了16年的发展历程。然而在Chetan Kapoor看来,其实一切还只是刚刚开始:“如今许多传统行业,包括金融和医疗等很多都还处于上云的初级阶段,很多企业还在用自建的数据中心,因此云计算在未来还有着非常广阔的发展前景。”

而对于定制芯片的未来,亚马逊全球副总裁兼CTO Werner Vogels博士有着这样的预测:“2023年定制芯片的使用将迅速增加。因此,随着工作负载将利用硬件优化来最大限度地提高性能,同时降低能耗和成本,创新的步伐将会进一步加快。”

Werner Vogels博士指出,在消费技术行业,定制芯片和定制硬件因为在性能上的显著提升而获得了迅速发展,但是商业应用程序和系统的情况却并非如此。然而随着定制芯片的普及和采用,这种情况将在未来几年迅速发生改变。亚马逊云科技近年来之所以在芯片设计上投入大量资金,正是因为亚马逊云科技知道客户的工作负载在定制芯片上运行,会具有更好的性能以及更高的成本效益。

“以机器学习工作负载为例,未来几年越来越多的工程师将会看到将工作负载转移到专为模型训练(Amazon Trainium)和推理(Amazon Inferentia)设计的芯片所带来的好处。通过使用基于Trainium的实例实现约50%的训练成本节省,或者使用基于Inferentia2的实例实现50%的每瓦特性能提升,工程师和企业都会注意到,我们将开始工作负载的大规模迁移。而在性能提升以及成本节约上的巨大优势,也将带来更多的实验、创新以及应用,并最终为其他特定工作负载提供更多的定制芯片,从而形成一个良性循环。”Werner Vogels博士表示。


趣味科技v 资深媒体人彭承文和他的小伙伴们耕耘打理的科技自媒体,传播趣味文章,八卦前卫科技,年度十大媒体人,十佳科技自媒体,美通社媒体传播专家,2018平昌冬奥会火炬手.
评论
  • 2024年初,OpenAI公布的Sora AI视频生成模型,震撼了国产大模型行业。随后国产厂商集体发力视频大模型,快手发布视频生成大模型可灵,字节跳动发布豆包视频生成模型,正式打响了国内AI视频生成领域第一枪。众多企业匆忙入局,只为在这片新兴市场中抢占先机,却往往忽视了技术成熟度与应用规范的打磨。以社交平台上泛滥的 AI 伪造视频为例,全红婵家人被恶意仿冒博流量卖货,明星们也纷纷中招,刘晓庆、张馨予等均曾反馈有人在视频号上通过AI生成视频假冒她。这些伪造视频不仅严重侵犯他人权
    用户1742991715177 2025-05-05 23:08 186浏览
  • Matter协议是一个由Amazon Alexa、Apple HomeKit、Google Home和Samsung SmartThings等全球科技巨头与CSA联盟共同制定的开放性标准,它就像一份“共生契约”,能让原本相互独立的家居生态在应用层上握手共存,同时它并非另起炉灶,而是以IP(互联网协议)为基础框架,将不同通信协议下的家居设备统一到同一套“语义规则”之下。作为应用层上的互通标准,Matter协议正在重新定义智能家居行业的运行逻辑,它不仅能向下屏蔽家居设备制造商的生态和系统,让设备、平
    华普微HOPERF 2025-05-08 11:40 471浏览
  • 在印度与巴基斯坦的军事对峙情境下,歼10C的出色表现如同一颗投入平静湖面的巨石,激起层层涟漪,深刻印证了“质量大于数量”这一铁律。军事领域,技术优势就是决定胜负的关键钥匙。歼10C凭借先进的航电系统、强大的武器挂载能力以及卓越的机动性能,在战场上大放异彩。它能够精准捕捉目标,迅速发动攻击,以一敌多却毫不逊色。与之形成鲜明对比的是,单纯依靠数量堆砌的军事力量,在面对先进技术装备时,往往显得力不从心。这一现象绝非局限于军事范畴,在当今社会的各个领域,“质量大于数量”都已成为不可逆转的趋势。在科技行业
    curton 2025-05-11 19:09 78浏览
  • 文/Leon编辑/cc孙聪颖‍《中国家族企业传承研究报告》显示,超四成“企二代” 明确表达接班意愿,展现出对家族企业延续发展的主动担当。中国研究数据服务平台(CNRDS)提供的精准数据进一步佐证:截至 2022 年,已有至少 280 家上市家族企业完成权杖交接,其中八成新任掌门人为创始人之子,凸显家族企业代际传承中 “子承父业” 的主流模式。然而,对于“企二代” 而言,接棒掌舵绝非易事。在瞬息万变的商业环境中,他们既要在白热化的市场竞争中开拓创新、引领企业突破发展瓶颈,又需应对来自父辈管理层的经
    华尔街科技眼 2025-05-06 18:17 64浏览
  • 这款无线入耳式蓝牙耳机是长这个样子的,如下图。侧面特写,如下图。充电接口来个特写,用的是卡座卡在PCB板子上的,上下夹紧PCB的正负极,如下图。撬开耳机喇叭盖子,如下图。精致的喇叭(HY),如下图。喇叭是由电学产生声学的,具体结构如下图。电池包(AFS 451012  21 12),用黄色耐高温胶带进行包裹(安规需求),加强隔离绝缘的,如下图。451012是电池包的型号,聚合物锂电池+3.7V 35mAh,详细如下图。电路板是怎么拿出来的呢,剪断喇叭和电池包的连接线,底部抽出PCB板子
    liweicheng 2025-05-06 22:58 725浏览
  • 飞凌嵌入式作为龙芯合作伙伴,隆重推出FET-2K0300i-S全国产自主可控工业级核心板!FET-2K0300i-S核心板基于龙芯2K0300i工业级处理器开发设计,集成1个64位LA264处理器,主频1GHz,提供高效的计算能力;支持硬件ECC;2K0300i还具备丰富的连接接口USB、SDIO、UART、SPI、CAN-FD、Ethernet、ADC等一应俱全,龙芯2K0300i支持四路CAN-FD接口,具备良好的可靠性、实时性和灵活性,可满足用户多路CAN需求。除性价比超高的国产处理器外,
    飞凌嵌入式 2025-05-07 11:54 118浏览
  • 文/郭楚妤编辑/cc孙聪颖‍相较于一众措辞谨慎、毫无掌舵者个人风格的上市公司财报,利亚德的财报显得尤为另类。利亚德光电集团成立于1995年,是一家以LED显示、液晶显示产品设计、生产、销售及服务为主业的高新技术企业。自2016年年报起,无论业绩优劣,董事长李军每年都会在财报末尾附上一首七言打油诗,抒发其对公司当年业绩的感悟。从“三年翻番顺大势”“智能显示我第一”“披荆斩棘幸从容”等词句中,不难窥见李军的雄心壮志。2012年,利亚德(300296.SZ)在深交所创业板上市。成立以来,该公司在细分领
    华尔街科技眼 2025-05-07 19:25 525浏览
  • UNISOC Miracle Gaming奇迹手游引擎亮点:• 高帧稳帧:支持《王者荣耀》等主流手游90帧高画质模式,连续丢帧率最高降低85%;• 丝滑操控:游戏冷启动速度提升50%,《和平精英》开镜开枪操作延迟降低80%;• 极速网络:专属游戏网络引擎,使《王者荣耀》平均延迟降低80%;• 智感语音:与腾讯GVoice联合,弱网环境仍能保持清晰通话;• 超高画质:游戏画质增强、超级HDR画质、游戏超分技术,优化游戏视效。全球手游市场规模日益壮大,游戏玩家对极致体验的追求愈发苛刻。紫光展锐全新U
    紫光展锐 2025-05-07 17:07 416浏览
  • 在过去的很长一段时间里,外卖市场呈现出美团和饿了么双寡头垄断的局面。美团凭借先发优势、强大的地推团队以及精细化的运营策略,在市场份额上长期占据领先地位。数据显示,截至2024年上半年,美团外卖以68.2%的市场份额领跑外卖行业,成为当之无愧的行业老大。其业务广泛覆盖,从一线城市的繁华商圈到二三线城市的大街小巷,几乎无处不在,为无数消费者提供便捷的外卖服务。饿了么作为阿里本地生活服务的重要一环,依托阿里强大的资金和技术支持,也在市场中站稳脚跟,以25.4%的份额位居第二。尽管市场份额上与美团有一定
    用户1742991715177 2025-05-06 19:43 136浏览
  • 随着智能驾驶时代到来,汽车正转变为移动计算平台。车载AI技术对存储器提出新挑战:既要高性能,又需低功耗和车规级可靠性。贞光科技代理的紫光国芯车规级LPDDR4存储器,以其卓越性能成为国产芯片产业链中的关键一环,为智能汽车提供坚实的"记忆力"支持。作为官方授权代理商,贞光科技通过专业技术团队和完善供应链,让这款国产存储器更好地服务国内汽车厂商。本文将探讨车载AI算力需求现状及贞光科技如何通过紫光国芯LPDDR4产品满足市场需求。 车载AI算力需求激增的背景与挑战智能驾驶推动算力需求爆发式
    贞光科技 2025-05-07 16:54 243浏览
  • 温度传感器的工作原理依据其类型可分为以下几种主要形式:一、热电阻温度传感器利用金属或半导体材料的电阻值随温度变化的特性实现测温:l ‌金属热电阻‌(如铂电阻 Pt100、Pt1000):高温下电阻值呈线性增长,稳定性高,适用于工业精密测温。l ‌热敏电阻‌(NTC/PTC):NTC 热敏电阻阻值随温度升高而下降,PTC 则相反;灵敏度高但线性范围较窄,常用于电子设备温控。二、热电偶传感器基于‌塞贝克效应‌(Seebeck effect):两种不同
    锦正茂科技 2025-05-09 13:31 336浏览
  • 硅二极管温度传感器是一种基于硅半导体材料特性的测温装置,其核心原理是利用硅二极管的电学参数(如正向压降或电阻)随温度变化的特性实现温度检测。以下是其工作原理、技术特点及典型应用:一、工作原理1、‌PN结温度特性‌硅二极管由PN结构成,当温度变化时,其正向电压 VF与温度呈线性负相关关系。例如,温度每升高1℃,VF约下降2 mV。2、‌电压—温度关系‌通过jing确测量正向电压的微小变化,可推算出环境温度值。部分型号(如SI410)在宽温域内(如1.4 K至475 K)仍能保持高线性度。
    锦正茂科技 2025-05-09 13:52 348浏览
  • 二位半 5线数码管的驱动方法这个2位半的7段数码管只用5个管脚驱动。如果用常规的7段+共阳/阴则需要用10个管脚。如果把每个段看成独立的灯。5个管脚来点亮,任选其中一个作为COM端时,另外4条线可以单独各控制一个灯。所以实际上最多能驱动5*4 = 20个段。但是这里会有一个小问题。如果想点亮B1,可以让第3条线(P3)置高,P4 置低,其它阳极连P3的灯对应阴极P2 P1都应置高,此时会发现C1也会点亮。实际操作时,可以把COM端线P3设置为PP输出,其它线为OD输出。就可以单独控制了。实际的驱
    southcreek 2025-05-07 15:06 702浏览
  • 后摄像头是长这个样子,如下图。5孔(D-,D+,5V,12V,GND),说的是连接线的个数,如下图。4LED,+12V驱动4颗LED灯珠,给摄像头补光用的,如下图。打开后盖,发现里面有透明白胶(防水)和白色硬胶(固定),用合适的工具,清理其中的胶状物。BOT层,AN3860,Panasonic Semiconductor (松下电器)制造的,Cylinder Motor Driver IC for Video Camera,如下图。TOP层,感光芯片和广角聚焦镜头组合,如下图。感光芯片,看着是玻
    liweicheng 2025-05-07 23:55 598浏览
  • ‌一、高斯计的正确选择‌1、‌明确测量需求‌‌磁场类型‌:区分直流或交流磁场,选择对应仪器(如交流高斯计需支持交变磁场测量)。‌量程范围‌:根据被测磁场强度选择覆盖范围,例如地球磁场(0.3–0.5 G)或工业磁体(数百至数千高斯)。‌精度与分辨率‌:高精度场景(如科研)需选择误差低于1%的仪器,分辨率需匹配微小磁场变化检测需求。2、‌仪器类型选择‌‌手持式‌:便携性强,适合现场快速检测;‌台式‌:精度更高,适用于实验室或工业环境。‌探头类型‌:‌横向/轴向探头‌:根据磁场方向选择,轴向探头适合
    锦正茂科技 2025-05-06 11:36 475浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦