2023re:Invent亚马逊云科技再次重构云计算,开创企业级生成式AI时代

电子科技世界 2023-11-30 17:17

2023亚马逊云科技re:Invent第二天,亚马逊云科技首席执行官Adam Selipsky在两个半小时的演讲中,重点围绕重构云基础架构、重构计算、重构存储、重构企业级生成式AI等主题,宣布了多项重磅发布,助力云上客户快速实现数字化转型,提高企业生成式AI创新速度。

 

 四大重构突破想象

 全栈生成式AI能力

 重构基础设施

 亚马逊云科技目前在全球拥有32个区域,每个区域都有3个或者更多的可用区(AZ),每个可用区在物理层面上来讲都是单独隔离,同时与冗余光纤网络互联,拥有冗余的供电、用水。当电力关停或者是有高峰使用的流量,其他可用区都完全可以不受影响,可以继续独立地运营。

 重构存储

  • 重磅发布:高性能、低延迟的对象存储服务Amazon S3 Express One Zone

 亚马逊云科技始终坚持革新,持续推出一系列创新存储服务,如用于归档数据的Amazon S3 Glacier存储和自动优化成本的Intelligent Tiering。Intelligent Tiering通过在存储层之间根据访问模式自动切换存储类型,帮助亚马逊云科技全球客户节省了超过20亿美元,体现了亚马逊云科技通过持续释放技术红利帮助客户更好的在云上创新的理念。

 在本次大会中,Adam还正式发布了高性能、低延迟的对象存储服务Amazon S3 Express One Zone,可用于访问性能要求最高的数据存储。该服务旨在为延迟敏感的应用提供个位数毫秒级延迟的高性能,以支持每分钟数百万请求、每秒数十万次的数据访问。Amazon S3 Express One Zone的数据访问速度比Amazon S3标准版快10倍,请求成本降低50%,计算成本降低60%。

 重构计算

 亚马逊云科技还洞察到,客户对提升云上算力,提升性价比的需求不断攀升。而云需要从芯片级开始对算力进行全面创新。2018年,亚马逊云科技发布第一代Graviton芯片,成为全球首家开发处理器的云厂商。今年,亚马逊云科技已拥有超过150种基于Graviton的实例,全球超过5万客户在使用Graviton处理器,包含TOP100名的客户也在使用Graviton这样的实例来获取性价比优势。例如SAP,他们在使用Graviton服务之后,成本降低了35%,而且分析速度更快,同时减少了45%的碳排放量。

  • 重磅发布:全新一代Graviton处理器——Amazon Graviton4

 Adam还宣布发布全新一代Graviton处理器——Amazon Graviton4。相比Graviton3,它的核心多出50%,内存带宽提升75%,Graviton4芯片速度较Graviton3提升30%,对于数据库和Java应用等关键工作负载方面实现了更显著的性能提升,分别提升了40%和45%。

  • 重磅发布:首个基于Graviton4的实例R8g Instances for EC2

 R8g是第一个基于Graviton4的实例,现在就可提供预览。R8g作为内存优化型实例,能够更好地支持大规模数据库、实时大数据分析等应用,可提供最佳的价格性能,且减少能源消耗。未来,亚马逊云科技将有更多的Graviton4的实例陆续发布。

 重构生成式AI

 亚马逊云科技总是在不断重构,为客户提供基础架构,帮助客户释放创新能力。在过去的几十年里,亚马逊云科技一直在AI领域进行创新,从将AI广泛应用于亚马逊庞大的零售和业务运营中积累了大量宝贵经验,为帮助客户利用生成式AI的力量重塑业务提供了策略指导。在重构生成式AI的过程中,亚马逊云科技拥有更广泛和深入的功能,具备更好性价比,同时具有必要的安全性和隐私性。

 谈到全栈生成式AI,它包括同样重要的三个层级。亚马逊云科技在不断重构三个层级:最底层是训练和推理的基础设施层,中间层是我们所有的微调模型需求的工具服务,上层是构建生成式AI应用层。

 在生成式AI基础设施层,亚马逊云科技正努力优化解决方案,如EC2 GPU实例,以提供高效训练和运行基础模型所需的高性能计算能力,同时降低成本。在这个领域亚马逊云科技与NVIDIA拥有超过十年的合作经验,使亚马逊云科技成为首家提供NVIDIA全新GH100 Grace Hopper数据中心GPU访问的云服务提供商。这款新的超级芯片专为加速大型语言模型的训练和推理而设计,这些模型是生成式AI应用的基本组成部分。

  • 重磅发布:亚马逊云科技成为首家推出NVIDIA GH200 NVL32实例的云厂商

 NVIDIA创始人、CEO Jensen Huang宣布,亚马逊云科技成为首家推出NVIDIA GH200 NVL32实例的云厂商。这款实例带有32个GH200超级芯片,它们之间通过高达900GB/s NVLink网络进行互联,形成一个具有高达20TB共享内存的实例,可用于加速训练具有1万亿参数的AI大模型。

  • 重磅发布:全新一代Amazon Trainium2芯片

 基于训练芯片Trainium的成功经验,Adam正式发布了全新一代Trainium2芯片。它拥有数千亿甚至数万亿个参数的基础模型训练做了优化,性能比上一代芯片提高到4倍,拥有65 EFlops可以按需提供性能支持。明星生成式AI企业Anthropic计划用Trainium2芯片构建模型。

 在进行创新的时候,亚马逊云科技会在各种不同的FM还有API之间交互,Amazon Bedrock能够提供各式各样模型,例如AI21 labs、Anthropic、Cohere、Meta,还有Amazon Titan模型。此外亚马逊云科技也是首个集成Meta Llama 2模型的云厂商。

  • 重磅发布:亚马逊云科技与Anthropic深化合作关系

 Adam强调了在快速发展的人工智能领域中,客户灵活选择权的重要性。为了实现这一目标,亚马逊云科技持续拓展与业界领先的创新公司,比如开创性的AI初创公司Anthropic的合作。通过与Anthropic建立新的合作关系,后者将利用亚马逊云科技的专用机器学习芯片Trainium来训练他们的下一代复杂Claude模型。Amazon Bedrock的客户还将享有独家早期使用权,体验其他地方无法使用的先进Claude定制和微调模型功能。

  • 重磅发布:Amazon Bedrock全新功能,包括模型的微调、检索增强生成(RAG)以及基于Amazon Titan大模型的预训练

 在生成式AI的顶层,另一个关键层面是通过Amazon Bedrock为客户提供简单快速和安全地访问各种基础模型的API的途径。Amazon Bedrock在两个月前推出,已经吸引了超过10,000名来自各个行业的活跃客户使用它来快速构建和扩展生成式AI应用。Adam也发布了Amazon Bedrock的全新功能,包括模型的微调、检索增强生成(RAG)以及基于Amazon Titan大模型的预训练。

  • 重磅发布:正式推出Agents for Amazon Bedrock

 借助全新GA的 Agents for Amazon Bedrock,用户可以通过简单的几个步骤创建和部署完全托管式的Agent,通过动态调用API来执行复杂的业务任务。Amazon Bedrock可以根据用户提供的自然语言指令完成任务所需的API架构。

 负责任的AI

  • 重磅发布:Guardrails for Amazon Bedrock

 在亚马逊云科技致力于以负责任的方式开发AI,Adam本次针对生成式AI的安全,全新发布Guardrails for Amazon Bedrock预览版,根据应用程序需求和AI政策定制保障措施。Guardrails可以跨基础模型,为所有应用程序提供一致的AI安全级别,阻止生成式AI应用程序中不需要的话题,根据AI策略过滤有害内容等。生成式AI一定要是安全的,是负责任的,这是亚马逊云科技的Job Zero。

  • 重磅发布:企业生成式AI助手Amazon Q

 Adam发布了企业应用助手Amazon Q,它由亚马逊云科技17年来积累的知识和经验训练而成,改变了开发者和IT人员在亚马逊云科技上构建、部署和运维应用程序和工作负载的方式。客户可以通过亚马逊云科技管理控制台、文档页面、IDE、Slack或其他第三方对话应用程序的聊天界面访问Amazon Q。Amazon Q为Amazon QuickSight、Amazon Connect提供全新基于生成式AI的助理。这些应用是Amazon Q广泛应用的一个开始。

 通过以上发布,亚马逊云科技已经构建面向全栈生成式AI应用的服务。

电子科技世界 关注电子行业最新动态
评论
  • 职场是人生的重要战场,既是谋生之地,也是实现个人价值的平台。然而,有些思维方式却会悄无声息地拖住你的后腿,让你原地踏步甚至退步。今天,我们就来聊聊职场中最忌讳的五种思维方式,看看自己有没有中招。1. 固步自封的思维在职场中,最可怕的事情莫过于自满于现状,拒绝学习和改变。世界在不断变化,行业的趋势、技术的革新都在要求我们与时俱进。如果你总觉得自己的方法最优,或者害怕尝试新事物,那就很容易被淘汰。与其等待机会找上门,不如主动出击,保持学习和探索的心态。加入优思学院,可以帮助你快速提升自己,与行业前沿
    优思学院 2025-01-09 15:48 122浏览
  • 车机导航有看没有懂?智能汽车语系在地化不可轻忽!随着智能汽车市场全球化的蓬勃发展,近年来不同国家地区的「Automotive Localization」(汽车在地化)布局成为兵家必争之地,同时也是车厂在各国当地市场非常关键的营销利器。汽车在地化过程中举足轻重的「汽车语系在地化」,则是透过智能汽车产品文字与服务内容的设计订制,以对应不同国家地区用户的使用习惯偏好,除了让当地车主更能清楚理解车辆功能,也能进一步提高品牌满意度。客户问题与难处某车厂客户预计在台湾市场推出新一代车款,却由于车机导航开发人
    百佳泰测试实验室 2025-01-09 17:47 80浏览
  • 在当前人工智能(AI)与物联网(IoT)的快速发展趋势下,各行各业的数字转型与自动化进程正以惊人的速度持续进行。如今企业在设计与营运技术系统时所面临的挑战不仅是技术本身,更包含硬件设施、第三方软件及配件等复杂的外部因素。然而这些系统往往讲究更精密的设计与高稳定性,哪怕是任何一个小小的问题,都可能对整体业务运作造成严重影响。 POS应用环境与客户需求以本次分享的客户个案为例,该客户是一家全球领先的信息技术服务与数字解决方案提供商,遭遇到一个由他们所开发的POS机(Point of Sal
    百佳泰测试实验室 2025-01-09 17:35 140浏览
  • 在智能网联汽车中,各种通信技术如2G/3G/4G/5G、GNSS(全球导航卫星系统)、V2X(车联网通信)等在行业内被广泛使用。这些技术让汽车能够实现紧急呼叫、在线娱乐、导航等多种功能。EMC测试就是为了确保在复杂电磁环境下,汽车的通信系统仍然可以正常工作,保护驾乘者的安全。参考《QCT-基于LTE-V2X直连通信的车载信息交互系统技术要求及试验方法-1》标准10.5电磁兼容试验方法,下面将会从整车功能层面为大家解读V2X整车电磁兼容试验的过程。测试过程揭秘1. 设备准备为了进行电磁兼容试验,技
    北汇信息 2025-01-09 11:24 121浏览
  • 一个真正的质量工程师(QE)必须将一件产品设计的“意图”与系统的可制造性、可服务性以及资源在现实中实现设计和产品的能力结合起来。所以,可以说,这确实是一种工程学科。我们常开玩笑说,质量工程师是工程领域里的「侦探」、「警察」或「律师」,守护神是"墨菲”,信奉的哲学就是「墨菲定律」。(注:墨菲定律是一种启发性原则,常被表述为:任何可能出错的事情最终都会出错。)做质量工程师的,有时会不受欢迎,也会被忽视,甚至可能遭遇主动或被动的阻碍,而一旦出了问题,责任往往就落在质量工程师的头上。虽然质量工程师并不负
    优思学院 2025-01-09 11:48 142浏览
  • 在过去十年中,自动驾驶和高级驾驶辅助系统(AD/ADAS)软件与硬件的快速发展对多传感器数据采集的设计需求提出了更高的要求。然而,目前仍缺乏能够高质量集成多传感器数据采集的解决方案。康谋ADTF正是应运而生,它提供了一个广受认可和广泛引用的软件框架,包含模块化的标准化应用程序和工具,旨在为ADAS功能的开发提供一站式体验。一、ADTF的关键之处!无论是奥迪、大众、宝马还是梅赛德斯-奔驰:他们都依赖我们不断发展的ADTF来开发智能驾驶辅助解决方案,直至实现自动驾驶的目标。从新功能的最初构思到批量生
    康谋 2025-01-09 10:04 123浏览
  • 光伏逆变器是一种高效的能量转换设备,它能够将光伏太阳能板(PV)产生的不稳定的直流电压转换成与市电频率同步的交流电。这种转换后的电能不仅可以回馈至商用输电网络,还能供独立电网系统使用。光伏逆变器在商业光伏储能电站和家庭独立储能系统等应用领域中得到了广泛的应用。光耦合器,以其高速信号传输、出色的共模抑制比以及单向信号传输和光电隔离的特性,在光伏逆变器中扮演着至关重要的角色。它确保了系统的安全隔离、干扰的有效隔离以及通信信号的精准传输。光耦合器的使用不仅提高了系统的稳定性和安全性,而且由于其低功耗的
    晶台光耦 2025-01-09 09:58 105浏览
  • 1月9日,在2025国际消费电子展览会(CES)期间,广和通发布集智能语音交互及翻译、4G/5G全球漫游、随身热点、智能娱乐、充电续航等功能于一体的AI Buddy(AI陪伴)产品及解决方案,创新AI智能终端新品类。AI Buddy是一款信用卡尺寸的掌中轻薄智能设备,为用户带来实时翻译、个性化AI语音交互助手、AI影像识别、多模型账户服务、漫游资费服务、快速入网注册等高品质体验。为丰富用户视觉、听觉的智能化体验,AI Buddy通过蓝牙、Wi-Fi可配套OWS耳机、智能眼镜、智能音箱、智能手环遥
    物吾悟小通 2025-01-09 18:21 120浏览
  • HDMI 2.2 规格将至,开启视听新境界2025年1月6日,HDMI Forum, Inc. 宣布即将发布HDMI规范2.2版本。新HDMI规范为规模庞大的 HDMI 生态系统带来更多选择,为创建、分发和体验理想的终端用户效果提供更先进的解决方案。新技术为电视、电影和游戏工作室等内容制作商在当前和未来提供更高质量的选择,同时实现多种分发平台。96Gbps的更高带宽和新一代 HDMI 固定比率速率传输(Fixed Rate Link)技术为各种设备应用提供更优质的音频和视频。终端用户显示器能以最
    百佳泰测试实验室 2025-01-09 17:33 162浏览
  • 根据环洋市场咨询(Global Info Research)项目团队最新调研,预计2030年全球中空长航时无人机产值达到9009百万美元,2024-2030年期间年复合增长率CAGR为8.0%。 环洋市场咨询机构出版了的【全球中空长航时无人机行业总体规模、主要厂商及IPO上市调研报告,2025-2031】研究全球中空长航时无人机总体规模,包括产量、产值、消费量、主要生产地区、主要生产商及市场份额,同时分析中空长航时无人机市场主要驱动因素、阻碍因素、市场机遇、挑战、新产品发布等。报告从中空长航时
    GIRtina 2025-01-09 10:35 135浏览
  • Snyk 是一家为开发人员提供安全平台的公司,致力于协助他们构建安全的应用程序,并为安全团队提供应对数字世界挑战的工具。以下为 Snyk 如何通过 CircleCI 实现其“交付”使命的案例分析。一、Snyk 的挑战随着客户对安全工具需求的不断增长,Snyk 的开发团队面临多重挑战:加速交付的需求:Snyk 的核心目标是为开发者提供更快、更可靠的安全解决方案,但他们的现有 CI/CD 工具(TravisCI)运行缓慢,无法满足快速开发和部署的要求。扩展能力不足:随着团队规模和代码库的不断扩大,S
    艾体宝IT 2025-01-10 15:52 102浏览
  • 1月7日-10日,2025年国际消费电子产品展览会(CES 2025)盛大举行,广和通发布Fibocom AI Stack,赋智千行百业端侧应用。Fibocom AI Stack提供集高性能模组、AI工具链、高性能推理引擎、海量模型、支持与服务一体化的端侧AI解决方案,帮助智能设备快速实现AI能力商用。为适应不同端侧场景的应用,AI Stack具备海量端侧AI模型及行业端侧模型,基于不同等级算力的芯片平台或模组,Fibocom AI Stack可将TensorFlow、PyTorch、ONNX、
    物吾悟小通 2025-01-08 18:17 91浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦