从全球云计算技术的开创者,到生成式AI技术的普惠者,亚马逊云科技正在用生成式AI重塑世界。
生成式AI正在重塑世界
人类历史上每一次重大的科技创新,往往都会带来世界的重塑。作为全球云计算技术的开创者和领军者,亚马逊云科技通过弹性、敏捷、按需付费的云服务,在无数企业的数字化转型之路上发挥了极其重要的作用。
从诞生至今,亚马逊云科技的基础设施已经覆盖了全球33个地理区域的105个可用区,可提供涵盖计算、存储、网络、安全合规、数据库、数据分析、人工智能、物联网、混合云等领域超过200项的云服务功能,拥有专业的行业解决方案服务团队以及遍布全球的合作伙伴网络,并且每年都在持续推陈出新,帮助客户以更低的价格、更高的效率开展业务创新。
通过亚马逊云科技的计算、存储和遍布全球的服务网络,Netflix正在为全球190多个国家提供流媒体播放服务,彻底改变了广大用户的娱乐方式;Moderna利用亚马逊云科技的机器学习服务,在疫情期间仅用短短两天就完成了mRNA新冠疫苗的基因测序,并在25天后进行了第一批临床试验,这些工作在过去往往需要耗时好几年;OPPO通过亚马逊云科技提供的云服务,将业务快速拓展至全球,实现了从制造业巨头到互联网手机品牌的转型;WPS AI办公软件携手亚马逊云科技将生成式AI能力全面引入产品线,帮助用户显著提升了工作效率,改善了办公体验……
如今,伴随着生成式AI与大模型技术的飞速发展,一个前所未有的、高度智能化的生成式AI时代正在来临。在2024亚马逊云科技中国峰会上,亚马逊云科技大中华区产品总经理陈晓建表示,为了推动生成式AI应用落地,亚马逊云科技推出了全面的三层技术栈,分别是底层用于基础模型训练和推理的基础设施、中间层使用基础模型进行构建的工具、顶层利用基础模型构建的应用程序。通过在每一层技术栈的持续创新,亚马逊云科技大幅降低了生成式AI应用落地的门槛,以技术普惠推动了生成式AI应用的加速普及。
用于基础模型训练和推理的基础设施
亚马逊云科技生成式AI三层技术栈的底层,是以GPU和自研芯片为代表的基础设施,用于基础模型的训练,以及在生产环境中运行推理。其中基础模型训练的目的,是通过从大量训练数据中学习来创建和改进基础模型;而基础模型推理,则是使用这些模型来生成文本、图像、视频等输出。
基础模型的训练和推理,都需要海量的算力支持。这就使得许多客户在运行训练和推理工作负载时,不得不综合考虑芯片和计算实例的性价比与经济可行性。有鉴于此,亚马逊云科技可以根据客户的实际需求与预算成本,为其量身定制包括英特尔、英伟达、AMD以及亚马逊云科技自研芯片在内的广泛计算实例,以及开箱即用的解决方案。通过这些量身定制的芯片和计算实例,客户不但可以满足自身的算力需求,而且能够大幅提高训练和推理的能效,减少耗费的资源,降低成本与开支。
与此同时,亚马逊云科技的Amazon SageMaker托管机器学习服务,还可以帮助开发人员更加轻松地构建、训练、微调和部署基础模型,加速生成式AI创新。借助Amazon SageMaker HyperPod,机器学习公司Hugging Face将训练模型时间减少了40%,一年节省了数百小时训练时间,大幅提升了训练效率;Amazon SageMaker Jumpstart则可以帮助客户获取、微调和部署最新公开可用的预训练基础模型,为机器学习从业者提供深度模型定制和评估功能。
陈晓建还在本届峰会上宣布,来自零一万物的Yi-1.5 6B/9B/34B的基础模型在中国区域正式登陆SageMaker Jumpstart,由百川智能提供的Baichuan-2 7B基础模型也即将上线中国区域的SageMaker Jumpstart。作为首批登陆中国区域SageMaker JumpStart的中文基础模型,它们在为中国企业提供丰富模型选择的同时,也满足了企业对安全合规、快速扩展、免运维的需求。这不仅标志着亚马逊云科技对于中国区投入的长期承诺,也展示了其与国内合作伙伴共同赋能客户生成式AI业务的决心。
使用基础模型加速生成式AI应用构建
亚马逊云科技生成式AI三层技术栈的中间层,是以Amazon Bedrock为代表的,提供可以访问所需基础模型,以及构建和扩展生成式AI应用的工具。
陈晓建表示,没有一个基础模型能够适用所有生成式AI场景,为此亚马逊云科技推出了Amazon Bedrock,来帮助客户简化评估、比较和选择基础模型的过程。“Amazon Bedrock是使用基础模型构建和扩展生成式AI应用程序的最简单方式,几乎所有行业的客户都在使用Amazon Bedrock来重塑用户体验、产品和流程,将生成式AI融入核心业务。与此同时,Amazon Bedrock还提供了模型选择、模型定制、应用集成、负责任AI等四大差异化价值,让生成式AI触手可及。”
1、模型选择:作为一项全托管服务,Amazon Bedrock可以让用户通过单一API访问来自AI21 Labs、Anthropic、Cohere、Meta、Mistral AI、Stability AI和亚马逊等领先人工智能公司的高性能基础模型,包括在第一时间使用和访问这些公司未来发布的最新基础模型。甚至基于Llama, Mistral和Flan T5等开源架构微调过的私有模型,也可以导入Amazon Bedrock进行全托管,而无需管理底层基础设施。
2、模型定制:自定义模型导入功能Custom Model Import for Amazon Bedrock,让用户可以将基于Llama, Mistral和Flan-T5开发的定制模型导入Bedrock,以完全托管的API方式进行访问;模型评估功能Model Evaluation for Amazon Bedrock,让企业既可以用Amazon SageMaker来持续预训练或者微调一个定制化模型,又能够充分享受Bedrock的诸多模型管理功能,无需管理底层设施;模型评估功能Model Evaluation for Amazon Bedrock,能够帮助客户找到最适合自己的模型,并简化评估、比较和选择基础模型的过程,将模型评估过程从几个星期缩短到几个小时;知识库功能Knowledge Base for Amazon Bedrock,可帮助企业基于私有的数据创建与业务相关的生成式AI应用,以及利用企业系统和数据源定制个性化的生成式AI应用;代理功能Agents for Amazon Bedrock,可以允许开发人员定义特定任务、工作流程或决策过程,增强控制和自动化,同时确保与预期用例保持一致。
3、应用集成:作为一站式生成式AI应用开发工作站,Amazon Bedrock Studio提供了支持单点登录的Web界面,让开发者可以快速访问和使用多种基础模型以及Bedrock知识库、Bedrock Agents、Bedrock Guardrails等Amazon Bedrock内置服务和工具,加快构建生成式AI应用。用户可以使用简单易用的交互界面进行模型选择与评估,还可以与团队成员协作,共同试验、创建和完善生成式AI应用。
4、负责任AI:以安全、可信和负责任的方式部署生成式AI,是亚马逊在生成式AI领域的最高行动纲领。亚马逊云科技承诺以负责任的方式构建服务,同时重点考虑公平和偏见、稳定性、可解释性、治理、透明度、隐私和安全性等6大方面。在保护数据安全和隐私方面,Amazon Bedrock承诺不会使用客户的数据来训练或改进原始的基础模型,客户的数据也永远不会被暴露于公共互联网、永远不会离开亚马逊云科技的网络,它将通过虚拟私有云进行安全传输,并且在传输和存储时始终加密。Amazon Bedrock Guardrails不但可以帮助客户轻松实施生成式AI应用程序的保护措施,阻止多达85%的有害内容,还能够根据客户要求和负责任AI政策进行定制。
开箱即用的生成式AI应用
亚马逊云科技生成式AI三层技术栈的顶层,是以Amazon Q为代表的,利用基础模型构建的开箱即用的生成式AI应用。这样用户无需任何专业知识,即可快速上手生成式AI。
作为一款强大的生成式AI助手应用,Amazon Q从一开始就着眼于安全性和隐私性进行了构建,能够帮助用户加速软件开发,并更好地利用企业业务数据。亚马逊云科技最新发布的Amazon Q Developer、Amazon Q Business、Amazon Q in QuickSight,目前均已正式可用。
其中,Amazon Q Developer可以协助开发人员完成从编码、测试、升级应用到故障排查、安全扫描和修复、优化云资源等繁琐工作,让开发者将更多时间精力专注于创新体验的开发,加快应用部署速度。在大规模消除技术门槛、提升开发者效率、提升代码质量与安全性等方面,Amazon Q Developer的表现都有口皆碑。
Amazon Q Business的愿景,是让每一家企业都能够通过生成式AI的力量,从所有数据(非结构化和结构化)中获得洞见,采取行动并构建应用程序。其四大应用场景包括:统一的对话检索式体验、生成总结与提炼关键发现、提升内容创作的效率、简化任务流程。除此以外,Amazon Q Business新发布的Amazon Q Apps功能,还可以让企业员工只需几秒钟,就可以通过自然语言对话构建生成式AI应用。
大力培养生成式AI人才
伴随着生成式AI的飞速发展,生成式AI人才的紧缺问题也愈发突出。为了大力培养生成式AI人才,亚马逊云科技采取了多项举措:
1、到2025年,亚马逊云科技将为全球2,900万人提供免费培训,目前已经有2,100万人受益。
2、通过Amazon Skill Builder和Amazon Educate,亚马逊云科技提供了超过100门关于人工智能、机器学习、生成式AI的课程和学习资源。
3、亚马逊云科技在全球54个国家拥有250多名亚马逊云科技专家,这些被称为亚马逊云科技Hero的专家,对知识分享的热情给社区带来了积极影响。与此同时,亚马逊云科技还有2,900名社区建设者、超过500个用户组以及超过75个云俱乐部。
4、在本届中国峰会上,亚马逊云科技正式发布了全景培训课程《对话构建者,LLM从入门到实践》。这是亚马逊云科技为中国开发者量身定制、能够真正帮助用户从基础到应用的课程,开发者可以在CSDN课程网站永久免费观看。
5、亚马逊云科技正式推出了云上探索实验室CloudLab平台。用户不需要注册账号、不需要购买云资源,只要扫码进入云上探索实验室,即可以在24小时之内无限构建生成式AI应用。
“今天我们所有人都有幸处在下一个技术变革的伟大时代。我们每个人的创新,都将对世界产生深远的影响,改变行业,甚至改变人类的生活。”陈晓建说道。