COMPUTEX2023|NVIDIAACE游戏开发版利用生成式AI使虚拟角色栩栩如生

英伟达NVIDIA中国 2023-05-29 22:16

全新代工服务为云端及 PC 的游戏角色产生出定制化生成式 AI 模型



COMPUTEX2023 年 5 月 29 日NVIDIA 宣布推出全新定制 AI 模型代工服务 NVIDIA ACE 游戏开发版 (NVIDIA Avatar Cloud Engine (ACE) for Games),利用 AI 驱动的自然语言交互技术,为游戏中的非玩家角色(NPC)带来智能,从而改变游戏体验。


中间件、工具及游戏开发者可以使用 “ACE 游戏开发版 (ACE for Games)” 在他们的游戏和应用中建立和部署定制的语音、对话及动画 AI 模型。


NVIDIA 开发者与性能技术部门副总裁 John Spitzer 表示:“生成式 AI 将彻底改变玩家与游戏人物之间的互动方式,并极大地提高游戏沉浸感。基于我们在 AI 领域的专业知识,加上几十年来与游戏开发者合作的经验,NVIDIA 正率先在游戏中使用生成式 AI。”


率先在游戏中使用生成式 AI


在 NVIDIA Omniverse™ 的基础上,“ACE 游戏开发版 (ACE for Games)”为语音、对话和角色动画提供优化的AI基础模型,包括:


  • NVIDIA NeMo™ 大型语言模型(LLM):使用专有数据构建、自定义和部署语言模型。根据游戏故事的世界观及人物背景来定制调整 LLM,并且通过NeMo Guardrails 来保护对话不会出现产生相反效果或不安全的内容。

  • NVIDIA Riva:用于自动语音识别(ASR)及文本转语音,以启用实时语音对话。

  • NVIDIA Omniverse Audio2Face:用于配合语音音轨,实时为游戏角色创建脸部表情动画。Audio2Face 搭配用于虚幻引擎 5 的 Omniverse Connector,开发者可以直接将脸部动画添加到 MetaHuman 的角色上。


开发者可以整合整套 “NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)” 解决方案,或是单独使用自己需要的组件。


“Kairos” 让人一窥未来游戏发展的样貌


NVIDIA 和参与 NVIDIA Inception 计划的初创公司 Convai 合作,展示游戏开发者如何在不久之后使用 “NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)” 来构建 NPC。Convai 将 ACE 模块与他们的端到端实时虚拟人平台相集成,旨在为虚拟游戏开发尖端的对话式 AI。


在名为 Kairos 的演示中,玩家与拉面店老板 Jin 进行互动。Jin 虽然只是一个 NPC,却能在生成式 AI 的帮助下配合叙事背景,逼真回答自然语言的问题。欢迎观看这个由 Unreal Engine 5 使用最新光线追踪功能和 NVIDIA DLSS 渲染出的演示内容。


Convai 创始人兼首席执行官 Purnendu Mukherjee 表示:“Convai 通过使用 ‘NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)’,让我们的工具可以达到所需的延迟和绝佳要求,这样每个开发者便能以低成本的方式使用 AI 打造 NPC。


在本地或云部署 NVIDIA ACE 游戏模型


支持 “NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)” 的神经网络针对多项功能进行优化,在规模、性能和质量方面进行各种取舍。“ACE 游戏开发版 (ACE for Games)” 代工服务将协助开发者微调游戏模型,然后通过 NVIDIA DGX™ Cloud,GeForce RTX™ PC 或现场加以部署,以实时进行推理。


游戏中沉浸式互动性的交互对延迟有着极为严苛的要求,因此这些模型的延迟性能均调整到最佳状态。


生成式 AI 将改变游戏体验


游戏开发者与初创公司已在其工作流上使用 NVIDIA 生成式 AI 技术。


  1. 欧洲知名游戏开发者之一的 GSC Game World,将在即将推出的《潜行者 2:切尔诺贝利之心》(S.T.A.L.K.E.R. 2:Heart of Chornobyl)中采用 Audio2Face。

  2. 独立游戏开发者 Fallen Leaf 用 Audio2Face 来制作《索利斯堡》(FORT SOLIS)中角色的脸部动画,《索利斯堡》(FORT SOLIS)是一款以火星为背景的第三人称科幻惊悚动作游戏。

  3. 使用 AI 来制作虚拟角色的 Charisma.ai,通过 Audio2Face 来制作对话引擎中的动画。


欢迎了解更多使用 NVIDIA ACE 在 NVIDIA Omniverse 上构建的内容,以及 COMPUTEX 其他最新技术发展。



点击 “阅读原文”,或扫描下方海报二维码观看 NVIDIA 创始人兼 CEO 黄仁勋为 COMPUTEX 2023 带来的主题演讲直播回放,了解 AI、图形及其他领域的最新进展!

评论
  • PNT、GNSS、GPS均是卫星定位和导航相关领域中的常见缩写词,他们经常会被用到,且在很多情况下会被等同使用或替换使用。我们会把定位导航功能测试叫做PNT性能测试,也会叫做GNSS性能测试。我们会把定位导航终端叫做GNSS模块,也会叫做GPS模块。但是实际上他们之间是有一些重要的区别。伴随着技术发展与越发深入,我们有必要对这三个词汇做以清晰的区分。一、什么是GPS?GPS是Global Positioning System(全球定位系统)的缩写,它是美国建立的全球卫星定位导航系统,是GNSS概
    德思特测试测量 2025-01-13 15:42 498浏览
  • 01. 什么是过程能力分析?过程能力研究利用生产过程中初始一批产品的数据,预测制造过程是否能够稳定地生产符合规格的产品。可以把它想象成一种预测。通过历史数据的分析,推断未来是否可以依赖该工艺持续生产高质量产品。客户可能会要求将过程能力研究作为生产件批准程序 (PPAP) 的一部分。这是为了确保制造过程能够持续稳定地生产合格的产品。02. 基本概念在定义制造过程时,目标是确保生产的零件符合上下规格限 (USL 和 LSL)。过程能力衡量制造过程能多大程度上稳定地生产符合规格的产品。核心概念很简单:
    优思学院 2025-01-12 15:43 530浏览
  • ARMv8-A是ARM公司为满足新需求而重新设计的一个架构,是近20年来ARM架构变动最大的一次。以下是对ARMv8-A的详细介绍: 1. 背景介绍    ARM公司最初并未涉足PC市场,其产品主要针对功耗敏感的移动设备。     随着技术的发展和市场需求的变化,ARM开始扩展到企业设备、服务器等领域,这要求其架构能够支持更大的内存和更复杂的计算任务。 2. 架构特点    ARMv8-A引入了Execution State(执行状
    丙丁先生 2025-01-12 10:30 471浏览
  • 随着数字化的不断推进,LED显示屏行业对4K、8K等超高清画质的需求日益提升。与此同时,Mini及Micro LED技术的日益成熟,推动了间距小于1.2 Pitch的Mini、Micro LED显示屏的快速发展。这类显示屏不仅画质卓越,而且尺寸适中,通常在110至1000英寸之间,非常适合应用于电影院、监控中心、大型会议、以及电影拍摄等多种室内场景。鉴于室内LED显示屏与用户距离较近,因此对于噪音控制、体积小型化、冗余备份能力及电气安全性的要求尤为严格。为满足这一市场需求,开关电源技术推出了专为
    晶台光耦 2025-01-13 10:42 511浏览
  • 流量传感器是实现对燃气、废气、生活用水、污水、冷却液、石油等各种流体流量精准计量的关键手段。但随着工业自动化、数字化、智能化与低碳化进程的不断加速,采用传统机械式检测方式的流量传感器已不能满足当代流体计量行业对于测量精度、测量范围、使用寿命与维护成本等方面的精细需求。流量传感器的应用场景(部分)超声波流量传感器,是一种利用超声波技术测量流体流量的新型传感器,其主要通过发射超声波信号并接收反射回来的信号,根据超声波在流体中传播的时间、幅度或相位变化等参数,间接计算流体的流量,具有非侵入式测量、高精
    华普微HOPERF 2025-01-13 14:18 495浏览
  • 新年伊始,又到了对去年做总结,对今年做展望的时刻 不知道你在2024年初立的Flag都实现了吗? 2025年对自己又有什么新的期待呢? 2024年注定是不平凡的一年, 一年里我测评了50余块开发板, 写出了很多科普文章, 从一个小小的工作室成长为科工公司。 展望2025年, 中国香河英茂科工, 会继续深耕于,具身机器人、飞行器、物联网等方面的研发, 我觉得,要向未来学习未来, 未来是什么? 是掌握在孩子们生活中的发现,和精历, 把最好的技术带给孩子,
    丙丁先生 2025-01-11 11:35 465浏览
  • 食物浪费已成为全球亟待解决的严峻挑战,并对环境和经济造成了重大影响。最新统计数据显示,全球高达三分之一的粮食在生产过程中损失或被无谓浪费,这不仅导致了资源消耗,还加剧了温室气体排放,并带来了巨大经济损失。全球领先的光学解决方案供应商艾迈斯欧司朗(SIX:AMS)近日宣布,艾迈斯欧司朗基于AS7341多光谱传感器开发的创新应用来解决食物浪费这一全球性难题。其多光谱传感解决方案为农业与食品行业带来深远变革,该技术通过精确判定最佳收获时机,提升质量控制水平,并在整个供应链中有效减少浪费。 在2024
    艾迈斯欧司朗 2025-01-14 18:45 68浏览
  •   在信号处理过程中,由于信号的时域截断会导致频谱扩展泄露现象。那么导致频谱泄露发生的根本原因是什么?又该采取什么样的改善方法。本文以ADC性能指标的测试场景为例,探讨了对ADC的输出结果进行非周期截断所带来的影响及问题总结。 两个点   为了更好的分析或处理信号,实际应用时需要从频域而非时域的角度观察原信号。但物理意义上只能直接获取信号的时域信息,为了得到信号的频域信息需要利用傅里叶变换这个工具计算出原信号的频谱函数。但对于计算机来说实现这种计算需要面对两个问题: 1.
    TIAN301 2025-01-14 14:15 113浏览
  • 数字隔离芯片是现代电气工程师在进行电路设计时所必须考虑的一种电子元件,主要用于保护低压控制电路中敏感电子设备的稳定运行与操作人员的人身安全。其不仅能隔离两个或多个高低压回路之间的电气联系,还能防止漏电流、共模噪声与浪涌等干扰信号的传播,有效增强电路间信号传输的抗干扰能力,同时提升电子系统的电磁兼容性与通信稳定性。容耦隔离芯片的典型应用原理图值得一提的是,在电子电路中引入隔离措施会带来传输延迟、功耗增加、成本增加与尺寸增加等问题,而数字隔离芯片的目标就是尽可能消除这些不利影响,同时满足安全法规的要
    华普微HOPERF 2025-01-15 09:48 83浏览
  • 根据Global Info Research(环洋市场咨询)项目团队最新调研,预计2030年全球无人机电池和电源产值达到2834百万美元,2024-2030年期间年复合增长率CAGR为10.1%。 无人机电池是为无人机提供动力并使其飞行的关键。无人机使用的电池类型因无人机的大小和型号而异。一些常见的无人机电池类型包括锂聚合物(LiPo)电池、锂离子电池和镍氢(NiMH)电池。锂聚合物电池是最常用的无人机电池类型,因为其能量密度高、设计轻巧。这些电池以输出功率大、飞行时间长而著称。不过,它们需要
    GIRtina 2025-01-13 10:49 201浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦