SIGGRAPH2023|全新专业显卡、AI工具、Omniverse和OpenUSD协作功能强效助力内容创作

原创 英伟达NVIDIA中国 2023-08-10 20:05
特邀艺术家 Andrew Averkin 在本周分享作品《Natural Coffee》,让各位不由自主地想来上一杯 “天然咖啡”。






在全球规模最大且荟萃各地计算机图形专家的 SIGGRAPH 盛会上,AI 和加速计算已成为关注焦点,值此之际,NVIDIA 创始人兼首席执行官黄仁勋在其主题演讲中宣布推出 NVIDIA Omniverse 全新更新。NVIDIA Omniverse 是一个用于构建和连接 3D 工具和应用的平台,还能为可扩展的开放式 3D 世界生态系统通用场景描述(亦称 OpenUSD)提供加速。

此前不久,NVIDIA 宣布与 Pixar、Adobe、Apple 和 Autodesk 成立 Alliance for OpenUSD。这一举措可确保各种 3D 工具和内容能在各行各业的数字化进程中相互兼容,标志着我们朝着开启 3D 图形、设计和仿真新时代的方向迈进了一大步。

NVIDIA 推出了三款适用于台式工作站的全新 Ada Generation GPU,这些 GPU 分别为 NVIDIA RTX 5000、RTX 4500 和 RTX 4000,可为全球专业人员提供最新的 AI、图形和实时渲染技术。

Shutterstock 正在利用 NVIDIA Picasso 训练的基础模型,将生成式 AI 引入 3D 场景的背景中。NVIDIA Picasso 是一个云上的服务,负责构建视觉生成式 AI 模型。经 Picasso 训练的模型现可生成逼真的 8K 360 度全景高动态范围成像 (HDRi) 环境贴图,这有助于加快场景的开发速度。Autodesk 也将使用 Picasso 的基础模型开发生成式 AI 内容创作服务,并将其集成到热门的 Autodesk Maya 软件中。

每月发布的 NVIDIA Studio 驱动为使用创意应用的艺术家、创作者和 3D 开发者提供出色性能和可靠性。8 月版 NVIDIA Studio 驱动现已推出,可在创作者使用常用的创意应用时,为其带来卓越的可靠性。此版本包括对 Omniverse、XSplit Broadcaster 和 Reallusion iClone 更新的支持。

此外,本周《NVIDIA Studio 创意加速》 栏目的特邀艺术家 Andrew Averkin 将展示令人赏心悦目的作品 《Natural Coffee》,并分享 AI 如何在他创作期间带来深远影响。

Omniverse 扩展

Omniverse 平台得到重大升级,引入了全新连接器并实现最新进展。

这些更新展示于 Omniverse 基础应用中,这些基础应用是完全可定制的参考应用,可供创作者、企业和开发者复制、扩展或增强。

升级版 Omniverse 应用包含 Omniverse USD Composer,后者可助力 3D 用户组装基于 OpenUSD 的大型场景。Omniverse Audio2Face 可提供生成式 AI 应用编程接口,仅凭一个音频文件即可生成逼真的面部动画和手势,这款应用现可支持多种语言,并引入了全新女性基础模型。

此次更新可提高效率并改善用户体验。针对渲染的全新优化能够充分利用 NVIDIA RTX GPU 中 NVIDIA Ada Lovelace 架构的增强功能,以及完全集成至 Omniverse RTX 渲染器的 DLSS 3 技术。此外,全新 AI 降噪器可实现针对大规模工业场景的实时 4K 路径追踪。

全新应用和体验模板让刚入门 OpenUSD 和 Omniverse 的开发者只需少量编码,即可取得重要的前期优势。

全新的 Omniverse Kit 扩展程序注册服务器是用于访问、共享和管理 Omniverse 扩展程序的中央存储库,可助开发者在其应用中轻松启用和关闭功能,让他们能够比以往更轻松地利用 NVIDIA 提供的 500 多个核心 Omniverse 扩展程序构建自定义应用。

全新的扩展现实开发者工具可让用户在基于 Omniverse 的应用中以原生方式构建空间计算选项,从而帮助用户以自己喜欢的方式灵活体验 3D 项目和虚拟世界。

为了扩大在 Adobe Substance 3D、生成式 AI 和 OpenUSD 计划方面的合作,Adobe 和 NVIDIA 宣布相关方案,旨在以 API 的形式在 Omniverse 中推出 Adobe Firefly(Adobe 的创意生成式 AI 模型系列),帮助开发者和创作者增强其设计流程。

开发者和企业现可使用全新基础应用和服务,以便通过 OpenUSD 框架和生成式 AI 优化和增强 3D 工作流。

专业设计人员可将各种生成式 AI 与其工作流相连接,从而加速整个项目的各个环节,例如环境创作、角色动画制作和场景设置等。借助 Kit AI 智能体、OpenUSD 连接器和用于增强高级生成式 AI 工具和 API 的扩展程序,Omniverse 可以将最终成果整合到同一视窗中,从而缩短将创意由概念转变为艺术作品所需的总时间。

全新一代 RTX

全新 NVIDIA RTX 5000、RTX 4500 和 RTX 4000 专业台式电脑 GPU 采用包括 DLSS 3 在内的最新 NVIDIA Ada Lovelace 架构技术,可在虚幻引擎等 3D 应用中实现更流畅的渲染和实时交互。

这些工作站级别的 GPU 采用第三代 RT Core,其吞吐量高达上一代的 2 倍。这使得用户能够实时处理更大且保真度更高的图像。这样一来,艺术家和设计师便能维持顺畅的创意工作流。

在 AI 训练和开发、推理和应对生成式 AI 工作负载方面,第四代 Tensor Core 可提供高达上一代 2 倍的 AI 性能。‌凭借生成式 AI 助力的最新工具和应用,大容量 GPU 显存可实现 AI 增强的多应用工作流。

Ada GPU 架构可为这些全新 GPU 带来高达上一代 2 倍的视频编码和解码能力,还可提供对 AV1 编码和解码的支持。这些功能与新一代 AI 性能相结合,可借助AI 增强型视频编辑应用(如 Adobe Premiere 和 DaVinci Resolve)使全新的专业 GPU 成为用于处理高分辨率、多视频流编辑工作的理想之选。

这些全新 GPU 专为需要使用大型模型和数据集的高端创意多应用专业工作流而设计,可提供大容量 GDDR6 显存(RTX 4000 具有 20GB,RTX 4500 具有 24GB,RTX 5000 具有 32GB),且均支持纠错码,能实现无错误计算。

与时俱进的 NVIDIA Picasso

3D 艺术家常常要面临一项艰巨的任务,即以艺术方式将主要素材与道具、材质、背景和照明组合在一起,使场景栩栩如生。生成式 AI 技术可通过生成场景背景等次级素材来帮助简化此工作流。

在 SIGGRAPH 大会上,Shutterstock 宣布他们将利用 NVIDIA Picasso 训练一个生成式 AI 模型,该模型可以创建逼真的 360 度全景 HDRi 环境贴图。该模型依托于 Shutterstock 责任授权的资源库而构建。

Shutterstock 使用 NVIDIA Picasso
创建 360 HDRi 逼真的环境地图

艺术家以往需要使用昂贵的 360 度全景摄像头从头开始创作背景图并创建环境贴图,或者从可能无法与其 3D 场景精准匹配的固定选项中进行选择。如今,艺术家只需提供简单的提示或使用他们想要的背景作为参考,Shutterstock 的生成式 AI 功能就可以快速生成拥有 8K 分辨率的 360 度全景自定义 HDRi 环境贴图。然后,他们便可使用这些环境贴图来设置背景和为场景提供环境光照。这让他们有更多时间处理主要 3D 素材,这些素材是观众在整个 3D 场景中关注的焦点。

Autodesk 还宣布,他们将使用 Picasso 中的基础模型开发生成式 AI 内容创作服务,并将其集成至热门 3D 软件 Autodesk Maya 中。

使用 Picasso 中的基础模型开发的
Autodesk Maya 生成式 AI 内容创作服务

8 月版 Studio 驱动现已推出

8 月版 Studio 驱动可支持上述更新,并提供更多精彩内容,包括最新版 XSplit Broadcaster,这是一款热门直播软件,可让用户将内容同时串流传输到多个平台。

XSplit Broadcaster 4.5 引入了 NVIDIA 硬件编码器 (NVENC) 的 AV1 支持。GeForce 和 NVIDIA RTX 40 系列 GPU 的用户现可大幅提升其视频质量,直接以 60 帧率的 4K 高画质在 YouTube Live 上直播。

XSplit Broadcaster 4.5
添加了对 YouTube 的 AV1 直播支持

借助 RTX GPU 以 AV1 格式进行串流的效率比采用 H.264 格式的效率高 40%,同时,前者还可以降低直播的带宽需求,或者缩减高质量本地录制内容的文件大小。


H.264 与AV1 的编码效果对比:
以 8 Mbps 的速率对 60 帧率的 4K 源文件进行编码


Reallusion iClone Omniverse 连接器的更新包含一些新功能,例如项目的实时同步功能,以及针对 OpenUSD 格式的增强型导入功能。这让艺术家能够更快速、更流畅、更高效地使用 iClone 和 Omniverse 开展工作。


精美绝伦的咖啡主题艺术作品

3D 场景《Natural Coffee》 美到令人无法用言语来形容,让人想来上一杯醇香浓厚的浓缩咖啡。


NVIDIA 艺术家 Andrew Averkin 已投身创意领域 15 余载,拥有丰富的创作经验。通过结合艺术与技术,他将自己生动丰富的想象力转化为艺术作品,这种持续不断的创作之旅让他乐在其中。


作品《Natural Coffee》 的背景故事引人入胜。从前,一个喧嚣忙乱的办公室里有一杯“天然咖啡”,它因其传奇的力量而闻名。“天然咖啡”赋予工作中的艺术家意志和勇气,全面提升工作表现,同时作为一项额外的小福利,还能结合音乐给人带来神奇的疗愈之感。


Averkin 在 Midjourney 中输入简单的文本提示,使其快速生成高质量视觉创意图像。在创意工作流初期,使用 AI 生成的图像来集思广益正逐渐成为整个行业的主流做法。


Averkin 不断重复此过程来汲取灵感

对视觉创意有了基本构想后,Averkin 使用从在线商店中获得的 3D 素材快速构建了场景的 3D 草图,从而加快了整个创作流程,这种草图由毫无细节或细节粗糙的简单 3D 形状堆砌而成。

接下来,Averkin 在 Autodesk 3ds Max 中对各种素材进行打磨,从而雕琢出细节精美的模型,然后在模型上测试和应用不同的纹理和材质。他的 GeForce RTX 4090 GPU 可为系统默认使用的 Autodesk Arnold 渲染器解锁 RTX 加速的 AI 降噪功能,进而实现交互式 3D 建模,这能为场景合成提供巨大帮助。

Averkin 使用 Autodesk 3ds Max 工作


Averkin 表示:“我是奔着 GeForce RTX 显卡的品质、速度和安全性选了它,理由就这么简单。”


接下来,Averkin 通过 Autodesk 3ds Max 连接器将 《Natural Coffee》 导出到 NVIDIA Omniverse USD Composer 应用中。他解释道:“在 USD Composer 中,我添加了更多细节,使用各类内置材质进行多次调整,还展开了大量照明布置工作,让作品看起来更加逼真。”


在 Omniverse USD Composer 中进行实时渲染


用户在使用 USD Composer 渲染场景中逼真的光线、阴影和纹理等元素时,可以实时查看场景的整体效果,这是该应用的一个最大优势。这显著改善了大型 3D 场景的编辑过程,使其变得更快速、更轻松。Averkin 甚至还能添加动画,让镜头处于不断移动的状态,从而进一步升华场景效果。


最后一步是在 Adobe Photoshop 中对作品略加修饰。超过 30 种 GPU 加速功能可为 Averkin 提供大量选择,以便他校正颜色和对比度,并快速流畅地对最终图像进行调整。


Averkin 鼓励资深 3D 艺术家尝试使用 OpenUSD 框架。他表示:“我在 NVIDIA 的工作和个人项目中经常使用 OpenUSD 框架,这个框架非常强大,能够以非破坏性方式为多个创意应用中的工作提供帮助,它的其他出色功能可以使整个工作流变得更轻松灵活。”


NVIDIA 艺术家 Andrew Averkin


SIGGRAPH 2023 

NVIDIA 精彩发布


【1】SIGGRAPH 主题演讲:NVIDIA 首席执行官带来生成式 AI 多项创新
【2】SIGGRAPH 2023 | NVIDIA 发布新一代 GH200 Grace Hopper 超级芯片平台
【3】SIGGRAPH 2023 | NVIDIA 发布支持生成式 AI 与 OpenUSD 的重大 Omniverse 升级
【4】SIGGRAPH 2023 | NVIDIA Omniverse 开启通往 OpenUSD 广阔天地的大门
【5】SIGGRAPH 2023 | NVIDIA 与全球数据中心系统制造商大力推动 AI 与工业数字化的发展
【6】SIGGRAPH 2023 | NVIDIA 与全球工作站厂商共同推出用于生成式 AI、LLM 开发、内容创作和数据科学的系统
【7】SIGGRAPH 2023 | NVIDIA AI Workbench 助力全球企业加速采用自定义生成式 AI
【8】SIGGRAPH 2023 | NVIDIA 与 Hugging Face 将连接数百万开发者与生成式 AI 超级计算

更多精彩,仍在继续... 

敬请持续关注



点击 “阅读原文”,或扫描下方海报二维码,观看 NVIDIA 创始人兼 CEO 黄仁勋在 SIGGRAPH 现场发表的 NVIDIA 主题演讲回放了解 NVIDIA 的新技术,包括屡获殊荣的研究,OpenUSD 开发,以及最新的 AI 内容创作解决方案。


评论
  • 本文介绍瑞芯微开发板/主板Android配置APK默认开启性能模式方法,开启性能模式后,APK的CPU使用优先级会有所提高。触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。源码修改修改源码根目录下文件device/rockchip/rk3562/package_performance.xml并添加以下内容,注意"+"号为添加内容,"com.tencent.mm"为AP
    Industio_触觉智能 2025-01-17 14:09 161浏览
  • 嘿,咱来聊聊RISC-V MCU技术哈。 这RISC-V MCU技术呢,简单来说就是基于一个叫RISC-V的指令集架构做出的微控制器技术。RISC-V这个啊,2010年的时候,是加州大学伯克利分校的研究团队弄出来的,目的就是想搞个新的、开放的指令集架构,能跟上现代计算的需要。到了2015年,专门成立了个RISC-V基金会,让这个架构更标准,也更好地推广开了。这几年啊,这个RISC-V的生态系统发展得可快了,好多公司和机构都加入了RISC-V International,还推出了不少RISC-V
    丙丁先生 2025-01-21 12:10 111浏览
  • 现在为止,我们已经完成了Purple Pi OH主板的串口调试和部分配件的连接,接下来,让我们趁热打铁,完成剩余配件的连接!注:配件连接前请断开主板所有供电,避免敏感电路损坏!1.1 耳机接口主板有一路OTMP 标准四节耳机座J6,具备进行音频输出及录音功能,接入耳机后声音将优先从耳机输出,如下图所示:1.21.2 相机接口MIPI CSI 接口如上图所示,支持OV5648 和OV8858 摄像头模组。接入摄像头模组后,使用系统相机软件打开相机拍照和录像,如下图所示:1.3 以太网接口主板有一路
    Industio_触觉智能 2025-01-20 11:04 150浏览
  • 日前,商务部等部门办公厅印发《手机、平板、智能手表(手环)购新补贴实施方案》明确,个人消费者购买手机、平板、智能手表(手环)3类数码产品(单件销售价格不超过6000元),可享受购新补贴。每人每类可补贴1件,每件补贴比例为减去生产、流通环节及移动运营商所有优惠后最终销售价格的15%,每件最高不超过500元。目前,京东已经做好了承接手机、平板等数码产品国补优惠的落地准备工作,未来随着各省市关于手机、平板等品类的国补开启,京东将第一时间率先上线,满足消费者的换新升级需求。为保障国补的真实有效发放,基于
    华尔街科技眼 2025-01-17 10:44 221浏览
  • 高速先生成员--黄刚这不马上就要过年了嘛,高速先生就不打算给大家上难度了,整一篇简单但很实用的文章给大伙瞧瞧好了。相信这个标题一出来,尤其对于PCB设计工程师来说,心就立马凉了半截。他们辛辛苦苦进行PCB的过孔设计,高速先生居然说设计多大的过孔他们不关心!另外估计这时候就跳出很多“挑刺”的粉丝了哈,因为翻看很多以往的文章,高速先生都表达了过孔孔径对高速性能的影响是很大的哦!咋滴,今天居然说孔径不关心了?别,别急哈,听高速先生在这篇文章中娓娓道来。首先还是要对各位设计工程师的设计表示肯定,毕竟像我
    一博科技 2025-01-21 16:17 95浏览
  •  光伏及击穿,都可视之为 复合的逆过程,但是,复合、光伏与击穿,不单是进程的方向相反,偏置状态也不一样,复合的工况,是正偏,光伏是零偏,击穿与漂移则是反偏,光伏的能源是外来的,而击穿消耗的是结区自身和电源的能量,漂移的载流子是 客席载流子,须借外延层才能引入,客席载流子 不受反偏PN结的空乏区阻碍,能漂不能漂,只取决于反偏PN结是否处于外延层的「射程」范围,而穿通的成因,则是因耗尽层的过度扩张,致使跟 端子、外延层或其他空乏区 碰触,当耗尽层融通,耐压 (反向阻断能力) 即告彻底丧失,
    MrCU204 2025-01-17 11:30 182浏览
  • 80,000人到访的国际大展上,艾迈斯欧司朗有哪些亮点?感未来,光无限。近日,在慕尼黑electronica 2024现场,ams OSRAM通过多款创新DEMO展示,以及数场前瞻洞察分享,全面展示自身融合传感器、发射器及集成电路技术,精准捕捉并呈现环境信息的卓越能力。同时,ams OSRAM通过展会期间与客户、用户等行业人士,以及媒体朋友的深度交流,向业界传达其以光电技术为笔、以创新为墨,书写智能未来的深度思考。electronica 2024electronica 2024构建了一个高度国际
    艾迈斯欧司朗 2025-01-16 20:45 405浏览
  •     IPC-2581是基于ODB++标准、结合PCB行业特点而指定的PCB加工文件规范。    IPC-2581旨在替代CAM350格式,成为PCB加工行业的新的工业规范。    有一些免费软件,可以查看(不可修改)IPC-2581数据文件。这些软件典型用途是工艺校核。    1. Vu2581        出品:Downstream     
    电子知识打边炉 2025-01-22 11:12 49浏览
  • 数字隔离芯片是一种实现电气隔离功能的集成电路,在工业自动化、汽车电子、光伏储能与电力通信等领域的电气系统中发挥着至关重要的作用。其不仅可令高、低压系统之间相互独立,提高低压系统的抗干扰能力,同时还可确保高、低压系统之间的安全交互,使系统稳定工作,并避免操作者遭受来自高压系统的电击伤害。典型数字隔离芯片的简化原理图值得一提的是,数字隔离芯片历经多年发展,其应用范围已十分广泛,凡涉及到在高、低压系统之间进行信号传输的场景中基本都需要应用到此种芯片。那么,电气工程师在进行电路设计时到底该如何评估选择一
    华普微HOPERF 2025-01-20 16:50 73浏览
  •  万万没想到!科幻电影中的人形机器人,正在一步步走进我们人类的日常生活中来了。1月17日,乐聚将第100台全尺寸人形机器人交付北汽越野车,再次吹响了人形机器人疯狂进厂打工的号角。无独有尔,银河通用机器人作为一家成立不到两年时间的创业公司,在短短一年多时间内推出革命性的第一代产品Galbot G1,这是一款轮式、双臂、身体可折叠的人形机器人,得到了美团战投、经纬创投、IDG资本等众多投资方的认可。作为一家成立仅仅只有两年多时间的企业,智元机器人也把机器人从梦想带进了现实。2024年8月1
    刘旷 2025-01-21 11:15 360浏览
  • 2024年是很平淡的一年,能保住饭碗就是万幸了,公司业绩不好,跳槽又不敢跳,还有一个原因就是老板对我们这些员工还是很好的,碍于人情也不能在公司困难时去雪上加霜。在工作其间遇到的大问题没有,小问题还是有不少,这里就举一两个来说一下。第一个就是,先看下下面的这个封装,你能猜出它的引脚间距是多少吗?这种排线座比较常规的是0.6mm间距(即排线是0.3mm间距)的,而这个规格也是我们用得最多的,所以我们按惯性思维来看的话,就会认为这个座子就是0.6mm间距的,这样往往就不会去细看规格书了,所以这次的运气
    wuliangu 2025-01-21 00:15 181浏览
  • 电竞鼠标应用环境与客户需求电竞行业近年来发展迅速,「鼠标延迟」已成为决定游戏体验与比赛结果的关键因素。从技术角度来看,传统鼠标的延迟大约为20毫秒,入门级电竞鼠标通常为5毫秒,而高阶电竞鼠标的延迟可降低至仅2毫秒。这些差异看似微小,但在竞技激烈的游戏中,尤其在对反应和速度要求极高的场景中,每一毫秒的优化都可能带来致胜的优势。电竞比赛的普及促使玩家更加渴望降低鼠标延迟以提升竞技表现。他们希望通过精确的测试,了解不同操作系统与设定对延迟的具体影响,并寻求最佳配置方案来获得竞技优势。这样的需求推动市场
    百佳泰测试实验室 2025-01-16 15:45 339浏览
  • 临近春节,各方社交及应酬也变得多起来了,甚至一月份就排满了各式约见。有的是关系好的专业朋友的周末“恳谈会”,基本是关于2025年经济预判的话题,以及如何稳定工作等话题;但更多的预约是来自几个客户老板及副总裁们的见面,他们为今年的经济预判与企业发展焦虑而来。在聊天过程中,我发现今年的聊天有个很有意思的“点”,挺多人尤其关心我到底是怎么成长成现在的多领域风格的,还能掌握一些经济趋势的分析能力,到底学过哪些专业、在企业管过哪些具体事情?单单就这个一个月内,我就重复了数次“为什么”,再辅以我上次写的:《
    牛言喵语 2025-01-22 17:10 32浏览
  • 随着消费者对汽车驾乘体验的要求不断攀升,汽车照明系统作为确保道路安全、提升驾驶体验以及实现车辆与环境交互的重要组成,日益受到业界的高度重视。近日,2024 DVN(上海)国际汽车照明研讨会圆满落幕。作为照明与传感创新的全球领导者,艾迈斯欧司朗受邀参与主题演讲,并现场展示了其多项前沿技术。本届研讨会汇聚来自全球各地400余名汽车、照明、光源及Tier 2供应商的专业人士及专家共聚一堂。在研讨会第一环节中,艾迈斯欧司朗系统解决方案工程副总裁 Joachim Reill以深厚的专业素养,主持该环节多位
    艾迈斯欧司朗 2025-01-16 20:51 195浏览
  • Ubuntu20.04默认情况下为root账号自动登录,本文介绍如何取消root账号自动登录,改为通过输入账号密码登录,使用触觉智能EVB3568鸿蒙开发板演示,搭载瑞芯微RK3568,四核A55处理器,主频2.0Ghz,1T算力NPU;支持OpenHarmony5.0及Linux、Android等操作系统,接口丰富,开发评估快人一步!添加新账号1、使用adduser命令来添加新用户,用户名以industio为例,系统会提示设置密码以及其他信息,您可以根据需要填写或跳过,命令如下:root@id
    Industio_触觉智能 2025-01-17 14:14 121浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦