全新 Omniverse Cloud API 帮助开发者采用 OpenUSD;生成式 AI 模型 ChatUSD LLM 使用 USD 进行对话;RunUSD 将 USD 转换成交互式图形,DeepSearch LLM 实现语义 3D 搜索。
洛杉矶 — SIGGRAPH — 太平洋时间 2023 年 8 月 8 日 — NVIDIA 宣布将为开发者和企业提供一系列框架、资源和服务,以加速通用场景描述(即 OpenUSD)的采用。
NVIDIA 正在通过 NVIDIA Omniverse™ 与新的技术组合、ChatUSD 和 RunUSD 等云应用编程接口(API)以及全新 NVIDIA OpenUSD 开发者计划来推进 OpenUSD 的发展。OpenUSD 是一个 3D 框架,可实现软件工具与数据类型之间的互通,从而构建虚拟世界。
NVIDIA 上周宣布与皮克斯、Adobe、苹果和 Autodesk 共同成立 OpenUSD 联盟(AOUSD),以统一 OpenUSD 规范。对 OpenUSD 的这些投资将为该联盟添砖加瓦。
NVIDIA 创始人兼首席执行官黄仁勋表示:“正如 HTML 点燃了 2D 互联网的重大计算革命,OpenUSD 也将开启协作式 3D 和工业数字化的时代。NVIDIA 通过开发 NVIDIA Omniverse 和生成式 AI ,正在全力推动 OpenUSD 的发展和应用。”
OpenUSD 上云
NVIDIA 发布了四款自主构建的全新 Omniverse Cloud API,帮助开发者更加无缝地实施和部署 OpenUSD 流程与应用。
ChatUSD:一款面向开发人员的大型语言模型 (LLM) copilot 工具,可以回答 USD 知识问题或生成 Python-USD 代码脚本。ChatUSD 借助 NVIDIA 提供的 USD 功能和 Python-USD 代码片段进行微调。
RunUSD:其是一个 Cloud API,它通过检查上传文件与 OpenUSD 版本的兼容性,将 OpenUSD 文件转换为完全路径跟踪渲染的图像,并使用 Omniverse Cloud 生成渲染。目前,NVIDIA OpenUSD 开发者计划中的开发人员可以使用该 API 的演示。
DeepSearch:其为 LLM 代理,可在海量无标记资产数据库中进行快速语义搜索。
USD-GDN Publisher:其为一键式服务,可助力企业和软件制造商从 USD Composer 等基于 Omniverse 的应用向 Omniverse Cloud GDN 发布基于 OpenUSD 的高保真体验,并实时传输到网络浏览器和移动设备。
不断发展演进的 OpenUSD 功能
OpenUSD 旨在更好地连接电影和动画制作流程。同时,工业应用(比如构建具有互操作性的制造设计流程、创建符合物理学的实时工厂数字孪生或训练和验证自动驾驶汽车等)也对 3D 框架提出了不同的要求。
为了支持这些高度复杂的工业和感知 AI 工作负载,NVIDIA 正在开发 NVIDIA Omniverse(用于开发应用程序的 OpenUSD 原生软件平台),以及地理空间数据模型、度量组件、SimReady、OpenUSD 规范等。
OpenUSD 地理空间数据模型让用户可以对逼真的工厂、仓库、城市乃至地球数字孪生进行模拟和计算。对于极大规模的项目,它还会考虑到地球的曲率以确保模拟符合物理学。
工业应用需要合并来自许多工具和来源的数据集,每个数据集以不同的单位表示。NVIDIA 正在开发一个 OpenUSD 度量组件,使用户能够百分之百准确地合并不同格式的数据集。
NVIDIA 还在开发适用于全新 SimReady 3D 模型的结构。这些模型将包含真实的材质和物理属性,这对于精准训练自主机器人和车辆至关重要。例如负责分拣包裹的自主机器人需要在 3D 包裹上进行模拟训练,这些包裹会像在真实世界中一样移动并对物理接触做出反应。
欢迎通过 NVIDIA OpenUSD 开发者计划抢先体验 OpenUSD 服务、资源和工具,其中包括由 NVIDIA 设计师和艺术家构建的两个可完整分发的全新 OpenUSD 示例场景—— Da Vinci’s Workshop 与 Riverfront Tower。
进一步了解:
OpenUSD:
https://www.nvidia.cn/omniverse/usd/
OpenUSD 生态网络:
https://www.nvidia.com/en-us/omniverse/ecosystem/
OpenUSD 联盟:
https://www.aousd.org
NVIDIA Omniverse 平台:
https://www.nvidia.cn/omniverse/