SIGGRAPH2024|揭秘NVIDIA最新RTX助力的工具和应用如何帮助开发人员加速AI在个人电脑和工作站上的发展

原创 英伟达NVIDIA中国 2024-08-05 21:02

在 SIGGRAPH 大会上发布的更新包括 ChatRTX 更新和 Llama 3 支持,用以增强 AI 内容创作、生产力和开发。



NVIDIA 在 SIGGRAPH 大会上重点展示了最新 NVIDIA RTX 赋能的工具和应用程序,该大会是图形与 AI 交叉领域的年度大展。


这些 AI 科技提供了先进的光线追踪和渲染技术,可在游戏、虚拟现实、动画和影视级特效中实现超写实的图形和身临其境的体验。RTX AI 个人电脑和工作站正在助力推动未来的交互式数字媒体、内容创作、生产力以及开发工作。


ACE 的 AI 魔法


在 SIGGRAPH 炉边谈话中,NVIDIA 创始人兼首席执行官黄仁勋介绍了 “James” —— 一款基于 NVIDIA NIM 微服务构建的交互式数字人,该角色展现了 AI 驱动用户交互的潜力。


James 是一个使用 NVIDIA ACE 技术开发的客户服务工作流虚拟助手,可以通过表情、幽默和上下文准确的响应与人类沟通。很快用户将可以通过访问 ai.nvidia.com,与 James 进行实时互动。



NVIDIA 还介绍了用于远程呈现的 NVIDIA Maxine AI 平台的最新进展,以及正在使用 NVIDIA ACE 技术的公司。NVIDIA ACE 是一套通过生成式 AI 让数字人栩栩如生的技术。这些技术通过 AI 模型实现数字人类的开发,涵盖语音和翻译、视觉、智能、逼真的动画和行为,以及栩栩如生的外观。


Maxine 拥有两项可增强远程呈现场景下数字人体验的 AI 技术:Maxine 3D 和 Audio2Face-2D。


开发者可以利用 Maxine 和 ACE 技术,为用户打造更具吸引力、更自然的数字界面交互体验,适用于客户服务、游戏和其他互动场景。这些先进技术将大大提升用户体验,让数字互动更加生动有趣,仿佛与真人对话一般。


借助先进的 AI 技术,NVIDIA ACE 技术允许开发者设计能够实时响应用户的虚拟形象,具备逼真的动画、语音和情感表现。这些虚拟形象将为用户带来更加真实和互动的体验。RTX GPU 可提供必要的计算能力和图形保真度,以令人惊艳的细节和流畅性渲染 ACE 虚拟形象。


随着技术的不断进步和日益广泛的采用,ACE 正在为构建虚拟世界树立新的标杆并激发了各行各业的创新。开发人员利用基于 RTX GPU 的 ACE 技术,可以构建更加身临其境的应用程序和先进的、基于 AI 的交互式数字媒体体验。


RTX 更新为创作者带来 AI 艺术


NVIDIA GeForce RTX 个人电脑和 NVIDIA RTX 工作站正通过 GPU 加速获得升级,为用户提供增强的 AI 内容创作体验。

对于视频编辑人员来说,RTX Video HDR 现在可通过万兴科技旗下视频创意软件万兴喵影和 DaVinci Resolve 使用。有了这项技术,用户可以将任何内容转化为高动态范围视频,在明暗场景中都能呈现更丰富的色彩和更多的细节,因此是游戏、旅行或活动视频制作的理想选择。将 RTX Video HDR 与 RTX 视频超分辨率相结合,通过消除编码伪影和增强细节,可进一步提高视觉质量。


RTX Video HDR 需要将 RTX GPU 连接到兼容 HDR 10 的显示器或电视上。使用搭载 RTX GPU 的个人电脑用户,可以将文件导入到万兴喵影桌面端应用程序,继续通过本地 RTX 加速进行编辑,并在 GeForce RTX 4070 Ti 或更强 GPU 上借助双编码器使导出速度提高一倍。流行媒体播放器 VLC 在 6 月新增了对 RTX 视频超级分辨率和 RTX Video HDR 的支持,增加了 AI 增强视频播放功能。


如需了解更多信息,可通过以下链接参阅本博客中关于 RTX 赋能的视频编辑部分以及 RTX 视频常见问题解答。

https://nvidia.custhelp.com/app/answers/detail/a_id/5448/~/rtx-video-super-resolution-faq


进一步了解万兴喵影经 AI 赋能后的功能:

https://filmora.wondershare.net/ai-features.html?gad_source=1&gclid=CjwKCAjwnK60BhA9EiwAmpHZw62RpoOFbNoF1rHGVNbssHFgXqQygDzHwp_isBqCFRmYHx-0xE5gwxoCsUQQAvD_BwE


此外,3D 艺术家获得了更多简化和增强工作流的 AI 应用和工具,包括 Replikant、Adobe、Topaz 和 Getty Images 等。


Replikant 作为人工智能辅助 3D 动画平台,目前正在集成一项 ACE 技术 NVIDIA Audio2Face,以改进唇部同步和面部动画。通过利用 NVIDIA 加速生成模型,用户可以享受到由 RTX 和 NVIDIA DLSS 技术增强的实时视觉效果。Replikant 现已登陆 Steam 平台。


Adobe Substance 3D Modeler 增添了基于形状检索资产库的功能,这一由 AI 赋能的功能旨在根据即有 3D 形状来简化复杂形状的替换和增强。这项新功能大大加快了原型设计的速度,并增强了设计工作流。


Adobe Substance 3D 中的新 AI 功能集成了先进的生成式 AI 功能,增强了其纹理和材质创建工具。Adobe 首次将 Firefly 生成式 AI 功能集成到 Substance 3D Sampler 和 Stager 中,使工业设计师、游戏开发人员和视觉效果专业人员的三维工作流更加无缝和高效。


通过文本生成纹理和提示词描述等功能,Substance 3D 用户可以生成逼真或风格化的纹理。这些纹理之后便可直接应用于 3D 模型。新的文本生成纹理和生成式背景功能显著加快了传统上耗时且复杂的 3D 纹理绘制和合成的速度。


在 NVIDIA RTX Tensor Core 的支持下,Substance 3D 能够大大加快计算速度,并可实现更直观、更具创造性的设计流程。这项开发以 Adobe 的创新为基础,在 Substance 3D 工作流中借助 Firefly 进行了 Creative Cloud 升级。


Topaz AI 引入了 NVIDIA TensorRT 加速多 GPU 工作流程,使得多 GPU 并行处理成为可能,大幅提升渲染速度——使用两块 GPU 比单块 GPU 系统快达 2 倍,并且随着 GPU 数量的增加,速度还会进一步提升。


Getty Images 更新了其 Generative AI by iStock 服务,增加了新功能以改进图像生成和质量。在 NVIDIA Edify 模型的加持下,其最新的增强功能可使生成四张图像的时间达到六秒左右,比前代模型的性能提高了一倍,速度处于行业领先水平。改进后的文本生成图像(Text-2-Image)和图像生成图像(Image-2-Image)功能提供了更高质量的结果,并且更好地符合用户的提示词要求。


Generative AI by iStock 用户现在还可以指定摄像头设置,如焦距(窄、标准或宽)和景深(近或远)等。通过改进的生成式 AI 超分辨率技术,图像质量得到了显著提升。该技术使用 AI 创建新的像素,大幅提高分辨率,同时避免过度锐化图像。


令人惊叹的 LLM AI


ChatRTX 是一种将 ChatGLM 这类大语言模型(LLM)连接到用户数据的技术演示,用于快速查询笔记、文档或图片。其目前正在进行 UI 改进,以提供更简洁、更完美的体验。


ChatRTX 还是一个开源参考项目,向开发人员展示如何通过 RTX 加速构建功能强大的本地检索增强(RAG)应用。



发布的最新版 ChatRTX 采用了 Electron+Material UI 框架,使开发人员可以更轻松地添加他们自己的 UI 元素或扩展新功能。这次更新还包括一个新的架构,该架构不仅简化了不同 UI 的集成,还简化了在 ChatRTX 后端应用程序编程接口基础上构建新聊天和 RAG 应用的过程。


最终用户可从 ChatRTX 网页下载最新版的 ChatRTX。开发人员可在 ChatRTX GitHub 代码库中找到新版本的源代码。


Meta Llama 3.1-8B 模型现已针对 NVIDIA GeForce RTX PC 和 NVIDIA RTX 工作站的推理进行了优化。这些模型由 NVIDIA TensorRT-LLM(一款可加速 LLM 推理性能的开源软件)提供原生支持。


戴尔的 AI 聊天机器人:

利用 RTX Rocket Fuel


戴尔展示了企业如何利用 NVIDIA AI Workbench 和基于 Llama 3 的 NVIDIA NIM 微服务,通过优化的 RAG 聊天机器人来推动 AI 开发。借助 NVIDIA AI Workbench Hybrid RAG 项目,戴尔展示了如何利用聊天机器人与企业数据的本地向量数据库的进行对话,并以下列三种方式之一进行推理:


  • 在本地 Hugging Face TGI 服务器上

  • 在云端使用 NVIDIA 推理端点

  • 在自托管的 NVIDIA NIM 微服务上


请通过以下链接了解更多关于 AI Workbench Hybrid RAG 项目的信息。

https://developer.nvidia.cn/zh-cn/blog/optimize-ai-model-performance-and-maintain-data-privacy-with-hybrid-rag/


HP AI Studio:

利用 CUDA-X 和 Galileo 加速创新


惠普在 SIGGRAPH 大会上展示了集中式数据科学平台 Z by HP AI Studio。AI Studio 于 2023 年 10 月发布,目前借助最新的 NVIDIA CUDA-X 资源库以及惠普最近与生成式 AI 信任层公司 Galileo 的合作得到了增强。主要优势包括:


  • 更快地部署项目:快速配置、连接和共享本地及远程项目。

  • 轻松协作:轻松访问和共享数据、模板和实验。

  • 自由工作:选择在何处处理数据,在在线和离线模式之间轻松切换。


AI Studio 旨在提高生产力和简化 AI 开发,让数据科学团队专注于创新。


可通过以下链接申请提前访问 AI Studio。

https://reinvent.hp.com/LP=10935


Stable Diffusion 的 RTX 速度大增


Stable Diffusion 3.0 是 Stability AI 的最新模型,经 TensorRT 优化后速度提高了 60%。



一项针对 Stable Diffusion 3 进行性能优化的 NIM 微服务目前可通过访问 ai.nvidia.com 进行预览。



点击“阅读原文”,或扫描下方海报二维码,观看 NVIDIA 创始人兼 CEO 黄仁勋和 Meta 创始人兼 CEO 马克·扎克伯格在 SIGGRAPH 2024 上就 AI 领域新突破进行的炉边谈话。

评论 (0)
  • 在人工智能技术飞速发展的今天,语音交互正以颠覆性的方式重塑我们的生活体验。WTK6900系列语音识别芯片凭借其离线高性能、抗噪远场识别、毫秒级响应的核心优势,为智能家居领域注入全新活力。以智能风扇为起点,我们开启一场“解放双手”的科技革命,让每一缕凉风都随“声”而至。一、核心技术:精准识别,无惧环境挑战自适应降噪,听懂你的每一句话WTK6900系列芯片搭载前沿信号处理技术,通过自适应降噪算法,可智能过滤环境噪声干扰。无论是家中电视声、户外虫鸣声,还是厨房烹饪的嘈杂声,芯片均能精准提取有效指令,识
    广州唯创电子 2025-04-08 08:40 64浏览
  • 及时生产 JIT(Just In Time)的起源JIT 起源于 20 世纪 70 年代爆发的全球石油危机和由此引发的自然资源短缺,这对仰赖进口原物料发展经济的日本冲击最大。当时日本的生产企业为了增强竞争力、提高产品利润,在原物料成本难以降低的情况下,只能从生产和流通过程中寻找利润源,降低库存、库存和运输等方面的生产性费用。根据这种思想,日本丰田汽车公司创立的一种具有特色的现代化生产方式,即 JIT,并由此取得了意想不到的成果。由于它不断地用于汽车生产,随后被越来越多的许多行业和企业所采用,为日
    优思学院 2025-04-07 11:56 89浏览
  • 在全球电子产业面临供应链波动、技术迭代和市场需求变化等多重挑战的背景下,安博电子始终秉持“让合作伙伴赢得更多一点”的核心理念,致力于打造稳健、高效、可持续的全球供应链体系。依托覆盖供应商管理、品质检测、智能交付的全链路品控体系,安博电子不仅能确保电子元器件的高可靠性与一致性,更以高透明的供应链管理模式,助力客户降低风险、提升运营效率,推动行业标准升级,与全球合作伙伴共同塑造更具前瞻性的产业生态。动态优选机制:构建纯净供应链生态安博电子将供应商管理视为供应链安全的根基。打造动态优选管控体系,以严格
    电子资讯报 2025-04-07 17:06 42浏览
  •     根据 IEC术语,瞬态过电压是指持续时间几个毫秒及以下的过高电压,通常是以高阻尼(快速衰减)形式出现,波形可以是振荡的,也可以是非振荡的。    瞬态过电压的成因和机理,IEC 60664-1给出了以下四种:    1. 自然放电,最典型的例子是雷击,感应到电力线路上,并通过电网配电系统传输,抵达用户端;        2. 电网中非特定感性负载通断。例如热处理工厂、机加工工厂对
    电子知识打边炉 2025-04-07 22:59 40浏览
  • 文/Leon编辑/cc孙聪颖‍转手绢、跳舞、骑车、后空翻,就在宇树、智元等独角兽企业率领“机器人大军”入侵短视频时,却有资本和科技大佬向此产业泼了一盆冷水。金沙江创投管理合伙人朱啸虎近日突然对人形机器人发难,他表示“最近几个月正在批量退出人形机器人公司”。“只是买回去做研究的,或者买回去做展示的,这种都不是我们意义上的商业化,谁会花十几万买一个机器人去干这些活?”朱啸虎吐槽。不过,朱啸虎的观点很快就遭到驳斥,众擎机器人的创始人、董事长赵同阳回怼道:“(朱啸虎)甚至问出了人形机器人在这个阶段有什么
    华尔街科技眼 2025-04-07 19:24 52浏览
  • 曾几何时,汽车之家可是汽车资讯平台领域响当当的“扛把子”。2005 年成立之初,它就像一位贴心的汽车小助手,一下子就抓住了大家的心。它不仅吸引了海量用户,更是成为汽车厂商和经销商眼中的“香饽饽”,广告投放、合作推广不断,营收和利润一路高歌猛进,2013年成功在纽交所上市,风光无限。2021年更是在香港二次上市,达到了发展的巅峰,当年3月15日上市首日,港股股价一度高达184.6港元,市值可观。然而,如今的汽车之家却陷入了困境,业务下滑明显。业务增长瓶颈从近年来汽车之家公布的财报数据来看,情况不容
    用户1742991715177 2025-04-07 21:48 48浏览
  • 在万物互联时代,智能化安防需求持续升级,传统报警系统已难以满足实时性、可靠性与安全性并重的要求。WT2003H-16S低功耗语音芯片方案,以4G实时音频传输、超低功耗设计、端云加密交互为核心,重新定义智能报警设备的性能边界,为家庭、工业、公共安防等领域提供高效、稳定的安全守护。一、技术内核:五大核心突破,构建全场景安防基座1. 双模音频传输,灵活应对复杂场景实时音频流传输:内置高灵敏度MIC,支持环境音实时采集,通过4G模块直接上传至云端服务器,响应速度低至毫秒级,适用于火灾警报、紧急呼救等需即
    广州唯创电子 2025-04-08 08:59 62浏览
  •   工业自动化领域电磁兼容与接地系统深度剖析   一、电磁兼容(EMC)基础认知   定义及关键意义   电磁兼容性(EMC),指的是设备或者系统在既定的电磁环境里,不但能按预期功能正常运转,而且不会对周边其他设备或系统造成难以承受的电磁干扰。在工业自动化不断发展的当下,大功率电机、变频器等设备被大量应用,现场总线、工业网络等技术也日益普及,致使工业自动化系统所处的电磁环境变得愈发复杂,电磁兼容(EMC)问题也越发严峻。   ​电磁兼容三大核心要素   屏蔽:屏蔽旨在切断电磁波的传播路
    北京华盛恒辉软件开发 2025-04-07 22:55 55浏览
  •     在研究Corona现象时发现:临界电压与介电材料表面的清洁程度有关。表面越清洁的介电材料,临界电压越高;表面污染物越多的地方,越容易“爬电”。关于Corona现象,另见基础理论第007篇。    这里说的“污染物”,定义为——可能影响介电强度或表面电阻率的固体、液体或气体(电离气体)的任何情况。    IEC 60664-1 (对应GB/T 16935.1-2023) 定义了 Pollution Degree,中文术语是“污染等
    电子知识打边炉 2025-04-07 22:06 36浏览
  • 贞光科技作为三星电机车规电容代理商,针对电动汽车领域日益复杂的电容选型难题,提供全方位一站式解决方案。面对高温稳定性、高可靠性、高纹波电流和小型化等严苛要求,三星车规电容凭借完整产品矩阵和卓越技术优势,完美满足BMS、电机控制器和OBC等核心系统需求。无论技术选型、供应链保障、样品测试还是成本优化,贞光科技助力客户在电动汽车产业高速发展中占据技术先机。在电动汽车技术高速发展的今天,作为汽车电子系统中不可或缺的关键元器件,电容的选型已成为困扰许多工程师和采购人员的难题。如何在众多参数和型号中找到最
    贞光科技 2025-04-07 17:06 31浏览
我要评论
0
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦