亮点超前“剧透”!NVIDIA赴约2024云栖大会,精彩先睹为快

原创 英伟达NVIDIA中国 2024-09-13 17:36

9 月 19 – 21 日,2024 云栖大会将于杭州云栖小镇国际会展中心举行。本次大会以“云启智跃·产业蝶变”为主题,精心策划了三日主论坛与 400 场并行分论坛,涵盖主题演讲、圆桌讨论、互动展示等环节。大会还特别设置了人工智能+、计算、前沿应用三大主题馆,围绕云计算与 AI,全景式呈现 AI 时代云计算最新技术形态与产品进展,齐聚 AI 硬科技。 


NVIDIA 将以“NVIDIA 加速计算新时代”为主题参与本次科技盛会,并设立 NVIDIA 展区带来数据中心级的端到端技术栈、云上解决方案、客户用例、生态加速项目展示,以及 LLM 互动技术演示等。此外,众多 NVIDIA 技术专家也将在各论坛和并行话题演讲分享全栈加速计算的技术经验。


亮点一:

NVIDIA 展区前沿 LLM 技术与产品大解密

C 馆 C-12


在云栖大会的 NVIDIA 展区,将展示七大板块内容,主要包括 NVIDIA 技术、LLM 互动技术演示、NVIDIA 初创加速计划、NVIDIA 企业开发者社区、NVIDIA 深度学习培训中心(DLI)、NVIDIA AI 小课堂以及云上解决方案和客户实践,每个板块都彰显了 NVIDIA 和云服务提供商等伙伴协作,在计算的各个层级驱动企业和开发者在应用、软件、算法、集群上协同设计、持续优化并提高系统韧性。


基于 CUDA 的加速计算是大语言模型时代下,AI 落地和产业焕新的技术底座;数据中心正在演变为由成千上万 GPU 构建的 AI 工厂,推动新一轮生成式 AI 的突破。NVIDIA 展区让您一站式领略基于 CUDA 的全栈加速计算技术。


在数据科学层面,我们将展示如何通过 NVIDIA RAPIDS™ cuDF 获得 GPU 高效计算优势的数据分析,无需代码更改,实现更快的 Pandas 数据处理和分析速度。


NVIDIA NeMo™ 用于构建、定制和部署生成式 AI,提供管护数据、训练和定制基础模型以及大规模运行推理的组件。


在 LLM 训练层面,我们将展示 NVIDIA Megatron-Core,它能够支持多模态训练、MoE 模型的训练吞吐量优化、快速分布式检查点,并进一步提高可扩展性;


在 LLM 推理和部署层面,您将看到 NVIDIA TensorRT-LLM 推理引擎,它为推理的 LLM 提供编译和优化库,并为定义和构建新模型提供 Python API,而 NVIDIA Triton™ 推理服务器是 AI 部署的“中央车站”,它提供 TensorRT-LLM C++ 运行时加速推理,包含 in-flight batching,paged KV caching 等技术。


在 AI 应用开发平台层面,我们将展示 NVIDIA NIM 微服务,这是一个加速企业在云、数据中心和工作站中部署生成式 AI 的预构建容器工具,您还将体验 NVIDIA 企业开发者社区带来的基于 NIM 和 RAG 的技术演示,这些智能对话助手结合了多模态和 AI-Agent 技术,展示了 NIM 在电力、消费互联网、企业 IT 服务、汽车等各个行业的应用潜力。


通过万卡级别及以上的集群开发和运行 LLM 已经成为常态,凭借高效的 Scale-Up 和 Scale-Out 的方式提升集群性能,是网络定义数据中心的具体表现。NVIDIA NVLink 提供了领先的 Scale-Up 性能,是将模型规模扩大到万亿参数的第一层保障;NVIDIA Spectrum-X InfiniBand 网络平台为 AI 数据中心的 Scale-Out 提供了强大的网络横向加速性能。我们将展示 NVIDIA Spectrum-4 SN5600 网络交换机、BlueFields®-3 网络平台、NVIDIA DOCA™ DPU 软件开发平台,以及基于 NVIDIA Spectrum-4 的阿里云白盒以太网交换机,它是全球第一代专门面向高性能 AI 的数据中心交换机。


作为工业数字化和生成式物理 AI 的核心技术之一,NVIDIA Omniverse™ 平台也是本次展出的一大看点,助力开发 OpenUSD 应用程序。


精彩 LLM 互动技术演示


我们将展示由 Inworld AI 与 NVIDIA 合作创建的动态 NPC 交互技术演示,它集成 NVIDIA Riva 自动语音识别功能以实现准确的语音转文本,并使用 NVIDIA Audio2Face 提供逼真的面部动画。


另一个使用 Stable Diffusion ComfyUI 应用的图像生成技术演示,借助 NVIDIA RTX 实现了 10 倍更快的图像生成和一步式训练 ControlNets,ComfyUI 通过 TensorRT 加速,可将图像和视频生成速度提高 60%,体验者能够基于即时自拍照,来创建超级英雄形象并在几秒钟内完成。


NVIDIA 企业开发者社区也展示了中文智能对话的数字人技术演示,它利用 TensorRT-LLM 实现了千问大模型的本地化部署,并且应用了 ASR 模型,TTS 模型,RAG 技术和 Audio2Face 技术。


探索丰富的学习资源


NVIDIA 初创加速计划致力于培养颠覆行业格局的优秀创业公司,其展示内容将在现场开放。此外,您还会看到 NVIDIA 企业开发者社区和 NVIDIA 深度学习培训中心(DLI)的身影,为创业者、开发者和学习者提供丰富的资源和支持。到访“NVIDIA 实战培训”互动体验区,您可以现场体验 NVIDIA 培训配备云端实验环境的在线自学课程,并从 50 门课程中自由选择领取多门免费课程。到访观众还有特别培训课程的免费兑换权益。此外,“NVIDIA AI 小课堂”也将如期而至,为参会者提供与讲师互动的机会,让您亲身感受 AI 技术带来的魅力与变革。


课程及讲师详细信息:


  • 基于 NIM 构建 LLM-RAG 智能检索应用

    赵阳阳,NVIDIA 企业开发者社区经理


  • NVIDIA AI 推理加速解决方案

    何琨,NVIDIA 企业开发者社区高级经理


  • NVIDIA Spectrum-X – 适用于 AI 的下一代以太网

    崔岩,NVIDIA 网络技术专家


云上解决方案和客户用例展示


在 NVIDIA 展区,您将看到使用 NVIDIA 加速计算的云上解决方案和企业用户实践:


  • 猿辅导集团:Motiff 妙多 AI 时代设计工具,基于 NVIDIA 加速计算,驱动 AI 直接生成产品界面。


  • 吉利集团:极氪浩瀚智驾 2.0 启动端到端大模型,基于 NVIDIA 芯片,打造智驾新体验,自研域控,行车,泊车与主动安全全场景覆盖,城市领航功能全国都能用。


  • 阿里云容器服务(ACK)在阿里云容器服务 ACK 集群上部署 NIM 预构建容器工具,使用其云原生 AI 套件,开源的 KServe 等组件和 Prometheus 监控服务,以及 NIM 提供的丰富监控指标,快速拉起高性能、可实时观测、极致弹性的模型推理服务。


  • 魔搭社区魔搭社区上线 TensorRT-LLM,支持主流 LLM 推理优化和常用量化方法,并适配不同环境,其中使用 FP8 量化,可获得相比 HuggingFace 基准,最高 8.6 倍的整体推理性能提升。


  • 蚂蚁集团:图谱自动构建和可信问答,基于 LLM 的私域知识库自动图谱构建和可信问答。


  • 阿里云云工开物校园云 NVIDIA 与阿里云支持中国高校 AI 通识教育。


  • 阿里云函数计算(FC):阿里云与 NVIDIA 共同打造更高效的推理平台,推理速度提升 30%。


  • 月之暗面:Kimi 底层推理平台 Mooncake——基于 KVCache 的分离式推理架构。


  • 阿里云计算巢服务NVIDIA AI Enterprise 结合计算巢实现 LLM 快速 SaaS 化和软件一站式上云。


  • vGPU按“虚”而动,大势所趋,NVIDIA vGPU 解决方案助力阿里云弹性计算。


亮点二:

NVIDIA 专场“大语言模型时代的加速计算”

9 月 20 日 14:00 - 17:45,A 馆 A1-1


在 NVIDIA 专场中,我们将邀请数位技术专家与生态企业共同探讨大语言模型落地应用的关键要素,并分享全栈加速计算的技术经验。


上下滑动查看演讲详情


亮点三:

NVIDIA 精彩演讲与专题论坛


在本次云栖大会上,与会者不仅可以亲临展台参观体验,还能现场聆听 NVIDIA 多位专家的精彩演讲与洞察分享。


在大会首日《云与 AI 的创见》 主论坛的圆桌对话环节 ,NVIDIA 全球副总裁,汽车事业部负责人吴新宙将分享对 “生成式 AI 重塑自动驾驶” 话题的见解。在“智汇”她力量论坛,NVIDIA 全球副总裁刘念宁将带来主题为新工业革命中的女性“加速度”的演讲。在 20 日的“面向 Al 的可预期智算网络”论坛,NVIDIA 网络高级副总裁 Gilad Shainer 将分享 NVIDIA AI 计算和网络架构在下一代 AI 数据中心设计中的重要作用。此外,NVIDIA 的专家和生态企业还将在 NVIDIA 加速计算专场等论坛,以及并行话题演讲,带来以 NIM, Megatron-Core, TensorRT-LLM,NVIDIA Drive 平台等为主题的加速计算技术。


上下滑动查看演讲详情


亮点四:

NVIDIA Inception Pavilion 展区

3 号馆 3-11K


今年,10 家来自 NVIDIA 初创加速计划的会员企业也将在大会上一展风采。特别值得一提的是,其中 4 家来自亚太区域的会员企业将首次亮相云栖大会。欢迎您前来参观 NVIDIA Inception Pavilion 展区,与这些企业互动交流,了解来自不同国家和地区的科创企业在各自领域的最新技术突破。


参展企业一览


6Estates、FathomX Pte.Ltd.、MetaLearner、8glabs Inc.、WeShop、深圳幻影未来信息科技有限公司、万生华态科技有限公司、北京睿甄创新科技有限公司、酷牛创新技术(深圳)有限公司、埃罗科技(上海)有限公司。


与您相约在云栖


精彩内容即将揭幕,敬请持续关注 NVIDIA 公众号,我们将为您解锁更多大会亮点和参会攻略!让我们共同期待这场科技盛宴的到来,一起在云栖大会上见证 AI 技术如何塑造未来。



GTC 2025 内容征集现已开放点击“阅读原文”,或扫描下方海报二维码即可提交。2025 年 3 月,在圣何塞向全世界分享您的成就。

评论
  • 在智能家居领域中,Wi-Fi、蓝牙、Zigbee、Thread与Z-Wave等无线通信协议是构建短距物联局域网的关键手段,它们常在实际应用中交叉运用,以满足智能家居生态系统多样化的功能需求。然而,这些协议之间并未遵循统一的互通标准,缺乏直接的互操作性,在进行组网时需要引入额外的网关作为“翻译桥梁”,极大地增加了系统的复杂性。 同时,Apple HomeKit、SamSung SmartThings、Amazon Alexa、Google Home等主流智能家居平台为了提升市占率与消费者
    华普微HOPERF 2025-01-06 17:23 141浏览
  • 村田是目前全球量产硅电容的领先企业,其在2016年收购了法国IPDiA头部硅电容器公司,并于2023年6月宣布投资约100亿日元将硅电容产能提升两倍。以下内容主要来自村田官网信息整理,村田高密度硅电容器采用半导体MOS工艺开发,并使用3D结构来大幅增加电极表面,因此在给定的占位面积内增加了静电容量。村田的硅技术以嵌入非结晶基板的单片结构为基础(单层MIM和多层MIM—MIM是指金属 / 绝缘体/ 金属) 村田硅电容采用先进3D拓扑结构在100um内,使开发的有效静电容量面积相当于80个
    知白 2025-01-07 15:02 66浏览
  • 彼得·德鲁克被誉为“现代管理学之父”,他的管理思想影响了无数企业和管理者。然而,关于他的书籍分类,一种流行的说法令人感到困惑:德鲁克一生写了39本书,其中15本是关于管理的,而其中“专门写工商企业或为企业管理者写的”只有两本——《为成果而管理》和《创新与企业家精神》。这样的表述广为流传,但深入探讨后却发现并不完全准确。让我们一起重新审视这一说法,解析其中的矛盾与根源,进而重新认识德鲁克的管理思想及其著作的真正价值。从《创新与企业家精神》看德鲁克的视角《创新与企业家精神》通常被认为是一本专为企业管
    优思学院 2025-01-06 12:03 113浏览
  • 这篇内容主要讨论三个基本问题,硅电容是什么,为什么要使用硅电容,如何正确使用硅电容?1.  硅电容是什么首先我们需要了解电容是什么?物理学上电容的概念指的是给定电位差下自由电荷的储藏量,记为C,单位是F,指的是容纳电荷的能力,C=εS/d=ε0εrS/4πkd(真空)=Q/U。百度百科上电容器的概念指的是两个相互靠近的导体,中间夹一层不导电的绝缘介质。通过观察电容本身的定义公式中可以看到,在各个变量中比较能够改变的就是εr,S和d,也就是介质的介电常数,金属板有效相对面积以及距离。当前
    知白 2025-01-06 12:04 167浏览
  • 每日可见的315MHz和433MHz遥控模块,你能分清楚吗?众所周知,一套遥控设备主要由发射部分和接收部分组成,发射器可以将控制者的控制按键经过编码,调制到射频信号上面,然后经天线发射出无线信号。而接收器是将天线接收到的无线信号进行解码,从而得到与控制按键相对应的信号,然后再去控制相应的设备工作。当前,常见的遥控设备主要分为红外遥控与无线电遥控两大类,其主要区别为所采用的载波频率及其应用场景不一致。红外遥控设备所采用的射频信号频率一般为38kHz,通常应用在电视、投影仪等设备中;而无线电遥控设备
    华普微HOPERF 2025-01-06 15:29 125浏览
  • PLC组态方式主要有三种,每种都有其独特的特点和适用场景。下面来简单说说: 1. 硬件组态   定义:硬件组态指的是选择适合的PLC型号、I/O模块、通信模块等硬件组件,并按照实际需求进行连接和配置。    灵活性:这种方式允许用户根据项目需求自由搭配硬件组件,具有较高的灵活性。    成本:可能需要额外的硬件购买成本,适用于对系统性能和扩展性有较高要求的场合。 2. 软件组态   定义:软件组态主要是通过PLC
    丙丁先生 2025-01-06 09:23 83浏览
  • 大模型的赋能是指利用大型机器学习模型(如深度学习模型)来增强或改进各种应用和服务。这种技术在许多领域都显示出了巨大的潜力,包括但不限于以下几个方面: 1. 企业服务:大模型可以用于构建智能客服系统、知识库问答系统等,提升企业的服务质量和运营效率。 2. 教育服务:在教育领域,大模型被应用于个性化学习、智能辅导、作业批改等,帮助教师减轻工作负担,提高教学质量。 3. 工业智能化:大模型有助于解决工业领域的复杂性和不确定性问题,尽管在认知能力方面尚未完全具备专家级的复杂决策能力。 4. 消费
    丙丁先生 2025-01-07 09:25 80浏览
  •     为控制片内设备并且查询其工作状态,MCU内部总是有一组特殊功能寄存器(SFR,Special Function Register)。    使用Eclipse环境调试MCU程序时,可以利用 Peripheral Registers Viewer来查看SFR。这个小工具是怎样知道某个型号的MCU有怎样的寄存器定义呢?它使用一种描述性的文本文件——SVD文件。这个文件存储在下面红色字体的路径下。    例:南京沁恒  &n
    电子知识打边炉 2025-01-04 20:04 98浏览
  • 本文介绍Linux系统更换开机logo方法教程,通用RK3566、RK3568、RK3588、RK3576等开发板,触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。制作图片开机logo图片制作注意事项(1)图片必须为bmp格式;(2)图片大小不能大于4MB;(3)BMP位深最大是32,建议设置为8;(4)图片名称为logo.bmp和logo_kernel.bmp;开机
    Industio_触觉智能 2025-01-06 10:43 87浏览
  • 根据Global Info Research项目团队最新调研,预计2030年全球封闭式电机产值达到1425百万美元,2024-2030年期间年复合增长率CAGR为3.4%。 封闭式电机是一种电动机,其外壳设计为密闭结构,通常用于要求较高的防护等级的应用场合。封闭式电机可以有效防止外部灰尘、水分和其他污染物进入内部,从而保护电机的内部组件,延长其使用寿命。 环洋市场咨询机构出版的调研分析报告【全球封闭式电机行业总体规模、主要厂商及IPO上市调研报告,2025-2031】研究全球封闭式电机总体规
    GIRtina 2025-01-06 11:10 103浏览
  • By Toradex 秦海1). 简介嵌入式平台设备基于Yocto Linux 在开发后期量产前期,为了安全以及提高启动速度等考虑,希望将 ARM 处理器平台的 Debug Console 输出关闭,本文就基于 NXP i.MX8MP ARM 处理器平台来演示相关流程。 本文所示例的平台来自于 Toradex Verdin i.MX8MP 嵌入式平台。  2. 准备a). Verdin i.MX8MP ARM核心版配合Dahlia载板并
    hai.qin_651820742 2025-01-07 14:52 40浏览
  • 随着市场需求不断的变化,各行各业对CPU的要求越来越高,特别是近几年流行的 AIOT,为了有更好的用户体验,CPU的算力就要求更高了。今天为大家推荐由米尔基于瑞芯微RK3576处理器推出的MYC-LR3576核心板及开发板。关于RK3576处理器国产CPU,是这些年的骄傲,华为手机全国产化,国人一片呼声,再也不用卡脖子了。RK3576处理器,就是一款由国产是厂商瑞芯微,今年第二季推出的全新通用型的高性能SOC芯片,这款CPU到底有多么的高性能,下面看看它的几个特性:8核心6 TOPS超强算力双千
    米尔电子嵌入式 2025-01-03 17:04 55浏览
  • 根据环洋市场咨询(Global Info Research)项目团队最新调研,预计2030年全球无人机锂电池产值达到2457百万美元,2024-2030年期间年复合增长率CAGR为9.6%。 无人机锂电池是无人机动力系统中存储并释放能量的部分。无人机使用的动力电池,大多数是锂聚合物电池,相较其他电池,锂聚合物电池具有较高的能量密度,较长寿命,同时也具有良好的放电特性和安全性。 全球无人机锂电池核心厂商有宁德新能源科技、欣旺达、鹏辉能源、深圳格瑞普和EaglePicher等,前五大厂商占有全球
    GIRtina 2025-01-07 11:02 63浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦