MediaTek 与腾讯会议联合优化的端侧 NPU 虚拟背景功能,已在搭载 MediaTek 天玑旗舰芯的终端正式上线。作为双方初次开展的软硬件生态合作,此次联合优化旨在充分利用天玑移动平台的 AI 算力,为腾讯会议用户打造更加智能的线上会议体验。
腾讯会议的虚拟背景功能以人像分割技术为依托,能够在视频会议时自动识别参会人,并将周围环境替换为指定图像或视频。基于自建多样性数据集,AI 人像分割技术不但能够在各应用场景中实现稳定精准的人像分割,且模型设计兼具轻量化与高计算性价比。用户使用各种类型的终端,都能获得流畅且准确的人像分割效果。
【腾讯会议 APP 端-虚拟背景设置】
此次更优性能的端侧虚拟背景功能的实现,离不开 MediaTek 天玑旗舰芯提供的强大硬件与算力支撑。天玑 9400 旗舰芯集成了 MediaTek 第八代 AI 处理器 NPU 890,能够利用强大的 AI 算力,高效处理语音、图像和视频等 AI 任务。此外,天玑 9400 配备 MediaTek 天玑 AI 智能体化引擎,支持端侧 AI 应用,结合时域张量硬件加速、端侧高画质视频生成等先进技术,使得 Stable Diffusion 端侧运行的性能提升 2 倍,让用户轻松享受高分辨率生图、端侧动图和视频生成等功能,体验到更多的趣味新玩法。
MediaTek 此次携手腾讯会议,针对模型在 GPU 和 NPU 架构上进行了协同优化,显著提升了处理速度和能效比,为带给用户更加流畅高效的智能线上会议体验。芯片硬件层面之外,MediaTek 还通过天玑 AI 开发套件 NeuroPilot,为腾讯会议提供了模型量化/转换、编译和集成的完整工具链(SDK/API/Document),使其能够更高效地开发和部署基于神经网络的 AI 应用程序,简化了基于 AI 的应用程序开发步骤。经由双方联合优化,腾讯会议【虚拟背景】功能在天玑 9400 旗舰芯 NPU 上运行的版本相较于 CPU FP 模式性能提升了 3.5-4 倍,执行耗时缩短了 6ms,并降低运行功耗,进一步延长了续航时间。
腾讯会议智能应用研发中心负责人左小祥表示:长期以来,除了通过 AI 算法在软件层优化性能,腾讯会议与底层硬件厂商积极合作,探索在硬件层提升性能与优化用户体验的更多可能。本次与 MediaTek 的合作,在天玑移动平台强大的 AI 算力支持下,腾讯会议将 AI 人像分割模型迁移至 MediaTek 天玑 AI 处理器 NPU 上运行,使得 AI 算法运行更快的同时,还大幅降低了算法的 CPU 占用,节省更多 CPU 资源。腾讯会议与 MediaTek 也将在未来更多软硬件生态的合作中,为用户打造更加便捷智能的线上会议体验,目前,腾讯会议已经在天玑 9000、天玑 9200、天玑 9300、天玑 9400 赋能的多个终端上线【虚拟背景】的端侧 NPU 版本。欢迎各位天玑用户下载腾讯会议 APP,体验高效 AI 性能加持的开会模式。
此次 MediaTek 与腾讯会议的合作是一次基于实际业务场景,并以用户体验为核心的重要移动端 AI 算力合作。其不仅为未来功能的拓展与创新构建了坚实的基础,也展现了 MediaTek 与腾讯会议携手推动行业向更高效、智能方向发展的努力与决心。未来,MediaTek 将继续携手腾讯会议,通过软硬件深度协同,共同精进并推动更多前沿 AI 能力的应用落地,为天玑移动平台上的腾讯会议用户提供更加卓越的使用体验。
*数据来自腾讯会议
LATEST NEWS
最丨新丨消丨息