要点
—
• 高通与智谱合作将GLM-4V端侧视觉大模型，面向骁龙8至尊版进行深度适配和推理优化，支持丰富的多模态交互方式。
• 利用骁龙8至尊版的强大终端侧AI性能和高通AI软件栈为模型带来的性能优化，GLM-4V端侧视觉大模型能够以超过70 tokens/秒的速度在终端侧高速运行。
• GLM-4V-Mini、GLM-4V-Nano端侧视觉大模型和GLM-4-9B模型即将在高通AI Hub上线，搭载骁龙8至尊版的商用手机均可支持。
高通技术公司高级副总裁兼技术规划和边缘解决方案业务总经理马德嘉表示：
高通与智谱共同致力于推动生成式AI在边缘终端上的应用和普及，并已经在手机、PC、汽车等领域展开了紧密合作。结合高通在终端侧AI领域的长期领导力，跨不同边缘终端的广泛市场布局，以及骁龙8至尊版的AI创新，我们在推动终端侧生成式AI发展方面独具优势。多模态是发挥终端生成式AI潜力的重要技术发展方向，我们期待携手智谱，探索多模态在终端侧AI应用上的更多可能。
骁龙8至尊版移动平台提供了卓越的AI算力，结合高通AI软件栈推理框架的性能优化，使得智谱的终端侧大模型可以在设备端实现高速推理。我们相信，终端侧算力平台的性能跃迁结合大模型能力的进步，会将生成式AI带入新的时代。终端侧运行的生成式AI，在为用户提供变革性体验的同时，能更好地保护用户隐私安全，真正让AI变革用户的日常生活。
