尽管生成式AI令人感到惊喜,但很多创新还没有真正落实到每个用户或企业的AI应用上。为了开发出真正不可或缺的“AI杀手级应用”,必须加快创新步伐,激励更多开发者致力于AI领域的开发和创新活动。

“虽然我们已经经过机器学习、深度学习、生成式AI,到现在讨论更多的是怎么样能够落地企业AI,但我们离无处不在的AI其实还有很长的路要走。”英特尔中国软件技术合作事业部总经理唐炯日前在一场企业AI开放软件生态媒体会上指出,要推进AI无处不在,需要考虑三件事:

首先是加速创新。尽管生成式AI令人感到惊喜,但很多创新还没有真正落实到每个用户或企业的AI应用上。为了开发出真正不可或缺的“AI杀手级应用”,必须加快创新步伐,激励更多开发者致力于AI领域的开发和创新活动。

其次要使AI价值最大化。AI的互动不仅限于手机和PC等设备,更重要的是要为个人和企业带来实际价值。这意味着需要探索如何最大化AI的价值,包括在云、边缘和端侧的部署,以及如何将最合适的工作负载匹配到最合适的平台上,从而优化成本结构。

最后要实现灵活部署。AI技术覆盖了从算力基础到操作系统、数据库、大数据,再到应用的整个技术堆栈。为了实现不同软件模块在不同设备和不同硬件架构上的灵活部署,需要对AI解决方案进行解构,以便减少手动编码需求,并确保数据保护。

英特尔中国软件技术合作事业部总经理唐炯

开放

在唐炯看来,企业在部署AI解决方案时面临的最大技术挑战,来自于技术堆栈的复杂性和跨硬件平台效率的差异性,这决定了不可能有单一厂商能够提供全面的AI解决方案,而是需要多方合作。

因此,在加速创新方面,英特尔选择了关键词“开放”——即向围绕软件、围绕应用、面向个人和企业的开发者提供一个更加开放的资源平台,例如PyTorch、TensorFlow和Python等可编程的开放环境,以支持开发者进行应用创新。

同时,考虑到AI基础架构变得越来越多样化,在算力层面进行更多的兼容性优化就显得尤为重要。通过提供oneAPI、OpenVINO等开源工具,英特尔为开发者在异构底层平台上的兼容性和一次性编程的便利性方面提供了巨大支持。

关于可靠性,众所周知,AI推理当前还存在的一些“幻觉”问题,所以一方面要确保数据的可靠性和隐私性,另一方面要提升推理的准确度。“面对消费级应用,90%-95%的准确度是可以接受的,但在企业级AI层面,这个数字就完全无法接受。”唐炯表示,当前,英特尔正在与合作伙伴共同为客户提供更多的POC机会,帮助他们降低成本,并且能够让更多开发者的创新能够在集群化、可靠的测试平台上得到验证和优化。

开源

唐炯强调说,对开放AI生态系统的长期投入、以及对合作伙伴的支持至关重要,只有这样才能为用户提供更好的、更适合的AI解决方案。因此,英特尔希望推动解决方案的解构,以便实现灵活部署并减少手动编码,同时保护数据。这种解构策略旨在使生态合作伙伴专注于自身优势,通过合作提供定制化、高效的AI解决方案,从而促进AI在企业中的实际应用。

在全球范围内打造的AI开源社区“Open Platform for Enterprise AI”(OPEA)正是上述理念的体现,旨在促进更多的厂商共同开发企业级AI应用,共享各方的代码和模块,最终形成开放、透明的平台,让完整的企业级AI落地应用。

换言之,未来虽然会有更多的异构计算、创新应用和数据管理与治理方案,但是通过一个开放、透明的平台,通过开源社区的贡献,使得大家能够更便利地了解到自身所处的位置、能够在整个解决方案当中所做的贡献以及可优化之处,不至于因为某一个大模型选择错误而将整个应用推倒重来、重新编码,从而拥有更加灵活的配置方式。

在谈及AI时代与云计算时代对打造“开源开放生态”有哪些异同话题时,唐炯认为两者之间在很多底层逻辑上有着本质的区别:在云计算时代,通过任务调度和资源的多用户共享,实现了规模经济和成本效益,使得服务商能够通过细分CPU使用时间来降低成本并提高利润。然而,AI时代的计算需求改变了这一模式,因为无论是AI加速器还是GPU都是持续运行的,没有空闲时间,导致AI的成本结构与传统云计算截然不同。同时,为了在AI时代实现价值最大化,还需要将基础架构与AI应用紧密结合,并考虑在云、边缘和端侧的部署策略。

此外,AI时代除了调度之外,更多还是要考虑如何充分释放有限的算力,这就对硬件环境和算力利用提出了新要求。开发人员必须要考虑到异构计算环境中的负载协调、底层与应用层之间的高效接口匹配,以及数据安全和可靠性的重要性。考虑到应用的灵活性,还需要能够轻松地“热插拔”不同的大模型以适应不同的需求,减少因模型或数据库变更而需要修改整个应用或代码的情况。

也正是在这些因素的推动下,需要打造覆盖算力、基础设施、软件和应用等多个层面解决方案提供商的AI生态系统。这些提供商在专业领域各有优势,英特尔希望通过AI开源生态的不断完善,推动各个合作伙伴可以专注于自己的强项,实现优势互补,从而有效落地AI应用。

生态伙伴

东方国信副总裁兼CTO查礼着重强调了生态的重要性。他表示,智算时代中,硬件环境、交互体验、开发模式和应用构建的变革,是最值得注意的四个方面。比如原来主要集中在通算密集型应用的硬件环境,需要切换到包含GPU、ASIC等的密集型计算;再比如模型的适配,或是在不调整硬件的情况下,通过软件提升模型微调和推理的能力等等。

应用构建方面,从传统的LAMP技术体系,转向需要行业模型、知识库和工具链(如RAG和Agent)的现代构建方式,OPEA恰好涵盖了这些变革。这些变革为企业IT系统带来了由AI驱动和赋能的新机遇,作为软件开发商,东方国信希望构建一个由AI驱动并赋能的、重塑的企业IT系统,并与生态伙伴一起,共同推进国内企业级AI系统的发展。

“大模型作为智能时代的先驱,其主要作用是提升人类处理非标准化数据的能力”,孟凡军谈到。由于企业决策者对AI的理解程度有所不同,因此更需要像OPEA这样的框架,帮助企业理解AI价值、并推动AI的规模化应用。海鑫智圣总经理孟凡军强调了与英特尔在云端AI处理和边缘端部署方面的合作,特别是面临云、边、端精度统一的挑战时,他认为可以通过与底层芯片在云、边、端的紧密合作和底层拟合,实现数据集和精度的统一。 

星环科技生态合作部总经理张雷则从近期《黑神话:悟空》带来的设备升级潮谈起,指出硬件销售和应用普及的每个阶段都有其特定的“抓手”,尤其是对于AI应用厂商而言,开发用户易于使用的AI产品是实现规模化的关键。

他强调指出,AI发展与数据密不可分,虽然许多大模型依赖公共知识和数据,但要在企业端实现大数据的真正落地,必须结合企业的私有化数据。星环科技与英特尔一直在企业端合作处理大模型和私有化数据,未来还将继续深化这一合作。

责编:Lefeng.shao
本文为EET电子工程专辑原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
阅读全文,请先
您可能感兴趣
何同学在视频中声称“我们专门写了一个软件”,但随后被网友指出,该软件实际上是GitHub上的开源项目“ASCII generator”,并且何同学在视频中删除了原作者的信息。
此次仲裁的核心争议在于,杨植麟和张宇韬在未取得循环智能投资方的同意豁免书之前,便启动了融资并创立了月之暗面。2024年3月,月之暗面旗下AI应用产品Kimi大火,甚至出现二级市场Kimi概念股。
随着工艺技术的发展放缓而晶体管数量增加,芯片开发变得越来越困难。Synopsys选择了收购设计分析和仿真巨头Ansys,此后,拥有管理和优化 EDA 计算环境所需所有工具的Altair,成为了最后一个可以挑战 Ansys 而不受约束的玩家。如今,花落西门子……
具身智能并不是一个全新的概念,早在1950年,图灵在他的论文《Computing Machinery and Intelligence》中就提到了这种机器,即一种能够像人类一样与环境互动、感知、自主规划、决策并执行任务的机器人或仿真人,是AI的终极形态。
 自主研发可搭载于Linux系统的存储器控制解决方案“HMSDK”,竞争力得到广泛认可  HMSDK可有效优化异构存储器之间的性能,带宽提升30%,性能提升12%以上  “提高HBM等面向AI的存储器硬件实力的同时,也提升软件竞争实力,双管齐下促进行业生态系统发展”
9月10日,苹果发布了一系列新品,包括iPhone 16系列手机、Apple Watch Series 10智能手表和AirPods 4耳机。发布会后网上响起了一片吐嘈声,带着这些吐槽,我们来看看这次苹果到底有没有新玩意……
自托管加密钱包是一种数字工具,它让用户可以完全掌控加密货币的私钥,特别是像比特币这样的数字资产。对于初次接触加密货币的用户来说,了解如何购买比特币是使用自托管钱包的第一步......
12月11-12日,“上海集成电路2024年度产业发展论坛暨第三十届集成电路设计业展览会”(ICCAD-Expo 2024)将在上海世博展览馆隆重举行。
NS800RT系列实时控制MCU凭借更加高效、功能更强大的实时控制能力和丰富的外设,使工程师能够在光伏/储能逆变器、不间断电源、工业自动化、协作机器人、新能源汽车大/小三电、空调压缩机等系统中,实现皮秒级别的PWM控制,从而显著提升系统运行精度和效率。
对于点击上面↑“电动知家”关注,记得加☆“星标”!电动知家消息,11月20日,小鹏汽车法务部官微发文称,近日,我们注意到在社交媒体及部分网络平台上流传着小鹏P7+采用了软包电池包的不实信息和谣言,且该
芯片超人现有1600平米芯片智能仓储基地,现货库存型号1000+,品牌高达100种,5000万颗现货库存芯片,总重量10吨,库存价值高达1亿+。同时,芯片超人在深圳设有独立实验室,每颗物料均安排QC质
对于点击上面↑“电动知家”关注,记得加☆“星标”!电动知家消息,11 月 20 日,蔚来正式将第三品牌命名为 “firefly萤火虫”,并宣布首款产品与品牌同名。firefly萤火虫品牌将于 12 月
11月21日消息,iQOO Neo10系列将于11月29日发布,共iQOO Neo10和iQOO Neo10 Pro两款机型。随着发布会的临近,新机也已进入预热节奏,在公布性能表现后,iQOO Neo
对于点击上面↑“电动知家”关注,记得加☆“星标”!电动知家消息,本月初,小鹏P7+正式上市,包含限定版在内一共有三款车型,售价区间为17.88-21.88万元,超高的性价比让鹏P7+成为小鹏汽车的又一
11月18日,福建兆元光电有限公司(以下简称“兆元光电”)与厦门大学福建省半导体光电科技经济融合服务平台签署战略合作协议,双方将就Mini/Micro LED新型显示关键技术研发进行深入合作,推动Mi
蔚来小鹏奔向盈利”作者|刘雅杰编辑|秦章勇丢掉包袱,丢掉幻想,眼下新势力必须赚钱活下去,才是唯一出路。第三季度财报都已经发布,官方的说法大多是润色过的,比如理想是连续8个季度盈利,小鹏则效仿小米汽车,
对于点击上面↑“电动知家”关注,记得加☆“星标”!电动知家消息,11月20日,据“吉利汽车集团”官方发布消息,哈尔滨第9届亚冬会首批官方指定用车——吉利醇氢电混汽车发车仪式在吉利晋中基地举行,350辆
11 月 21 日消息,努比亚 Z70 Ultra 旗舰手机今日正式发布,延续了屏下前摄“真全面屏”设计,定价 4599 元起,现已开启预售,11 月 25 日上午 10 点正式开售。12GB + 2
印尼准备评估苹果公司提出的1亿美元投资提案,此时苹果公司试图说服政府解除对iPhone 16设下的销售禁令。印尼工业部在22日晚间发出的声明说,印尼确认已经收到苹果最新的投资提案,内容包含要在西爪哇省