广告

“神经生成”研究催生最新人工智能算法

时间:2017-09-13 05:02:14 作者:R. Colin Johnson 阅读:
IBM开发的一种新算法解决方案,是以生物学家在神经生成方面的最新发现为基础。
广告

为何人脑能每天学习新事物,而且不必抛弃旧有记忆为新记忆腾出储存空间?正在开发模仿人脑的机器算法之研究人员,试图寻找各种答案。

一个相对较新的算法解决方案,是以生物学家在神经生成(neurogenesis)──也就是新脑细胞(神经元)的成长,以及旧脑细胞的消灭,还有这些脑细胞之间的大大小小连结(较强或较弱的突触);主要是在海马回(hippocampus)内──方面的最新发现为基础。

IBM Research的一个研究团队假设,神经生成是海马回内稀疏字典学习(Sparse dictionary learning)的关键;他们认为,其功能是将最高效率的大脑编码保持在最新状态。

为了证实他们对于海马回内的神经生长、死亡功能之假设,IBM Research研究人员开发了神经生成在线字典学习(neurogenetic online dictionary learning,NODL)算法,号称表现超越标准的ODL算法,透过建立更精简的表示方法(representation),改善了重建的准确度。

IBM是在8月底于澳洲墨尔本举行的IJCAI 2017国际人工智能联合会上发表其最新研究成果;IBM Research的AI基础研究团队科学家Irina Rish接受EE Times专访时表示:“人们总是认为,所有的脑细胞都是跟我们一起诞生,这些细胞可能会死亡,但是不会有新的脑细胞出生;但事实证明,很多大脑的干细胞(stem cells)是可以被打开,例如可取代受损的细胞。”

她表示,在海马回内的大脑干细胞一直处于开启状态,以制造新的神经元支持更好的大脑编码;同样的,糟糕的编码会让该神经元死亡。
20170904-IBM0-NODL-1
*IBM的研究团队用标准化影像数据集来评估其NODL算法;从图中可见NODL (蓝色)表现超越ODL (紫色),藉由建立了更精简的表示方法改善了重建准确度
(来源:IBM Research)*

Rish是专攻人工智能的计算机科学家,她第一份工作是在IBM的机器学习团队,研究如何利用AI来诊断疾病;后来她转调IBM的运算神经科学(computational neuroscience)团队,现在则是加入AI基础研究实验室(AI Foundations Lab),负责开发深度学习以外模拟人脑各方面微妙功能的算法:“我们是第一个针对海马回干细胞神经元生/死功能进行详尽分析的团队。”

IBM在IJCAI大会上,以“神经生成启发字典学习:适应世界变化的在线模型”(Neurogenesis-Inspired Dictionary Learning: Online Model Adaption in a Changing World)为题,分享了其神经生成在线字典学习模型,具备能适应环境改变的加强能力,并展示了其NODL算法在准确度上超越标准ODL的成果。

Rish的团队并没有尝试模仿海马回内的神经生成,因为欧盟的Blue Brain研究项目正在进行这方面的研究;IBM研究人员试图揭开神经生成功能奥秘,然后将结果导入软件算法,以执行相同的功能。Rish的团队并假设海马回中的齿状回(dentate gyrusof),能改善认知功能,包括识别与分辨图形。

深度学习算法通常是模仿人脑的神经可塑性(neuroplasticity)──也就是突触的使用增加就能使之强化,反之突触很少使用就会萎缩;而神经生成透过新生成稀疏神经网络来完成全新任务,又藉由让老旧、很少使用的神经元死亡来彻底抹除过时任务,如此为机器学习添加全新的面向,能定义全新的感知数据集“字典”、同时淘汰旧的,以响应环境的改变。

Rish表示:“神经生成解释了人类的终身持续学习是如何完成──也就是那些新的、经压缩的数据编码是如何能精炼过去非常大的架构,例如将庞大的深度神经网络以简洁的版本取代,如此在运作上就能更快速、性能更好;”她指出,IBM的NODL模型对于今日快速变化的环境特别具有优势,神经的死亡与神经新生、还有以突触为基础的深度学习同等重要,

编译:Judith Cheng

本文为《电子工程专辑》原创,版权所有,谢绝转载

EETC wechat barcode


关注最前沿的电子设计资讯,请关注“电子工程专辑微信公众号”。

本文为EET电子工程专辑 原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
R. Colin Johnson
EETimes前瞻技术编辑。R. Colin Johnson自1986年以来一直担任EE Times的技术编辑,负责下一代电子技术。 他是《Cognizers – Neural Networks and Machines that Think》一书的作者,是SlashDot.Org的综合编辑,并且是他还因对先进技术和国际问题的报道,获得了“Kyoto Prize Journalism Fellow”的荣誉。
  • 在中国20多年的天津三星电子正式注销,裁员跟着就来 9月9日,爱企查App显示,天津三星电子有限公司的经营状态由存续变更为注销。
  • 华夏芯域名、专利等资产公开拍卖 拍卖标的包括三项域名以及15项软件著作权和14项专利。其中,三项域名的起拍价为13879元,15项软件著作权和14项专利的起拍价为15550元……
  • 传音控股CFO肖永辉被立案调查 根据通知书内容,因某种未具体披露的原因,丹东市振安区监察委员会决定对肖永辉采取留置措施,并对其立案调查。此消息一出,立刻引起了市场的广泛关注。
  • 传台积电9月底前低价引进High-NA EUV设备,价格远低于3.5亿欧元 值得一提的是,台积电此次购入价格可能远低于原定的3.5亿欧元的单台报价。ASML同意以折扣价向台积电出售High-NA EUV设备的原因主要是因为台积电是其超级VIP客户,ASML给予了很大的让步。
  • 苹果发布iPhone 16系列、AirPods 4及Apple Watch Series 10等新品 9月10日,苹果发布了一系列新品,包括iPhone 16系列手机、Apple Watch Series 10智能手表和AirPods 4耳机。发布会后网上响起了一片吐嘈声,带着这些吐槽,我们来看看这次苹果到底有没有新玩意……
  • Rambus宣布推出业界首款HBM4控制器IP,以加速下一代AI工作负载 Rambus的HBM4控制器IP还具备多种先进的特性集,旨在帮助设计人员应对下一代AI加速器及图形处理单元(GPU)等应用中的复杂需求。这些特性使得Rambus在HBMIP领域继续保持市场领导地位,并进一步扩展其生态系统支持。
  • 全球折叠屏手机快速增长,中国品牌压 • 得益于西欧、关键亚洲市场和拉丁美洲市场的增长,以及中国品牌的持续领先,全球折叠屏手机出货量在2024年第二季度同比增长了48%。 • 荣耀凭借其在西欧特别强劲的表现,成为最大的贡献者,成为该地区排名第一的品牌。 • 摩托罗拉的Razr 40系列在北美和拉丁美洲表现良好,为其手机厂商的出货量贡献了三位数的同比增长。 • 我们预计,头部中国手机品牌厂商的不断增加将至少在短期内抑制三星Z6系列在第三季度的发布。
  • AI网络物理层底座: 大算力芯片先进 AI技术的发展极大地推动了对先进封装技术的需求,在高密度,高速度,高带宽这“三高”方面提出了严苛的要求。
  • 奕斯伟计算DPC 2024:发布RISAA(瑞 奕斯伟计算2024首届开发者伙伴大会以“绿色、开放、融合”为主题,从技术创新、产品应用、生态建设等方面,向开发者、行业伙伴等相关方发出开放合作倡议,加速RISC-V在各行各业的深度融合和应用落地,共同推动RISC-V新一代数字基础设施生态创新和产业发展。
  • 重磅发布:Canalys 2024年中国云渠道 2024年 Canalys 中国云计算渠道领导力矩阵冠军厂商分别是:阿里云、华为云和亚马逊云科技(AWS)
广告
热门推荐
广告
广告
广告
EE直播间
在线研讨会
广告
广告
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了