广告

如何提高AI机器视觉的效率?

时间:2018-06-23 12:04:59 作者:Junko Yoshida 阅读:
今日的AI社群仍被无数问题所困扰;例如在计算机视觉方面,如IBM Research研究人员所言,最大的挑战在于如何“让视觉分析更有效率”...
广告

尽管有众多人工智能(AI)处理器竞相抢市──每一种都自称是“突破”──今日的AI社群仍被无数问题所困扰,包括能量、速度、AI硬件的尺寸与AI算法,这些都尚未证实在强韧度以及性能方面有所改善。

在计算机视觉方面,如IBM Research的计算机视觉与多媒体研究经理Rogerio Feris所言,最大的挑战在于如何“让视觉分析更有效率”。要特别说明的是,AI仍在早期发展阶段,需要全新的想法、长期性的眼光,以及学界与研究机构在研发上的更多投入。

IBM Research会在本周于盐湖城(Salt Lake City)举行的2018年度计算机视觉与图形识别研讨会(Conference on Computer Vision and Pattern Recognition,CVPR)上,发表两篇关于AI软件与硬件技术的论文;CVPR是由计算机视觉基金会(Computer Vision Foundation)以及IEEE计算机学会赞助,号称是最具竞争力的计算机视觉技术研讨会之一。

在AI硬件部分,IBM Research正在推广一种立体视觉(stereo-vision)系统,是透过将以大脑启发的棘波神经网络(spiking neural-network)技术应用于数据撷取(传感器)与数据处理所开发;该设计利用了IBM自家的TureNorth芯片──是一种非冯诺伊曼(non-von-Neumann)架构处理器──以及一对瑞士业者iniLabs开发的事件导向(event-driven)摄影机
IBMTrueNorthChip
*IBM的TrueNorth架构
(来源:IBM)*

在AI软件部分,IBM Research的论文是关于“Blockdrop”,也就是被认为可降低深度残差网络(deep residual networks)所需之总运算量的关键步骤。Feris解释,以上两篇论文是从两个不同角度解决一个相同的问题──视觉分析效率。

Feris表示,当有人要过马路,自动驾驶车辆会被预期要做出“实时推论”;虽然影像辨识准确度很重要,不过自驾车要花多少时间产生结论、识别出那是什么东西,才是它在现实世界应用的终极试验。

什么是“Blockdrop”?

在2015年ImageNet大会上成为赢家的残差网络,在计算机视觉技术社群掀起了一场风暴;该技术已经证明了它能提供优异的识别结果,因为能训练神经网络中的数百甚至数千层。不过Feris指出:“将残差网络需要的那些一体适用运算应用于所有成像,会太没有效率;”他解释,如果有一只狗在白色背景前,会比在忙碌都市街景中更容易被识别。

为此IBM Research开发了BlockDrop,这是一种学习动态选择残差网络中哪些区块(包括多个层)来执行推论任务的方法;Feris指出:“该方法的目标是妥善减少整体运算辆,同时不损失预测准确度。”
20180622-IBM_1
*BlockDrop说明
(来源:IBM)*

IBM声称,BlockDrop在测试中平均能将识别速度提升20%,有时甚至能加快36%,而且不牺牲残差网络在ImagNet数据集中达到的准确度。Feris表示,IBM这项研究是在2017年夏天与美国德州大学(University of Texas)、马里兰大学(University of Maryland)合作展开,该公司将会把BlockDrop释出给开放源码社群。

立体视觉应用的神经形态技术

在硬件方面,IBM Research瞄准了一种利用棘波神经网络的立体视觉系统;该公司表示,目前产业界是使用两个传统(讯框)摄影机来产生立体视觉,但从未有人尝试过神经形态技术。虽然以传统摄影机提供立体影像并非不可能,不过会需要高画质影像信号处理,例如高动态范围(HDR)成像、超高分辨率处理以及自动校准等。

根据IBM研究员Alexander Andreopoulos在论文中的描述,其系统是利用两个iniLabs开发的事件导向摄影机(又被称为动态视觉传感器-DVSe),撷取画面之后以IBM TrueNorth芯片丛集来提取快速移动物体之深度。

IBM的目标是大幅降低取得立体影像所需的功耗与延迟,在接收直播的棘波输入(这已经大幅降低数据量)后,该系统是用IBM的神经形态硬件重建3D影像,透过估算来自两个DVSe之影像的差异,以及藉由三角测量定位3D空间中的物体。
20180622-IBM_2
*神经形态立体影像
(来源:IBM)*

数据撷取与处理

有一家法国新创公司Prophesee是利用神经形态技术来撷取数据,并降低传感器所收集的资料量;该公司的传感器技术并非以讯框为基础,而是以简化并打造适合机器使用的数据为设计目标。Prophesee首席执行官先前接受EE Times采访时表示,这能大幅减轻数据量负担,应该也能因此让车子能做出几乎实时性的决策。

不过新一代的IBM立体视觉系统不只将类人脑技术用于数据撷取,也用在数据处理上,以重建立体影像;Andreopoulos表示,该系统还有一个最大的成就,是透过编程让TrueNorth有效率地执行「棘波神经网络立体视觉必备的各种常见子程序(sub-routines)」。IBM补充指出,TrueNorth芯片的架构功耗比传统系统低,这会有利于自动驾驶系统的设计。

同样的,利用一对DVS摄影机(非讯框式)也能降低数据量与功耗,并提升速度、减少延迟,提供更好的动态范围,而IBM表示这些都是实时系统设计的关键元素。在被问到新的TrueNorth系统还有那些优势时,Andreopoulos表示,与采用传统CPU/GPU处理器或FPGA的最先进系统相较,其每像素视差图功率(power per pixel disparity map)有两百倍的改善。

利用以事件为基础的输入,馈入IBM系统的实时影像数据,是以9颗TrueNorth芯片进行处理,每秒能计算400张视差图,延迟仅11毫秒(ms)。IBM在论文中指出,藉由特定的权衡(trade-offs),该系统能将速率进一步提升到每秒2,000张视差图。

采用TrueNorth芯片的立体视觉系统何时可以商业化?Andreopoulos表示:“我们还不能透露时间点,只能说我们已经进行测试并且成功编程芯片有效处理视差图,现阶段是概念验证。”

编译:Judith Cheng

本文授权编译自EE Times,版权所有,谢绝转载

EETC wechat barcode


关注最前沿的电子设计资讯,请关注“电子工程专辑微信公众号”。

本文为EET电子工程专辑 原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
Junko Yoshida
ASPENCORE全球联席总编辑,首席国际特派记者。曾任把口记者(beat reporter)和EE Times主编的Junko Yoshida现在把更多时间用来报道全球电子行业,尤其关注中国。 她的关注重点一直是新兴技术和商业模式,新一代消费电子产品往往诞生于此。 她现在正在增加对中国半导体制造商的报道,撰写关于晶圆厂和无晶圆厂制造商的规划。 此外,她还为EE Times的Designlines栏目提供汽车、物联网和无线/网络服务相关内容。 自1990年以来,她一直在为EE Times提供内容。
  • 在中国20多年的天津三星电子正式注销,裁员跟着就来 9月9日,爱企查App显示,天津三星电子有限公司的经营状态由存续变更为注销。
  • 华夏芯域名、专利等资产公开拍卖 拍卖标的包括三项域名以及15项软件著作权和14项专利。其中,三项域名的起拍价为13879元,15项软件著作权和14项专利的起拍价为15550元……
  • 传音控股CFO肖永辉被立案调查 根据通知书内容,因某种未具体披露的原因,丹东市振安区监察委员会决定对肖永辉采取留置措施,并对其立案调查。此消息一出,立刻引起了市场的广泛关注。
  • 传台积电9月底前低价引进High-NA EUV设备,价格远低于3.5亿欧元 值得一提的是,台积电此次购入价格可能远低于原定的3.5亿欧元的单台报价。ASML同意以折扣价向台积电出售High-NA EUV设备的原因主要是因为台积电是其超级VIP客户,ASML给予了很大的让步。
  • 苹果发布iPhone 16系列、AirPods 4及Apple Watch Series 10等新品 9月10日,苹果发布了一系列新品,包括iPhone 16系列手机、Apple Watch Series 10智能手表和AirPods 4耳机。发布会后网上响起了一片吐嘈声,带着这些吐槽,我们来看看这次苹果到底有没有新玩意……
  • 传台积电美国晶圆厂试产良率媲美台湾南科厂 自台积电宣布在美国亚利桑那州建设首座晶圆厂以来,该项目就备受瞩目。在台积电美国厂建厂期间也传出不少质疑的声音。近日,有关台积电在美国亚利桑那州的晶圆厂传出试产新进展,新厂4月工程晶圆试产良率媲美台湾南科厂,该消息再次引发了业界的高度关注......
  • 全球折叠屏手机快速增长,中国品牌压 • 得益于西欧、关键亚洲市场和拉丁美洲市场的增长,以及中国品牌的持续领先,全球折叠屏手机出货量在2024年第二季度同比增长了48%。 • 荣耀凭借其在西欧特别强劲的表现,成为最大的贡献者,成为该地区排名第一的品牌。 • 摩托罗拉的Razr 40系列在北美和拉丁美洲表现良好,为其手机厂商的出货量贡献了三位数的同比增长。 • 我们预计,头部中国手机品牌厂商的不断增加将至少在短期内抑制三星Z6系列在第三季度的发布。
  • AI网络物理层底座: 大算力芯片先进 AI技术的发展极大地推动了对先进封装技术的需求,在高密度,高速度,高带宽这“三高”方面提出了严苛的要求。
  • 奕斯伟计算DPC 2024:发布RISAA(瑞 奕斯伟计算2024首届开发者伙伴大会以“绿色、开放、融合”为主题,从技术创新、产品应用、生态建设等方面,向开发者、行业伙伴等相关方发出开放合作倡议,加速RISC-V在各行各业的深度融合和应用落地,共同推动RISC-V新一代数字基础设施生态创新和产业发展。
  • 重磅发布:Canalys 2024年中国云渠道 2024年 Canalys 中国云计算渠道领导力矩阵冠军厂商分别是:阿里云、华为云和亚马逊云科技(AWS)
  • 路特斯的努力有多“韧性” 文|沪上阿YI路特斯如今处在一个什么样的地位?吉利控股集团高级副总裁、路特斯集团首席执行官冯擎峰一直有着清晰的认知:“这个品牌的挑战依然非常大。首先,整个中国市场豪华汽车整体数据下滑了30%~40%,
  • 又一芯片大厂终止研发! ‍‍Mobileye 将终止内部激光雷达开发Mobileye 宣布终止用于自动驾驶的激光雷达的开发,并裁员 100 人。Mobileye 认为,下一代 FMCW 激光雷达对可脱眼的自动驾驶来说必要性没
  • 银河E5和小鹏MONAM03开门红,纯电车或将卷土重来? 文|萝吉今年下半年开始,国内新能源市场正式跨过50%历史性节点,且份额依然在快速增长——7月渗透率破50%,8月份破55%……在这一片勃勃生机万物竞发的景象下,新能源市场占比最高的纯电车型,却在下半年
  • 发奖金,人均105万,1.2万人有份! ‍‍近期,IC 设计大厂联发科宣布了2024年上半年度的员工分红计划,与8月份薪资一起发放。据外界估算,按照上半年税前盈余约648.66亿新台币(约 144.42 亿元人民币)进行估算,此次分红总额接
  • 协作机器人鼻祖进军移动机器人,势要东山再起? 会议预告向世界展示中国最具创新力、领导力和品牌化的产品与技术!9月27号,“第6届国际移动机器人集成应用大会暨复合机器人峰会”将在上海举行,敬请关注!再度出现,能否再次“出线”?文|覃洁兰近日,曾经在
  • 上半年SiC汽车中国销售近110万辆,供应商有哪些? 近日A股上市公司陆续完成2024年上半年业绩披露,其中24家SiC概念股上半年合计营收同比增长14.58%至1148.65亿元,研发费用同步增长7.22%至69.16亿元。尤为值得注意的是,天岳先进、
  • 龙芯重大突破! ‍‍据龙芯中科介绍,近日,基于龙芯3A6000处理器的储迹NAS在南京师范大学附属小学丹凤街幼儿园、狮山路小学、南京大学附属中学等学校相继落地。储迹NAS是基于最新的龙芯CPU--3A6000,其代表
  • 60%汽车供应商裁员! 疫情后的劳动力囤积和强有力的员工保护规则掩盖了德国高薪制造业工作市场令人担忧的变化。根据联邦劳工办公室的数据,欧元区最大经济体德国的失业率在2019年春季曾达到历史最低点4.9%,现已上升至6%。虽然
  • 长飞先进:与多家车企达成SiC合作,晶圆产能明年释放 8月28-30日,PCIM Asia 2024展在深圳举行。“行家说”进行了为期2天的探馆,合计报道了200+碳化硅相关参展企业(.点这里.)。其中,“行家说”还重点采访了长飞先进等众多企业,深入了解
  • 活动邀请|华强电子产业研究所诚邀您莅临2024深圳跨境电商展览会 展位信息深圳跨境电商展览会(CCBEC)时间:2024年9月11-13日 9:30-17:30地点:深圳国际会展中心(宝安)展馆:16号馆 16D73/16D75 展位报名注册准备好“观众注册”入场二
广告
热门推荐
广告
广告
广告
EE直播间
在线研讨会
广告
广告
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了