广告

揭密微软HoloLens里那颗客制化视觉处理器

时间:2016-08-24 19:00:00 作者:Rick Merritt 阅读:
微软首度揭露其AR头戴设备HoloLens内部的客制化视觉处理器芯片细节。
广告

微软(Microsoft)近日首度透露了其扩增实境(AR)头戴设备HoloLens内部的客制化视觉处理器芯片细节;该款芯片的处理能力达到每秒1兆 (trillin)次像素运作(pixel-operations),功耗比采用代号Cherry Trail的英特尔(Intel) Atom系列核心之主机处理器的4W还低。

该 HoloLens处理单元(HPU)融合来自5个摄影机镜头、一个深度传感器以及运动传感器的输入信息,将之压缩并传送到Intel的主处理器SoC;此 外HPU还能辨识手势以及涵盖多个房间的地图环境。微软在今年稍早介绍了HoloLens的主要功能内容,但并未公开其HPU细节。

微 软评估了包括来自Movidius等供货商的市售计算机视觉芯片,却发现并没有任何一款产品能以其要求的性能、延迟以及功耗目标处理所有算法;而后来的客 制化HPU是采用28纳米台积电(TSMC)工艺,内含24颗Tensilica数字信号处理器(DSP)核心以及8Mbyte的高速缓存, 在尺寸仅12x12mm的芯片封装中纳入了6,500个逻辑闸以及1Gbyte容量的LPDDR 3。
20160824 Hololens NT03P1
*HPU的运算引擎整合了Tensilica DPS核心以及多个加速器
(来源:Microsoft)*

在 近日于美国硅谷举行的Hot Chips大会上介绍HPU的微软杰出技术人员Nick Baker表示,选择Tensilica核心有部份原因是考虑其弹性,微软在核心中添加了300个客制化指令集:“如果你无法添加客制化指令集,最后可达到的数学运算密度不会是你需要的。”

HPU 芯片混合采用独立的加速器(accelerator),以及与DSP核心紧密耦合的加速器,在一个纯软件版本达到整体200倍的加速;Baker表示: “我们尽可能按照需要采用可编程元素以及固定的功能硬件,以达到我们需要的性能目标;”芯片的软件程序代码包含多样化的算法:“具备不同的成熟度、数学运 算以及内存存取模式。”

Baker 透露,HoloLens的开发分成硬件、软件、用户体验与性能等不同团队同时进行:“我们在这个项目上将共同设计发挥到极致;”他并强调,微软内部就有 能力可将软件仿真(simulation)测试结果,转化为也能在最终硬件成果上执行的硬件仿真(emulation)程序:“所有工作都在 Windows 10开发期间同时进行。”

在 3月份上市、定价3,000美元的HoloLens开发工具包就内含了HPU;不过对于HPU是否将有更新计划,或是微软何时会推出消费者版本的 HoloLens,Baker婉拒发表意见。展望未来,Baker认为设计工程师们会将头戴设备进一步推向8K分辨率,以及支持更宽广的视野。

“注视点渲染(Foveated rendering,也就是将用户目标聚焦范围以外的任何景物维持模糊化的一种方法)可望变得越来越普及…以及各种不同分辨率的显示器也可能出现;” Baker表示:“我们需要思考这样的趋势对GPU、互连技术以及面板产业等整个供应链会带来什么影响。”

编译:Judith Cheng

本文授权编译自EE Times,版权所有,谢绝转载

EETC wechat barcode


关注最前沿的电子设计资讯,请关注“电子工程专辑微信公众号”。

本文为EET电子工程专辑 原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
Rick Merritt
EE Times硅谷采访中心主任。Rick的工作地点位于圣何塞,他为EE Times撰写有关电子行业和工程专业的新闻和分析。 他关注Android,物联网,无线/网络和医疗设计行业。 他于1992年加入EE Times,担任香港记者,并担任EE Times和OEM Magazine的主编。
  • 打破陈规:磁性封装新技术将如何重塑电源模块的未来 点击蓝字 关注我们德州仪器全球团队坚持克服挑战,为电源模块开发新的 MagPack™ 封装技术,这是一项将帮助推动电源设计未来的突破性技术。  ■ ■ ■作为一名经验丰富的马拉松运动员,Kenji K
  • 全球第三!全球高端手机市场,华为猛涨80%,苹果坠落正拉开帷幕! 在全球智能手机竞争日益激烈的情况下,谁能在高端市场站稳脚跟,谁就占据了主动权。一直以来全球智能手机市场格局都是,苹果专吃高端,其他各大厂商分食全球中低端市场。但现在市场正在其变化。根据Canalys最
  • 又一芯片大厂终止研发! ‍‍Mobileye 将终止内部激光雷达开发Mobileye 宣布终止用于自动驾驶的激光雷达的开发,并裁员 100 人。Mobileye 认为,下一代 FMCW 激光雷达对可脱眼的自动驾驶来说必要性没
  • 【光电集成】玩转先进封装  今日光电      有人说,20世纪是电的世纪,21世纪是光的世纪;知光解电,再小的个体都可以被赋能。追光逐电,光赢未来...欢迎来到今日光电!----追光逐电 光赢未来----来源:AIOT大数据
  • 日本信越化学12英寸氮化镓衬底出样 第三代半导体材料氮化镓,传来新消息:日本半导体材料大厂信越化学为氮化镓外延生长带来了有力辅助。2024年9月3日,信越化学宣布研制出一种用于GaN(氮化镓)外延生长的300毫米(12英寸)QSTTM衬
  • 上半年SiC汽车中国销售近110万辆,供应商有哪些? 近日A股上市公司陆续完成2024年上半年业绩披露,其中24家SiC概念股上半年合计营收同比增长14.58%至1148.65亿元,研发费用同步增长7.22%至69.16亿元。尤为值得注意的是,天岳先进、
  • 总投资12亿元!这一IGBT项目明年投产 [关注“行家说动力总成”,快速掌握产业最新动态]9月6日,据“内江新区”消息,晶益通(四川)半导体科技有限公司旗下IGBT模块材料和封测模组产业园项目已完成建设总进度的40%,预计在明年5月建成。据了
  • 活动邀请|华强电子产业研究所诚邀您莅临2024深圳跨境电商展览会 展位信息深圳跨境电商展览会(CCBEC)时间:2024年9月11-13日 9:30-17:30地点:深圳国际会展中心(宝安)展馆:16号馆 16D73/16D75 展位报名注册准备好“观众注册”入场二
  • 华为大突破! 在苹果和华为的新品发布会前夕,Counterpoint公布了2024年第一季度的操作系统详细数据,数据显示, 鸿蒙操作系统在2024年第一季度继续保持强劲增长态势,全球市场份额成功突破4%。在中国市场
  • 下线、投产...这3个电驱动项目传最新进展 近日,3个电驱动项目迎来最新进展,包括项目量产下线、投产、完成试验等,详情请看:[关注“行家说动力总成”,快速掌握产业最新动态]青山工业:大功率电驱项目下线9月5日,据“把动力传递到每一处”消息,重庆
广告
热门推荐
广告
广告
广告
EE直播间
在线研讨会
广告
广告
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了