广告

自己变成操作系统是什么感觉?AR技术告诉你

2016-08-19 11:31:00 Tom Mahon 阅读:
将AR技术与工作结合,你自己就是操作系统…
广告

所谓的虚拟现实(VR)拥有一个环绕头戴式设备用户视野的完整环境,整个世界的呈现以及让人沉浸的方式,让观看者能以第一人称或是旁观者的角度参与其中;而扩增实境(AR)则是呈现头戴式设备用户所在之真实世界场景,但添加、或说扩增了计算机产生的影像,让观看者感觉那好像是现实世界场景的一部分。

无论是VR或AR,带给观看者的感官体验都很难形容;只有2D平面的文字或是屏幕,无法传达3D空间的运动。为此,头戴式设备业者Meta的创办人暨首席执行官Meron Gribetz在他去年2月发表的TED专题演说中(参考下方YouTube视频),让听众能充分欣赏AR的艺术并展示了利用该技术助力医疗研究的方案。

Gribetz描述他在2011年冬天美国纽约市的某个酒吧里经历的灵机一动,当时他坐在一个同事对面讨论事情,突然那个同事的手机响了、他接起电话,于是那支手机打断他们的对话分散了注意力;但在房间的另一边,有人是拿着手机分享Instagram照片给旁边的朋友看。所以只是因为手机显示屏幕朝着不同的方向,Gribetz与他的同事是被隔开,酒吧另一边的小团体则是更为贴近。

从这里他想到,我们应该利用机器把我们的工作、甚至是概念性的工作在现实世界呈现,而不只是将它们紧紧捂在自己手里,无论是用智能手机或是台式机;也就是说,我们可以环绕着以全像(holographic)方式虚拟出的营火,与众人会面、分享与合作。

在Gribetz的TED专题演说视频里,显示美国加州大学旧金山分校(UCSF)的Adam Gazzaley博士,在他的实验室里以直观的自然手势存取、操作并分享3D数字全像信息;他是利用Meta的Meta 2头戴式设备开发工具包之神经科学驱动接口(neuroscience-driven interface),进行“玻璃大脑(glass brain)”研究项目。
http://static.hdslb.com/miniloader.swf"; flashvars="aid=4155024&page=1" pluginspage="http://www.adobe.com/shockwave/download/download.cgi?P1_Prod_Version=ShockwaveFlash";>
最近于美国旧金山举行的穿戴式科技大会(Wearable Tech Conference)上,笔者有机会从Meta首席技术官Soren Harner那里更进一步了解这种简单直观接口背后的辛苦工作;他表示:“我们的任务是透过将显示器、嵌入式系统、光学组件、传感器、计算机视觉以及同步定位与建图(simultaneous location and mapping,SLAN)整合在一起,把AR推向下一个阶段,然后将有所这些先进技术装进手机或头戴式设备。”
Soren Harner-Meta-200x
Meta首席技术官Soren Harner

光学技术的突破

在光学技术方面的突破,包括完整的90度视野以及2,560 x 1,440高dpi显示。在可看透的头带显示器的上方区域分辨率较高,让用户能更清楚看到信息;下方的工作区域则是较宽广,以适应人们在工作时用双手操作物体的方式,而这部分的显示器也是透明的,好让使用者能与同事对视。
20160818 AR NT01P1
*Meta 2扩增实境(AR)头戴式设备
(来源:Meta)*

Meta 2的较宽广视野以及传感器数组,让用户能像是对待实体物品一般,看见、抓取以及移动全像物品,就像是上面的视频中Gazzaley博士所做的;与全像互动的直接手势,完全是自然而且直观,不需要任何学习曲线。

Harner表示,在工程技术这端:“我们积极建立自己的电子工程师团队,他们需要在集合传感器、光学组件、成像、追踪技术与计算机视觉的嵌入式系统领域有丰富背景;”他在专题演说中并指出,使用Meta的系统:“用户自己就是操作系统。”

他进一步解释:“这意味着我们透过将内容空间化(spatializing)于使用者面前,降低了复杂度;而不是将内容以层层套迭的方式来放置,像是传统操作系统里的文件管理器那样。这改善了工作内存,并减轻了机器的负担。”

这也是一直以来人类在3D空间中使用实体工具的模式,我们会伸手拿取而且将那些工具到处移动;换句话说,要让处理过程更快、更精确且有效率,输入与输出──也就是思考/行动以及导致的结果/反应──必须要最大化。

传统2D空间的操作系统采用一条抽象链(a chain of abstraction),使得思考与行动之间脱节(disconnect),也为工作内存带来难以承受的负担。因此Meta的技术能允许在用户实体工作空间的实体工具旁边,建立AR工具以组织数字内容。

Harner表示:“藉由让用户有机会能让实体与数字工具在身体周遭相同的3D、实体环境中共存,而不是以抽象语意架构的形式呈现,我们能实现在该空间中更自然的组织工具方式,降低认知循环以及系统负担,因此将用户体验推向一个全新层次。”

允许直观运动为运算建立了一个阻力最小的神经通路,以及全新的零学习曲线方法,用户现在能用数字设备将自己的肢体向实体世界伸展;因为那就是我们一直以来做事情的方法,所以不需要学习。

传统的计算机接口要求我们在遇到每一种新操作系统时,就得学习新的抽象概念以及阶层式的架构,或许这是在2D平面我们能做到的最佳方法;但透过利用我们周遭的3D区域,以空间花方式来安排内容,就具备能降低存取信息以及与之互动的复杂性。总而言之,AR技术具备能让所有使用者朝着更强、更直观生产力发展的庞大潜力。

编译:Judith Cheng

本文授权编译自EE Times,版权所有,谢绝转载

EETC wechat barcode


关注最前沿的电子设计资讯,请关注“电子工程专辑微信公众号”。

本文为EET电子工程专辑 原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
  • 苹果收购加拿大AI初创公司DarwinAI,意在加快布局生成式AI 苹果收购DarwinAI,将有助于苹果进一步推动这方面的努力——打造出更小型的人工智能系统。未来,苹果也将整合过去在汽车自动驾驶领域的AI研究成果,在苹果手机、AI耳机等探索更多、更好的落地方向。
  • 苹果Vision Pro开售,预计出货100万台 苹果Vision Pro发售的时间已经确认,美国时间1月19日开启预定,2月2日正式上市。库克表示,空间计算时代已经到来。
  • 高通发布第二代骁龙XR2+,三星、谷歌MR欲媲美苹果Vision Pro? 近日,高通发布第二代骁龙XR2+芯片+平台,该平台采用单芯片架构,支持90FPS的4.3K显示分辨率的空间计算,三星与谷歌将与高通合作,搭载该芯片的设备将与苹果将推出的Vision Pro展开竞争。
  • 佰维存储向Meta最新款AI智能眼镜Ray-Ban Meta供货 佰维存储方表示,智能穿戴市场具有广泛的市场覆盖度和巨大的成长空间,基于在智能穿戴领域的竞争优势以及该领域的巨大成长潜力,预计未来公司的智能穿戴业务将保持快速增长。公司将持续扩大一线合作品牌的供应占比,并积极将旗舰穿戴产品导入更多一线客户。
  • 苹果自研Wi-Fi 7芯片,加大可穿戴设备业务布局 苹果自研Wi-Fi 7芯片,无疑对这一类芯片当前供应商的业务造成影响。分析师Jeff Pu认为,从长期来看,苹果自研Wi-Fi芯片将对博通造成影响。目前,苹果是博通最大的客户,在2022年博通有近70亿美元营收来自苹果,苹果对博通的营收贡献比高达20%。
  • 深度学习强力助推人类健康监测 算力、设备小型化和电池能效等技术领域的最新进展,为持续健康监测提供了技术基础。持续监测能使医生在很长一段时间内全面、动态地了解患者的病情,并加强了对疾病进展的掌控和对未来健康结果的预测。但持续监测是一个多方面的过程,包括人类生理学的复杂性质和身体内发生的动态变化。它涉及心率、血压、血糖水平和活动模式等参数的跟踪和分析。复杂性主要在于这些参数之间存在错综复杂的相互影响以及各种潜在的相关性。
  • “一碰交互,共触未来”ITMA峰会盛大 目前,智能终端NFC功能的使用频率越来越高,面对新场景新需求,ITMA多家成员单位一起联合推动iTAP(智能无感接近式协议)标准化项目,预计25年上半年发布1.0标准,通过功能测试、兼容性测试,确保新技术产业应用。
  • 中科院微电子所在忆阻神经-模糊硬 中科院微电子所集成电路制造技术重点实验室刘明院士团队提出了一种基于记忆交叉阵列的符号知识表示解决方案,首次实验演示并验证了忆阻神经-模糊硬件系统在无监督、有监督和迁移学习任务中的应用……
  • 直角照明轻触开关为复杂电子应用提 C&K Switches EITS系列直角照明轻触开关提供表面贴装 PIP 端子和标准通孔配置,为电信、数据中心和专业音频/视频设备等广泛应用提供创新的多功能解决方案。
  • 投身国产浪潮向上而行,英韧科技再获 投身国产浪潮向上而行,英韧科技再获“中国芯”认可
广告
热门推荐
广告
广告
广告
EE直播间
在线研讨会
广告
广告
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了