南大&南航&江苏省人医:眼动追踪隐形眼镜,实现高效自然人(脑-眼)机交互

果壳硬科技 2024-05-17 15:01

欢迎星标 果壳硬科技

南京大学/南京航空航天大学/江苏省人民医院徐飞教授、陆延青教授、陈烨研究员、袁松涛主任团队提出了一种具有眼动追踪功能的隐形眼镜。基于频率编码策略,该隐形眼镜具有无线无源、轻量无感、柔软安全的特点,实现高精度的眼动追踪和眼动命令识别。相关成果以“Frequency-encoded eye tracking smart contact lens for human-machine interaction”为题,发表于Nature Communications上【Nature Communications, 2024, 15:3588】。

论文截图


2024年初,Apple公司上市了其首台革命性的空间计算设备Vision Pro。它将数字内容无缝融入真实世界,以最自然、最直观的输入方式——眼睛,为用户带来全新的在混合现实(MR)中的交互体验。这在业界学界中点燃了眼动追踪技术的研发热潮。


可穿戴设备的小型化、轻量化、无感化是该领域的重要发展方向之一。《碟中谍4》中展望了一款具有人脸识别与追踪功能的隐形眼镜,展示了AR设备的终极形态。隐形眼镜作为一种普适的技术,已经在全球范围内被广泛用于视力矫正。隐形眼镜天然与眼睛合为一体,有望实现原位眼动追踪功能,赋能精准实时、轻量无感、自然高效的眼机交互应用,尤其可以闭眼的时候使用。


基于智能隐形眼镜的眼动追踪和眼命令输入


随着柔性光电子技术和曲面共形加工技术的发展,《碟中谍4》中展示的智能隐形眼镜的黑科技正逐步成为现实。研究团队将四个无线射频位置标签封装于医疗级硅橡胶中,经精密曲面封装、表面亲水化,制备和人眼角膜结构相匹配的、透氧水润的眼动追踪隐形眼镜。该位置标签无线无源,无需体积庞大的电池和硅芯片即可向外置阅读装置传输眼动信息,使隐形眼镜柔软轻量、安全无感。


眼动追踪智能隐形眼镜


隐形眼镜经佩戴之后,基于时序眼动追踪算法能够实现高精度的眼动追踪。眼动角精度优于0.5°,这甚至小于中央凹所提供的视角,意味着该隐形眼镜能够准确识别视线聚焦的位置。隐形眼镜工作过程中鲁棒稳定,免疫强光、投影图像、眼睑睫毛遮挡对眼动追踪的干扰。器件的工作频率也规避了常见的电磁干扰,例如手机、路由器等射频信号源。此外,隐形眼镜的生物相容性封装保证了安全性,通过长时间的离体细胞毒性测试以及活体兔眼刺激测试,其安全性和商用隐形眼镜无明显差异。基于该隐形眼镜,联合团队展示了丰富多样的眼机交互应用,例如眼动文字输入、绘画、游戏操控、网页交互、摄像头操控、无人车操控等。


活体兔子眼控无人车


凭借该隐形眼镜准确稳定的无线眼动追踪能力、丰富多样的交互模式、柔软舒适的结构特性以及生物安全的理化性质,研究团队未来将进一步探索其在人(脑-眼)机交互、眼脑医学诊疗、眼-脑科学研究、心理学研究等领域的应用潜力。此外,隐形眼镜能够实现眼部物理-生理-心理多模态信息的实时动态感知,研究团队也实现感知灵敏、抗干扰的无线眼压监测隐形眼镜【DOI: 10.1002/adfm.202400722】【DOI: 10.1021/acssensors.2c01299】,未来将进一步研究眼部人机交互智能装备。


南京大学徐飞教授、陆延青教授、江苏省人民医院袁松涛主任医师、南京航天航空大学陈烨研究员为文章的共同通讯作者,南京大学博士生朱衡天、杨欢和江苏省人民医院博士生徐思琪为文章共同第一作者,马园园、朱书庚、毛正艺对实验作出了重要贡献。江苏省人民医院胡仔仲副主任医师、南京大学江德臣教授、宁兴海教授、熊毅丰助理教授、潘荣容博士、徐郁蕊博士、陈薇薇博士生对实验提供了重要帮助。该研究得到国家自然科学基金委(61925502、62135007、62305153和 22025403)和国家重点研发计划(2021YFA1401103)的支持。


论文信息

发布期刊 Nature Communications

发布时间 2024年4月27日

文章标题 Frequency-encoded eye tracking smart contact lens for human-machine interaction

(https://doi.org/10.1038/s41467-024-47851-y)

研究团队 | 作者

酥鱼 | 编辑

如果你是投资人、创业团队成员或科研工作者,对果壳硬科技组织的闭门会或其它科创服务活动感兴趣,欢迎扫描下方二维码,或在微信公众号后台回复“企业微信”添加我们的活动服务助手,我们将通过该渠道组织活动——


果壳硬科技 果壳旗下硬科技服务品牌,致力于连接科学家与投资人、创业者,在新一轮技术革命和资本流动中,做最懂硬核科技的团队。
评论 (0)
  • 背景近年来,随着国家对资源、能源有效利用率的要求越来越高,对环境保护和水处理的要求也越来越严格,因此有大量的固液分离问题需要解决。真空过滤器是是由负压形成真空过滤的固液分离机械。用过滤介质把容器分为上、下两层,利用负压,悬浮液加入上腔,在压力作用下通过过滤介质进入下腔成为滤液,悬浮液中的固体颗粒吸附在过滤介质表面形成滤饼,滤液穿过过滤介质经中心轴内部排出,达到固液分离的目的。目前市面上的过滤器多分为间歇操作和连续操作两种。间歇操作的真空过滤机可过滤各种浓度的悬浮液,连续操作的真空过滤机适于过滤含
    宏集科技 2025-04-10 13:45 111浏览
  •   天空卫星健康状况监测维护管理系统:全方位解析  在航天技术迅猛发展的当下,卫星在轨运行的安全与可靠至关重要。整合多种技术,实现对卫星的实时监测、故障诊断、健康评估以及维护决策,有力保障卫星长期稳定运转。  应用案例       系统软件供应可以来这里,这个首肌开始是幺伍扒,中间是幺幺叁叁,最后一个是泗柒泗泗,按照数字顺序组合就可以找到。  一、系统架构与功能模块  数据采集层  数据处理层  智能分析层  决策支持层  二、关键技术  故障诊断技术  
    华盛恒辉l58ll334744 2025-04-10 15:46 104浏览
  • 行业痛点:电动车智能化催生语音交互刚需随着全球短途出行市场爆发式增长,中国电动自行车保有量已突破3.5亿辆。新国标实施推动行业向智能化、安全化转型,传统蜂鸣器报警方式因音效单一、缺乏场景适配性等问题,难以满足用户对智能交互体验的需求。WT2003HX系列语音芯片,以高性能处理器架构与灵活开发平台,为两轮电动车提供从基础报警到智能交互的全栈语音解决方案。WT2003HX芯片技术优势深度解读1. 高品质硬件性能,重塑语音交互标准搭载32位RISC处理器,主频高达120MHz,确保复杂算法流畅运行支持
    广州唯创电子 2025-04-10 09:12 195浏览
  • 技术原理:非扫描式全局像的革新Flash激光雷达是一种纯固态激光雷达技术,其核心原理是通过面阵激光瞬时覆盖探测区域,配合高灵敏度传感器实现全局三维成像。其工作流程可分解为以下关键环节:1. 激光发射:采用二维点阵光源(如VCSEL垂直腔面发射激光器),通过光扩散器在单次脉冲中发射覆盖整个视场的面阵激光,视场角通常可达120°×75°,部分激光雷达产品可以做到120°×90°的超大视场角。不同于传统机械扫描或MEMS微振镜方案,Flash方案无需任何移动部件,直接通过电信号控制激光发射模式。2.
    robolab 2025-04-10 15:30 126浏览
  • 文/Leon编辑/侯煜‍关税大战一触即发,当地时间4月9日起,美国开始对中国进口商品征收总计104%的关税。对此,中国外交部回应道:中方绝不接受美方极限施压霸道霸凌,将继续采取坚决有力措施,维护自身正当权益。同时,中国对原产于美国的进口商品加征关税税率,由34%提高至84%。随后,美国总统特朗普在社交媒体宣布,对中国关税立刻提高至125%,并暂缓其他75个国家对等关税90天,在此期间适用于10%的税率。特朗普政府挑起关税大战的目的,实际上是寻求制造业回流至美国。据悉,特朗普政府此次宣布对全球18
    华尔街科技眼 2025-04-10 16:39 131浏览
  • 行业变局:从机械仪表到智能交互终端的跃迁全球两轮电动车市场正经历从“功能机”向“智能机”的转型浪潮。数据显示,2024年智能电动车仪表盘渗透率已突破42%,而传统LED仪表因交互单一、扩展性差等问题,难以满足以下核心需求:适老化需求:35%中老年用户反映仪表信息辨识困难智能化缺口:78%用户期待仪表盘支持手机互联与语音交互成本敏感度:厂商需在15元以内BOM成本实现功能升级在此背景下,集成语音播报与蓝牙互联的WT2605C-32N芯片方案,以“极简设计+智能交互”重构仪表盘技术生态链。技术破局:
    广州唯创电子 2025-04-11 08:59 160浏览
  • 政策驱动,AVAS成新能源车安全刚需随着全球碳中和目标的推进,新能源汽车产业迎来爆发式增长。据统计,2023年中国新能源汽车渗透率已突破35%,而欧盟法规明确要求2024年后新能效车型必须配备低速提示音系统(AVAS)。在此背景下,低速报警器作为车辆主动安全的核心组件,其技术性能直接关乎行人安全与法规合规性。基于WT2003H芯片开发的AVAS解决方案,以高可靠性、强定制化能力及智能场景适配特性,正成为行业技术升级的新标杆。WT2003H方案技术亮点解析全场景音效精准触发方案通过多传感器融合技术
    广州唯创电子 2025-04-10 08:53 224浏览
  • 什么是车用高效能运算(Automotive HPC)?高温条件为何是潜在威胁?作为电动车内的关键核心组件,由于Automotive HPC(CPU)具备高频高效能运算电子组件、高速传输接口以及复杂运算处理、资源分配等诸多特性,再加上各种车辆的复杂应用情境等等条件,不难发见Automotive HPC对整个平台讯号传输实时处理、系统稳定度、耐久度、兼容性与安全性将造成多大的考验。而在各种汽车使用者情境之中,「高温条件」就是你我在日常生活中必然会面临到的一种潜在威胁。不论是长时间将车辆停放在室外的高
    百佳泰测试实验室 2025-04-10 15:09 97浏览
  •     前几天同事问我,电压到多少伏就不安全了?考虑到这位同事的非电专业背景,我做了最极端的答复——多少伏都不安全,非专业人员别摸带电的东西。    那么,是不是这么绝对呢?我查了一下标准,奇怪的知识增加了。    标准的名字值得玩味——《电流对人和家畜的效应》,GB/T 13870.5 (IEC 60749-5)。里面对人、牛、尸体分类讨论(搞硬件的牛马一时恍惚,不知道自己算哪种)。    触电是电流造成的生理效应
    电子知识打边炉 2025-04-09 22:35 218浏览
  • 由西门子(Siemens)生产的SIMATIC S7 PLC在SCADA 领域发挥着至关重要的作用。在众多行业中,SCADA 应用都需要与这些 PLC 进行通信。那么,有哪些高效可行的解决方案呢?宏集为您提供多种选择。传统方案:通过OPC服务器与西门子 PLC 间接通信SIMATIC S7系列的PLC是工业可编程控制器,能够实现对生产流程的实时SCADA监控,提供关于设备和流程状态的准确、最新数据。S7Comm(全称S7 Communication),也被称为工业以太网或Profinet,是西门
    宏集科技 2025-04-10 13:44 118浏览
  •   海上电磁干扰训练系统:全方位解析      海上电磁干扰训练系统,作为模拟复杂海上电磁环境、锻炼人员应对电磁干扰能力的关键技术装备,在军事、科研以及民用等诸多领域广泛应用。接下来从系统构成、功能特点、技术原理及应用场景等方面展开详细解析。   应用案例   系统软件供应可以来这里,这个首肌开始是幺伍扒,中间是幺幺叁叁,最后一个是泗柒泗泗,按照数字顺序组合就可以找到。   一、系统构成   核心组件   电磁信号模拟设备:负责生成各类复杂的电磁信号,模拟海上多样
    华盛恒辉l58ll334744 2025-04-10 16:45 160浏览
我要评论
0
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦