这款全球最小基于事件的最新款Metavision®视觉传感器GenX320,提供了全新的性能水平,包括:超低功耗、低延迟、高灵活性,可以高效嵌入增强现实/虚拟现实(AR/VR)设备、可穿戴设备、安防监控系统、无接触交互接口以及“永久在线(always-on)”物联网等应用。
据麦姆斯咨询报道,全球最先进神经形态视觉系统的发明者Prophesee近日宣布推出基于事件的新款Metavision视觉传感器:GenX320,这是业界首款专门为超低功耗边缘人工智能(Edge AI)视觉设备而开发的基于事件的视觉传感器。这款第五代Metavision传感器的芯片尺寸为3 mm x 4 mm,将Prophesee开创性的技术平台扩展到了一系列快速增长的Edge AI细分市场,包括:AR/VR设备、安防监控/检测系统、无需触摸显示器、眼动追踪、“永久在线”智能物联网设备等。
基于事件的视觉传感器GenX320基于Prophesee在该领域的专业积累,已经成功为各种应用提供基于事件视觉的速度、低延迟、动态范围、功率效率和隐私保护优势。
这款320 × 320 6.3 μm像素背照(BSI)堆叠式基于事件的视觉传感器,提供了微小的1/5”光学格式。这款视觉传感器特别针对嵌入式边缘视觉系统高效集成创新事件传感的独特需求而开发,这些系统往往在供能、计算和尺寸方面捉襟见肘。GenX320能够在超低功率及具有挑战性的工作和照明条件下实现稳健、高速的视觉传感。
Zinn Labs基于GenX320开发的眼动追踪系统
GenX320的优势包括:
- 具有灵活数据格式的低延迟微秒级分辨率事件时间戳。
- 片上智能电源管理模式可将功耗降至36 μW,并支持智能唤醒事件,还提供深度睡眠和待机模式。
- 易于与标准SoC集成/连接,具有多个集成事件数据预处理、过滤和格式化功能,可最大限度地减少外部处理需求。
- MIPI或CPI数据输出接口为嵌入式处理平台提供低延迟连接,包括低功耗微控制器和现代神经形态处理器架构。
- AI-ready:片上直方图输出兼容多种AI加速器。
- 得益于事件传感器固有的稀疏无帧事件数据和静态场景去除,实现了传感器端隐私保护。
- 与Prophesee Metavision Intelligence原生兼容,这是一款最全面、免费、基于事件的视觉软件套件,已被拥有10000多名用户的快速增长的社区使用。
Prophesee首席执行官、联合创始人Luca Verre表示:“低功耗Edge AI市场具有广泛的应用,事件传感器的功率效率和性能特性完美契合。我们基于在其他应用领域取得的商业成功,开发了这款新的基于事件的Metavision传感器,以满足边缘系统开发人员的需求,该传感器易于面向多种应用集成、配置并优化,包括运动和物体检测、存在感知、手势识别、眼动跟踪等高增长领域极具吸引力的用例。”
重点应用
- 在AR/VR/XR设备中实现无缝交互的高速眼动追踪;
- 消费类设备(电视、笔记本电脑、游戏机、智能家电和设备、智能显示器等)中的低延迟免触摸人机界面;
- 物联网摄像头和其它设备中的智能存在检测和人员计数;
- 超低功耗“永久在线”区域监控系统;
- 家庭和医疗机构中的跌倒检测摄像头。
供货情况
GenX320已可从Prophesee及其销售合作伙伴处购买。GenX320提供一系列易于探索和优化的开发工具支持,包括含板载芯片(COB)GenX320模块或紧凑型光学模块的综合评估套件。此外,Prophesee还提供一系列适配器套件,可以无缝连接到各种嵌入式平台,例如STM32 MCU,从而加快客户产品上市时间。
GenX320裸片及评估套件
Xperi公司首席技术官Petronel Bigioi评价称:“当我们的产品,如驾驶员监控解决方案(DMS)和电视服务等,应用基于视觉的技术时,隐私仍然是消费者最关心的问题之一。Prophesee基于事件的Metavision技术使我们能够在不需要对场景进行明晰视觉呈现的情况下理解场景,从而将我们的‘设计隐私’原则提升到更安全的水平。通过仅捕捉每个像素的变化,而非传统基于帧的成像传感器那样捕捉整个场景,我们的算法可以在无需详细呈现的情况下获得感知场景中内容的信息。我们开发了一个概念验证演示,证明使用神经形态传感器完全可以实现DMS。使用1MP神经形态传感器,我们可以推断出接近基于主动近红外照明2MP视觉传感解决方案的性能。展望未来,我们将重点关注GenX320神经形态传感器,该传感器可用于对隐私敏感的智能设备,以改善用户体验。”
Xperi公司基于GenX320开发的驾驶员监控解决方案(DMS)
关于普诺飞思(Prophesee)
Prophesee是全球最先进神经形态视觉系统的发明者,开发了一种突破性的基于事件的机器视觉方案。这种新兴的视觉技术可以显著降低功耗、延迟和数据处理要求,并揭示迄今为止传统基于帧的传感器所看不到的内容。Prophesee获得专利的Metavision®传感器和算法模拟了人眼和大脑的工作方式,极大地提高了自动驾驶汽车、工业自动化、物联网、移动和AR/VR等领域的效率。Prophesee总部位于巴黎,并在格勒诺布尔、上海、东京和硅谷设有办事处。
Prophesee由100多名富有远见的工程师组成的团队推动,拥有50多项国际专利,并得到了领先的国际股权和企业投资者的支持,包括360 Capital Partners、欧洲投资银行、iBionext、Inno Chip、英特尔资本、雷诺集团、博世创投、创新工场、Supernova Invest和小米。
延伸阅读:
《新兴图像传感器技术及市场-2024版》
《自动驾驶汽车、无人驾驶出租车和传感器技术及市场-2023版》
《光谱成像市场和趋势-2022版》