据麦姆斯咨询报道,近日,神经拟态视觉传感器创业公司Prophesee(普诺飞思)已完成C轮融资。本轮融资由创新工场领投,小米及上海韦豪创芯跟投,数家老股东加码。Prophesee是创新工场投资的第一家欧洲企业。
本轮融资之后,Prophesee将加速下一代神经拟态视觉传感技术的硬件和软件产品的开发与商业化;针对新兴市场规划产品路线;完善基础设施,支持运营及规模扩张。
此外,Prophesee还将加强在中国的商业发展与资源积累,在半导体、工业、机器人、物联网和移动设备等关键生态领域建立更广泛合作。
Prophesee项目的竞争优势在于,公司研发的原视觉(Metavision)传感器和算法。这项核心技术可以被理解为“神经拟态机器眼”,模仿了人眼和大脑的工作方式。
当前,许多机器视觉技术都遵循传统的成像原则——即机器每秒看到25帧的静止图像,通过对每帧图像进行智能解析,做进一步的识别与分析。
但这种“基于帧”的成像方式不仅让机器的“眼”和“大脑”速度不匹配,系统响应时间慢,机器每一帧都做记录还会储存大量的无用数据,产生大量冗余数据,耗费系统处理资源。
这种“基于帧”的成像原理并不足以满足现在人工智能(AI)、计算机视觉和大数据的应用需求——相机每一帧都是空白的,缺失了帧之间的关键信息,并且每一帧图像中,相同的背景信息又被重复记录,增加了无用数据。
以高尔夫手挥动球棒的视频为例,这一场景中最关键的信息是球杆和球的运动,传统图像传感器用固定帧率记录场景,反复记录了人身后的天空、草地,关键信息帧率之间的空缺却被丢失。
不同记录逻辑下的高尔夫挥动球棒视频截图
Prophesee的神经拟态传感器是“基于事件”的判断逻辑,每个像素是异步且独立的,像素不再由固定的25帧/秒控制,而是由信号在幅度域的变化来控制,并在在检测到变化或运动时进行记录。图像信息的发送不是逐帧发送,而是通过连续的信息流捕获发送。
在实际应用上,相比其他传统的基于帧的传感器,可显著降低功耗、延迟、及数据处理量。比如,Prophesee的这项视觉方案生成的数据量比传统的图像传感器减少十到千倍。
此外,Prophesee的传感器还可实现像素级别的曝光调节,即使在极暗或极亮的光照条件下,也可实现>120dB的动态范围。
“基于帧”的传感器成像 vs. “基于事件”的传感器成像
目前,神经拟态视觉传感器在计算视觉、自动驾驶、实时图像去模糊方面有商业化的落地场景。Prophesee首席执行官Luca Verre表示,落地的挑战在于,在一些受到严格监管的应用(例如自动驾驶)中,如何让整个生态系统中的技术人员、从业者、生态要素互相协调。
其称,传感器技术目前已经发展成熟,正处于寻找商业化落地的关键时机。一方面,Prophesee的传感器已经实现批量生产,借助索尼的“堆叠3D技术”,传感器的像素尺寸缩小,分辨率达到高清,能够安装到手机等紧凑型设备中。另一方面,Prophesee的Metavision智能套件还为客户提供了一个完整的软件工具箱,让客户能够构建自己的应用程序的开源平台。
据了解,Prophesee的传感器已经有多项应用:
智能驾驶领域:借助Prophesee原视觉(Metavision)传感技术,Xperi旗下的子公司DTS开发了全球首个基于神经拟态视觉系统的驾驶员监控解决方案(DMS)。
医疗领域:Cambridge Consultants借助这项技术,构建了一个自动化的污染检测系统,该系统能够持续更新,并在几毫秒内提供反馈。
工业自动化:Imago VisionCam EB将Prophesee的视觉传感技术应用于工业部署,免去了对超高速、矩阵或线阵扫描相机的需求,降低了设备的成本和复杂性。
在团队方面,Prophesee创始人拥有米兰理工大学和巴黎中央理工学院的物理学、电子和工业工程双硕士学位,在施耐德电气、丰田汽车、Altis半导体公司有过工作经验。
Prophesee总部位于法国巴黎,此前已获英特尔资本、雷诺集团、博世创投、欧洲投资银行等机构的投资支持,公司拥有50多项国际专利。
Prophesee创始人Luca Verre表示,中国将在未来几年将是公司重点关注点,“中国在移动市场上具有明显的领导地位,在人工智能研究方面被公认为最活跃的国家,拥有超过1189家本土人工智能公司,在全球范围内仅次于美国”。
资方评价
创新工场董事长兼CEO李开复表示,“Prophesee的神经拟态机器眼技术在多个领域具备巨大潜力,包括计算摄影、自动驾驶、工业自动化、物联网、医疗保健、AR和VR等,为行业已逐渐普及的机器视觉应用带来更令人振奋的前沿技术突破。Prophesee在神经拟态视觉领域的先进技术,将为AI和机器视觉技术的发展开创更多的可能性与机会,帮助更多行业实现自动化、安全以及效率方面的提升。”
小米集团战略投资部管理合伙人李建滨表示,“Prophesee在神经拟态视觉以及人工智能技术领域积淀深厚,我们关注并支持能够为人们带来更美好生活体验的前沿技术,让每一个人都能享受科技的乐趣。”
韦豪创芯合伙人梁龙表示,“通过过去10年的技术和产业演进,视觉CMOS图像传感器已经非常广泛渗透进手机,智能汽车产业,也深刻的影响着我们每一个人的日常生活,韦豪创芯密切关注任何对于视觉感知有促进的技术创新 ,希望与其一起推动神经拟态传感器技术的发展,并将先进技术尽快落地产品化,让手机、AR/VR,自动驾驶乃至城市生活的‘眼睛’可以看得更快、更准、更智能。”
延伸阅读:
《新兴图像传感器技术、应用及市场-2021版》
《激光雷达产业及核心元器件-2020版》
《飞行时间(ToF)传感器技术及应用-2020版》
《传感应用的VCSEL技术及市场-2021版》
推荐会议:
2021年9月1日~2日,麦姆斯咨询携手CIOE将于第23届中国国际光电博览会(2021 CIOE)同期举办『第三十一届“微言大义”研讨会:3D视觉技术及应用』。研讨会邀请了长光华芯、芯视界、微视传感、艾迈斯半导体与欧司朗、远方信息、3M、纵慧芯光、老鹰半导体、灵明光子、思特威、炬佑智能、奕目科技、的卢深视等3D视觉产业链上下游企业演讲。
现已开放免费听会报名通道:
https://www.MEMSeminar.com/31/