新型传感技术增强了标准视觉系统的功能,提升了乘客安全性,增强了个性化体验。
据麦姆斯咨询介绍,Xperi全资子公司DTS是下一代音频、成像和传感技术的全球领导者,近日宣布推出全球首个基于神经形态视觉系统的驾驶员监控解决方案(DMS),该方案由Prophesee Metavision®——基于事件的视觉传感器提供技术支持。
使用Prophesee Metavision提供的原始数据,DTS AutoSense团队开发了以驾驶员为中心的监控功能,如注视跟踪、头部姿势识别、眼睑张开检测等。
Xperi团队在神经形态传感解决方案和计算机视觉领域拥有20多年的世界领先经验,并通过其解决方案支持了数十亿种产品。他们以传感器为中心,根据未来发展趋势,调整了车内监控技术。
“智能传感是下一代车内体验所必需的技术。”Xperi首席技术官(CEO)Petronel Bigioi说道,“实现这一目标的关键途径是采用以传感器融合为重点的先进研究战略。DTS AutoSense高级研究团队专注于最先进的传感解决方案,而神经形态传感是能够塑造汽车行业未来的技术之一。”
神经形态传感器以每秒10,000帧的等效帧速率捕获信息,而无需要主动照明。这为驾驶员监控功能提供了更好的微光性能,以及前所未有的检测功能,如眼跳或微表情,这是下一代车内体验的关键一步。
Xperi依赖于为满足传感器的特殊需求而构建的端到端数据生成和训练系统。训练数据集是基于Xperi广泛的计算机视觉基础结构生成的,重用了可见光和近红外光谱中的地面真实信息,合成了一种全新的基于神经形态的传感方法。
Petronel Bigioi介绍说:“能够瞬间检测到几乎难以察觉的面部和眼部微动作,可以拯救生命。这一开创性的基于神经形态的技术应用所具备的低光照且强大的视觉处理能力、快速响应时间和低功耗工作,使其成为驾驶员监控系统的理想之选,同时也进一步增强和个性化车内体验。”
除了出色的微光性能和对各种照明条件的鲁棒性之外,神经形态传感还直接解决了传统基于成像的传感(始终开启的摄像头)特有的隐私问题。
“DTS AutoSense创新的人工智能(AI)方法彰显了Prophesee传感器解决方案为原始设备制造商提供所有类型车辆的安全性增强的能力。”Prophesee产品和业务开发副总裁Marc Rousseau表示,“我们很高兴与Xperi及其前瞻性、高水平的团队合作开发这项首创的技术。”
注:DTS AutoSense包括驾驶员监控解决方案(DMS)和乘客监控解决方案(OMS),这是首个专门设计用于客运车辆的解决方案,预计将于2021年上路。DMS和OMS一起工作,可提供对车内活动的准确洞悉,包括司机、乘客、宠物和物体,创造一个更好的,更安全的车内体验。