从智能安防到自动驾驶，安霸AI视觉芯片赋能多传感器融合

作为AI计算机视觉和视频处理的全球领导者，安霸CVFlow AI开放平台及AI视觉处理器已广泛应用于视频安防、ADAS/自动驾驶、工业机器人和消费电子领域。在2021年底的安博会（CPSE）期间，安霸中国区总经理冯羽涛先生在媒体交流会上向《电子工程专辑》及其他行业媒体介绍了安霸的AI视觉芯片系列产品及行业应用解决方案，并对采用5nm工艺、具有8KP60编码能力的CV5做了详细介绍。

                                                                安霸中国区总经理冯羽涛                                                               

CV5的编解码做到了8K级别，同时可做多路的4K。目前绝大部分4K电视可以达到800万像素，而8K比4K的分辨率提升了4倍，可达到3200万像素，同时可以每秒30帧或60帧的速度进行处理。这颗芯片可支持14个摄像头，单颗处理能力可以达到3200万，每秒60帧。在AI处理能力方面，CV5支持包括TensorFlow、PyTorch、Caffe等主流神经网络架构。安霸提供了一整套成熟的CVflow平台上的工具链，客户可以快速把自己开发的神经网络、AI算法等移植到这一平台，并以高性能、低功耗的方式运行。这种平台化模式对注重品牌和技术创新的公司非常具有吸引力，因为他们可以通过一款产品先切入，从旗舰产品快速扩展，再进行差异化。

安霸CV5 8K AI视觉芯片具有先进的视频编码能力和AI处理能力，以及“磐石”安全架构支撑。（Source: Ambarella）

安霸CV5S芯片框图。（Source: Ambarella）

在ISP方面，CV5可支持RGBIR或多光谱融合技术。业内很多方案采用两个不同的摄像头，一个红外一个可见光，而安霸通过独创的专利技术能够用一个摄像头同时支撑RGB和IR。另外，360度Dewarp鱼眼校正功能已延续多代，在10nm之前的14nm和28nm时代就有，也是专业安防领域颇受欢迎的一项独特功能。

除了智能汽车和传统安防应用之外，安霸的视觉处理芯片还可应用到更多新兴领域。比如在零售方面，可检测货架并进行自动补货。扫地机是最具代表性的消费类机器人，安霸芯片也能帮助客户在这一方面去做一些创新产品。在智能家居方面，为了在摄像头端加入AI功能，安霸推出了AI Timelapse创新功能，可以有效地利用带宽，该功能会自动智能判断，并自动生成一天的摘要。机器视觉主要是与工业自动化4.0相关，安霸的AI芯片也非常适用于传统生产线或大型物流场景的一些专门需求，比如很多大型物流仓库都在使用的AGV车。

汽车辅助驾驶（ADAS）和自动驾驶无疑是安霸AI视觉感知芯片的另一个主要应用市场。最近安霸与傲酷（Oculii）达成了收购协议。傲酷自主研发的AI软件算法可提高雷达的感知能力，让现成的雷达芯片实现分辨率大幅提高（最高可达 100 倍）、探测距离更远以及精度更高。与传统雷达解决方案相比，这种新型的4D毫米波雷达解决方案的功耗和成本更低，可让客户避免使用专门设计、价格高昂的高分辨率雷达芯片。安霸可将傲酷的算法部署在现有的 CVflow系列芯片上，与领先的雷达解决方案一起运行，进一步提升系统的安全性和可靠性。

据安霸中国区市场营销副总裁郄建军介绍，多传感器融合感知是汽车自动驾驶的技术发展方向，视频要和毫米波雷达，甚至与激光雷达融合，才能达到更好的感知效果。如果原始数据在芯片里直接处理融合了，效果会更好，效率会更高。安霸并购傲酷就是提前做芯片层面的原始数据融合感知布局，有了这种“一芯两用”的芯片，以后雷达也可以做成中央集成式雷达，雷达前端射频简化，雷达后端信号处理以及视频融合，都可以在一个域控制器芯片里完成，这样雷达的点云数可以大幅增加，点云像素数据可以做前融合，效果也更好。

安霸中国区市场营销副总裁郄建军

长距离、全天候，全天时的毫米波雷达很好用，但看细节看成像轮廓就不太清楚。摄像头和毫米波雷达融合以后，就可以在全天候场景下做得很好，两者的互补性很强。现在安霸和傲酷联合，雷达和摄像头的信号处理在芯片层面就统一起来了。双方互补性很强，“雷视一体”也是下一代的芯片潮流。

安霸刚刚在CES上发布了最新AI域控制器芯片CV3系列。CV3系列SoC可为汽车行业提供算力高达500 eTOPS的AI处理性能，比安霸上一代车规级SoC CV2系列提高了42倍。CV3搭载了多达16个Arm Cortex-A78AE CPU内核，在支持自动驾驶系统的软件应用所需的CPU性能上，也比上一代芯片CV2提高了30倍。CV3通过单一芯片集成多传感器进行集中化AI感知处理（包括高像素视觉处理、毫米波雷达、激光雷达和超声波雷达）、多传感器深度融合以及自动驾驶车的路径规划，这些卓越的性能助力打造ADAS系统和L2+至L4级自动驾驶系统。即使是在恶劣的光线环境、天气状态和驾驶条件下，基于CV3的AI域控制器也可以实现超强的环境感知能力。

责编：Steve