助力打造智慧城市：LINLON ISP是什么及如何落地？

7月27日，ASPENCORE成功主办“2021国际AIoT生态发展大会”，安谋科技产品经理柴卫华先生在“智慧城市”分论坛上发表了“智能图像解决方案——智慧城市IPC”的主题演讲。

“目前，IPC(IP Camera)不管是全球还是中国的市场，都是保持高速的两位数的增长。”柴卫华先生向在场的观众分析了IPC目前的三大挑战：

全球视频监控市场高速增长

一是越来越多的camera，包括新兴的形态。另外我们看到过去的camera主要功能是拍摄，现在还包括感知，主要是未来人工智能这一领域。另外对影像的追求是亘古不变的话题，从过去的红外到黑光，未来可能还有更多新技术的出现。当然对整个产业带来的挑战，一个永恒的话题就是需要更高画质的设备。

第二，智慧城市的场景跟手机，包括跟专业相机有点不一样，它的场景特别复杂，而且大部分时候没有人的干预，不管天晴下雨打雷闪电，所以对整个场景的复杂度要求高。

第三，感知高性能的计算，对系统的数据量，运算量的功耗带来非常大的挑战。当然，大家把产品落地，一定不可避免的问题就是成本的挑战。

安谋科技产品经理柴卫华先生

安谋科技是如何解决上述三大的挑战的呢？

解决方案——LINLON ISP

LINLON ISP是安谋科技完全自主研发的产品线，2018年成立LINLON ISP这个团队，2020年开始发布了第一代产品，就是i3、i5，现在获得色了很多客户的采纳，应用也非常广泛，未来也会规划更高端的8K、智能、汽车方面的应用。目前安谋科技整个实验室的建设非常完善，在深圳上海都有自己的实验室。

为什么要做这个ISP的线呢？柴卫华先生认为：第一，安谋科技有着非常不错的给影像带来非常好效果的技术，比如降噪。尤其在中国市场，对影像的要求是差异化非常大的，即便在IPC，每家要求也不一样，所以对整个产品的灵活度，包括各种各样的支持需要非常灵活。所以基于这些，安谋科技开发了这套产品。

第二，LINLON ISP不是一个产品，是一套解决方案，它是从硬件IP盒，到软件到工具，以及到验证整一套的产品，其整个研发团队都是在中国，所以对支持跟服务响应非常及时。大家知道做影像比较难的是除了前端设计，后面还有很多工作，包括调试评估等等，都需要很多专业的知识。

从ISP来讲，安谋科技总共在整个产品和系统非常灵活，从内部来看，除了固化的，还有客户自己配置的，还有跟客户一起做定制的。我们看到整个系统跟其它的现在比较热门的NPU、VPU、DPU等，整个构建非常灵活，以及耦合，包括算法的拓展和更新方面都做到非常灵活的支持。

安谋科技ISP框架图

上面是ISP产品的框架图，安谋科技中国提供的是从前端VIN到YUN的处理，带来非常好的影像效果，同时整个系统的集成非常简单，它跟CPU的结合是通过HVR总线，同时如果需要及时的响应，可以通过中段，DDR通过标准的总线，跟整个标准非常简单。

安谋科技的ISP产品现在比较典型的是多输入、多输出，而且我们可以做各种各样的缩放等等，各种各样的处理，非常地灵活。

降噪的效果。左边这边是原始的图，没有经过处理的。中间的是经过了一阶的处理，右边是经过了二阶的处理。大家看到，整个降噪效果改善非常明显，经过两阶处理，Noise会处理得非常干净。（如下图）

之后柴卫华先生现场还向观众用视频展示了在安防应用上的宽动态效果。

LINLON ISP如何落地？

LINLON ISP的一套产品，智慧最终还是要落地到NPU。安谋科技自己有一套完全自主研发的NPU产品，这个品牌名叫“周易”。

“周易”是一个人工智能平台，也包括与人工智能相关的芯片IP。目前，一些基于“周易”平台的使用场景已经落地，比如行车记录、智能停车、ADAS、安防、人脸识别等。基于“周易”人工智能处理单元(AIPU)的的SoC产品已于去年四月落地首秀（全志科技基于周易AIPU的产品智能语音专用处理器R329）。随着终端场景的细化，安谋科技未来还会根据功耗、面积、使用场景、用户扩展性等特性，在底层架构方面做出取舍和优化，推出不同版本的“周易”平台。

提到AI，急需解决的是带宽的问题，性能到一定程度之后，可能带宽已经跟不上了。安谋科技让数据流可以自行流动，这样带来的好处就是整个数据不用再占DDR的带宽，可以降低功耗。因此安谋科技对“LINLON ISP、AI、Video及Display”做了“Tight Coupled Connection”。