黑芝麻自动驾驶AI芯片介绍

原创 汽车电子与软件 2021-06-17 19:02

本文从黑芝麻AI芯片研发布局、芯片自主可控核心IP、自动驾驶计算平台应用、工具链等几个方面介绍,让大家了解黑芝麻智能在芯片架构、芯片核心竞争力方面的发展情况。

黑芝麻智能成立于2016年,主要做Support L2+及以上的自动驾驶计算芯片。核心团队均来自于芯片公司,因此黑芝麻智能的强项在于做硬件,做IP。作为初创公司,短短几年内,黑芝麻已经拥有自研核心IP,并且在车规级和可靠性方面有深入研究,能够满足客户开发需求,与此同时公司也能提供配套的工具链和软件算法。


一、传统汽车到自动驾驶时代的演变带来社会核心生产力的变革

汽车和行业的变革对于行业来说既是挑战更是机遇,面对未来智能化和网联化的发展,核心芯片、电子电器架构、人工智能算法等成为主流,但最终的大数据和人工智能的发展将会对社会变革带来深远影响。

从Waymo开始,自动驾驶的商业化应用已经发展了10年了,大家也逐渐认识到这不是一个一蹴而就的事情,也不是根据SAE的分级标准从一个Level跨到另一个Level就算成功了,而是需要产业协同,也有对不同实现路径的探索。目前业内以L3为分界线,主要有两条实现路径。

一种是自下而上,从L1发展到L3,对于乘用车商用车的商业化来说,供应商提供L1、L2或L3智能化模块化的产品给主机厂,主机厂进行智能化模块部署,然后通过从消费者收集反馈信息用于产品革新和优化升级,这是自动驾驶行业化落地的一个主要方向。

另一个方向是以高科技公司为代表,如Wamo、滴滴等,他们走的是从上往下的道路,直接从无人车的限定区域运营开始,也就是L4级无人驾驶往下走,包括Robotaxi、无人巴士、无人物流等。

虽然两条路线不一样,但是其核心还是在于整个行业的整合、人工智能和车路协同技术的发展。


二、整车电子电气架构从分布式向集中式演进推动自动驾驶超算平台的发展

电子电气架构EA的发展,从分布式到集中式到域控制器架构以及中央计算平台架构,总体来说就是集中功能减少个数优化线束,但是这带来的问题就是单个芯片上所承载的功能会大幅度的增加,包括算力、数据吞吐、多级连接等等。

目前ADAS无论是AEB、ACC还是APA,对于域控制器来说都是一个低速和高速分时复用的状态,整体而言芯片的算力偏低,大概是≤10Tops,整个芯片可运行的神经网络或人工智能算法以轻量化网络项目为主,同时整体的功能安全等级偏低,大多为ASIL-B。

这样的硬件和芯片状态无法满足未来对于中央计算平台的支持,因此对于整体硬件提出了更高的要求,需要芯片做到大算力高可靠性低时延。


三、黑芝麻智能的车规级大算力芯片

行业内知名的SOC厂家有NVIDIA、高通、Mobileye等,并且在某一领域均有所长。做芯片是一个很复杂的过程,无论是技术架构还是工艺制程,都需要时间与经验的积累。目前很多公司的芯片IP是通过找第三方通用IP,而对于黑芝麻而言,我们深刻认识到整个IP配置的复杂性与重要性,追求算力是一方面,更重要的是利用率。

SOC芯片多为异构设计,包含GPU、NPU和CPU等不同的运算IP,所以在芯片设计中异构IP配置非常重要。配置IP并不是把算力越做越高就好,还涉及到整个芯片的设计和验证,像带宽、外设、内存等方面都要兼顾。而且,芯片内部的处理是有数据流的,在设计验证过程,需要根据数据流和吞吐量调优,实现在每一个运算步骤上做硬件优化。

黑芝麻的IP设计以需求为主导,预期设想应用场景以及在该场景下对应的传感器处理数目、算法和功能复杂性等问题,因此来确定IP配置,然后进行功耗和安全性设计。黑芝麻从一开始就引入了车规级和功能安全全流程设计的概念,确保芯片本身符合车规级的严苛标准。

黑芝麻在整体的IP设计中,结合先进工艺制程,采用了一些能够降低功耗的模式;在设计验证方面,黑芝麻充分考量外设带宽和内存配置,以数据传输和吞吐量来验证,以此来优化配置。在车规级和功能安全优先保障的前提下,为后续产品迭代打下良好基础。

黑芝麻目前这一代的芯片是A1000,采用16nm工艺,整体芯片是ASIL-B级,可实现ASIL-D级安全岛;用于AI计算的部分基于黑芝麻完全自研的NPU,算力可以达到40Tops。

今年上海车展,黑芝麻发布了新一代的A1000pro也是基于16nm工艺,但是算力将达到106Tops,功能安全设计和安全岛沿用A1000设计,预计今年Q3 可以拿到工程样片。

黑芝麻SOC芯片产品路线图

参考下面表格可以看到黑芝麻的SOC和NVIDIA、Mobileye等产品的对比。作为初创公司,黑芝麻有自己的自研的IP,在NPU的设计方面完全基于神经网络,能效方面是优于NVIDIA的。


四、黑芝麻智能的两大核心竞争优势:NeuralIQ ISP和DynamAI NN

一是自主可控核心IP构建核心竞争优势:NeuralIQ ISP

作为黑芝麻的两大核心IP之一,ISP的IP显得尤为重要,因为ISP对于图像处理来说非常重要,如武钰女士介绍,图像数据在给到神经网络之前如果没有调到最佳的状态,是很难靠后端的检测处理达到要求的,因此黑芝麻在ISP方面大量投入并且在国内基本做到无出其右,如下图,对于每个MIPI的Block都会对应一个Pipeline,Pipeline里面有一个非常清晰的ISP的开发流程,包括去噪高动态调光还有一些白平衡,每一个部分都有相应的软件团队在做优化和调用。NeuralIQ ISP可以让摄像头在雨雪天气或者昏暗光线下高清成像更有优势。

二是自主可控核心IP构建核心竞争优势:DynamAI NN引擎

DynamAI NN引擎作为高性能深度神经网络算法平台,核心在于4颗4K 卷积运算阵列,它能够提供神经网络上的典型卷积层运算,可以把神经网络全部都有单独一个NPU来处理,这取决于黑芝麻采用最新的软件和算法来做硬核加速和IP设计,其好处在于对客户来说,提高了算法配置的灵活性,并且基于ISP和NPU的结合,能够对图像和神经网络的处理达到最优效果。


五、自动驾驶计算平台和完整AI开发工具链

黑芝麻提供了一个开放的FAD自动驾驶计算平台,通过A1000芯片双芯或者四芯级联的方式,根据客户应用和整个算法的需求来选择,便于客户更快的实现算法和应用的验证。

除此之外,黑芝麻也提供了配套的DSP和SDK,更进一步而言,黑芝麻提供了一套完整的AI算法开发工具链——“山海”人工智能工具平台。山海人工智能工具平台分成4个部分:

第一部分提供了50种神经网络参考模型,基于不同的视觉应用,比如目标识别、小物体识别和语义分割,我们都会有推荐的神经网络模型;

第二部分是人工智能训练框架,客户之前如果是用TensorFlow、pytorch或者Caffe训练出来的神经网络类型,可以采用黑芝麻提供的工具来实现框架转化,便于进行后续的开发和操作;

第三部分是具体工具类型,包括量化、组图分割、剪裁等等;同时支持客户自带的工具链,基于这些操作来实现将训练好的网络生成可在嵌入式系统上部署的参数和可执行的代码。

第四部分是部署范围,包括芯片、单板和FAD开发平台等。

自动驾驶行业的发展,高算力SOC是核心基础,硬件算力的提升,才能满足传感器配置的提高和软件算法的迭代需求,黑芝麻基于自研的核心IP:ISP和NPU,采用最先进的神经网络和软件算法推动芯片的优化革新,并且基于完整的工具链帮助客户快速实现算法验证和应用部署。据悉,今年将会有多款搭载黑芝麻智能大算力车规芯片的车型量产,黑芝麻车规级和高安全等级芯片为客户产品量产落地提供保障。


END
投稿合作:18918250345(微信)
汽车电子与软件 主要介绍汽车电子软件设计相关内容,每天分享一篇技术文章!
评论
  • 物联网(IoT)的快速发展彻底改变了从智能家居到工业自动化等各个行业。由于物联网系统需要高效、可靠且紧凑的组件来处理众多传感器、执行器和通信设备,国产固态继电器(SSR)已成为满足中国这些需求的关键解决方案。本文探讨了国产SSR如何满足物联网应用的需求,重点介绍了它们的优势、技术能力以及在现实场景中的应用。了解物联网中的固态继电器固态继电器是一种电子开关设备,它使用半导体而不是机械触点来控制负载。与传统的机械继电器不同,固态继电器具有以下优势:快速切换:确保精确快速的响应,这对于实时物联网系统至
    克里雅半导体科技 2025-01-03 16:11 164浏览
  • 影像质量应用于多个不同领域,无论是在娱乐、医疗或工业应用中,高质量的影像都是决策的关键基础。清晰的影像不仅能提升观看体验,还能保证关键细节的准确传达,例如:在医学影像中,它对诊断结果有着直接的影响!不仅如此,影像质量还影响了:▶ 压缩技术▶ 存储需求▶ 传输效率随着技术进步,影像质量的标准不断提高,对于研究与开发领域,理解并提升影像质量已成为不可忽视的重要课题。在图像处理的过程中,硬件与软件除了各自扮演着不可或缺的基础角色,有效地协作能够确保图像处理过程既高效又具有优异的质量。软硬件各扮演了什么
    百佳泰测试实验室 2025-01-03 10:39 137浏览
  • Matter加持:新世代串流装置如何改变智能家居体验?随着现在智能家庭快速成长,串流装置(Streaming Device,以下简称Streaming Device)除了提供更卓越的影音体验,越来越多厂商开始推出支持Matter标准的串流产品,使其能作为智能家庭中枢,连结多种智能家电。消费者可以透过Matter的功能执行多样化功能,例如:开关灯、控制窗帘、对讲机开门,以及操作所有支持Matter的智能家电。此外,再搭配语音遥控器与语音助理,打造出一个更加智能、便捷的居家生活。支持Matter协议
    百佳泰测试实验室 2025-01-03 10:29 143浏览
  • 车身域是指负责管理和控制汽车车身相关功能的一个功能域,在汽车域控系统中起着至关重要的作用。它涵盖了车门、车窗、车灯、雨刮器等各种与车身相关的功能模块。与汽车电子电气架构升级相一致,车身域发展亦可以划分为三个阶段,功能集成愈加丰富:第一阶段为分布式架构:对应BCM车身控制模块,包含灯光、雨刮、门窗等传统车身控制功能。第二阶段为域集中架构:对应BDC/CEM域控制器,在BCM基础上集成网关、PEPS等。第三阶段为SOA理念下的中央集中架构:VIU/ZCU区域控制器,在BDC/CEM基础上集成VCU、
    北汇信息 2025-01-03 16:01 173浏览
  • 在快速发展的能源领域,发电厂是发电的支柱,效率和安全性至关重要。在这种背景下,国产数字隔离器已成为现代化和优化发电厂运营的重要组成部分。本文探讨了这些设备在提高性能方面的重要性,同时展示了中国在生产可靠且具有成本效益的数字隔离器方面的进步。什么是数字隔离器?数字隔离器充当屏障,在电气上将系统的不同部分隔离开来,同时允许无缝数据传输。在发电厂中,它们保护敏感的控制电路免受高压尖峰的影响,确保准确的信号处理,并在恶劣条件下保持系统完整性。中国国产数字隔离器经历了重大创新,在许多方面达到甚至超过了全球
    克里雅半导体科技 2025-01-03 16:10 119浏览
  • 光耦合器,也称为光隔离器,是一种利用光在两个隔离电路之间传输电信号的组件。在医疗领域,确保患者安全和设备可靠性至关重要。在众多有助于医疗设备安全性和效率的组件中,光耦合器起着至关重要的作用。这些紧凑型设备经常被忽视,但对于隔离高压和防止敏感医疗设备中的电气危害却是必不可少的。本文深入探讨了光耦合器的功能、其在医疗应用中的重要性以及其实际使用示例。什么是光耦合器?它通常由以下部分组成:LED(发光二极管):将电信号转换为光。光电探测器(例如光电晶体管):检测光并将其转换回电信号。这种布置确保输入和
    腾恩科技-彭工 2025-01-03 16:27 155浏览
  • 本文继续介绍Linux系统查看硬件配置及常用调试命令,方便开发者快速了解开发板硬件信息及进行相关调试。触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。查看系统版本信息查看操作系统版本信息root@ido:/# cat /etc/*releaseDISTRIB_ID=UbuntuDISTRIB_RELEASE=20.04DISTRIB_CODENAME=focalDIS
    Industio_触觉智能 2025-01-03 11:37 137浏览
  • 自动化已成为现代制造业的基石,而驱动隔离器作为关键组件,在提升效率、精度和可靠性方面起到了不可或缺的作用。随着工业技术不断革新,驱动隔离器正助力自动化生产设备适应新兴趋势,并推动行业未来的发展。本文将探讨自动化的核心趋势及驱动隔离器在其中的重要角色。自动化领域的新兴趋势智能工厂的崛起智能工厂已成为自动化生产的新标杆。通过结合物联网(IoT)、人工智能(AI)和机器学习(ML),智能工厂实现了实时监控和动态决策。驱动隔离器在其中至关重要,它确保了传感器、执行器和控制单元之间的信号完整性,同时提供高
    腾恩科技-彭工 2025-01-03 16:28 159浏览
  • 前言近年来,随着汽车工业的快速发展,尤其是新能源汽车与智能汽车领域的崛起,汽车安全标准和认证要求日益严格,应用范围愈加广泛。ISO 26262和ISO 21448作为两个重要的汽车安全标准,它们在“系统安全”中扮演的角色各自不同,但又有一定交集。在智能网联汽车的高级辅助驾驶系统(ADAS)应用中,理解这两个标准的区别及其相互关系,对于保障车辆的安全性至关重要。ISO 26262:汽车功能安全的基石如图2.1所示,ISO 26262对“功能安全”的定义解释为:不存在由于电子/电气系统失效引起的危害
    广电计量 2025-01-02 17:18 218浏览
  • 【工程师故事】+半年的经历依然忧伤,带着焦虑和绝望  对于一个企业来说,赚钱才是第一位的,对于一个人来说,赚钱也是第一位的。因为企业要活下去,因为个人也要活下去。企业打不了倒闭。个人还是要吃饭的。企业倒闭了,打不了从头再来。个人失业了,面对的不仅是房贷车贷和教育,还有找工作的焦虑。企业说,一个公司倒闭了,说明不了什么,这是正常的一个现象。个人说,一个中年男人失业了,面对的压力太大了,焦虑会摧毁你的一切。企业说,是个公司倒闭了,也不是什么大的问题,只不过是这些公司经营有问题吧。
    curton 2025-01-02 23:08 289浏览
  • 在测试XTS时会遇到修改产品属性、SElinux权限、等一些内容,修改源码再编译很费时。今天为大家介绍一个便捷的方法,让OpenHarmony通过挂载镜像来修改镜像内容!触觉智能Purple Pi OH鸿蒙开发板演示。搭载了瑞芯微RK3566四核处理器,树莓派卡片电脑设计,支持开源鸿蒙OpenHarmony3.2-5.0系统,适合鸿蒙开发入门学习。挂载镜像首先,将要修改内容的镜像传入虚拟机当中,并创建一个要挂载镜像的文件夹,如下图:之后通过挂载命令将system.img镜像挂载到sys
    Industio_触觉智能 2025-01-03 11:39 113浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦