技术干货|为配备集成处理器的ADAS域控制器构建多摄像头视觉感知系统

原创 德州仪器 2023-12-04 15:00

点击上方蓝字

关注我们!

当我们开车穿过社区和城镇并看到孩子们在步行和骑自行车时,我们会意识到道路安全的重要性。美国国家公路交通安全管理局 (NHTSA) 2021 年的一项研究显示,在美国,平均每天有 20 名行人在交通事故中丧生——每 71 分钟就有一名行人死亡。世界卫生组织在 2022 年的一项研究中发现,每年有 130 万人因道路交通事故死亡其中一半以上是行人、骑自行车和骑摩托车的人。不幸的是,驾驶员分心是造成这些事故的主要原因之一,而这种分心的趋势似乎每年都在增加。


高级驾驶辅助系统 (ADAS) 有助于减轻驾驶分心的影响,从而为驾驶员、行人和弱势道路群体提供周全的保护。为了达到五星安全等级并满足监管要求,需要增加备用摄像头、前置摄像头和驾驶监控系统。因此,许多制造商正在改进其车辆架构,以在 ADAS 域控制器中集成各种主动安全功能。


域控制器通常需要:

  • 与多种传感器连接的能力:数量、模式和分辨率。

  • 用于感知、驾驶和停车应用的视觉、人工智能 (AI) 和通用处理。

  • 与低带宽和高速车载网络的连接。

  • 功能安全和保障可防止关键器件遭到破坏。


ADAS 域控制器的处理和系统要求

对系统内存、计算性能和输入/输出 (I/O) 带宽日益增长的需求使系统设计变得更加复杂,并提高了系统成本。如今的高端 ADAS 系统使用多个不同分辨率的摄像头,并在汽车周围配备了各种雷达传感器,以提供驾驶环境的完整视图。对于从传感器收集的每组图像,AI 和计算机视觉支持的检测和分类算法都需要以每秒高帧率运行,以准确地解释场景。这给系统和软件设计人员带来了多项挑战,包括将这些传感器连接到处理系统、将其内容传输到存储器中,以及同步数据以供分类算法实时处理。


德州仪器 (TI) 的 TDA4VH-Q1 片上系统 (SoC)(如图 1 所示)集成了视觉预处理、深度和运动加速、AI 网络处理、汽车网络接口和安全微控制器 (MCU) 等功能。TPS6594-Q1 电源管理集成电路经过优化,可在需要满足汽车安全完整性等级 (ASIL) D 的应用中为 TDA4VH-Q1 供电,包括一些功能安全特性,比如电压监测、TDA4VH-Q1 SoC 的硬件错误检测,以及一个问答看门狗,用于监测 SoC 上的 MCU 是否存在导致锁定的软件错误。

图 1:TDA4VH-Q1 SoC 的简化图


支持多摄像头视觉感知

需要提高处理器性能的 ADAS 应用示例之一是多摄像头视觉感知。在汽车周围安装摄像头可提供 360 度视野,有助于防止正面碰撞,并帮助驾驶员对盲点和邻近车道的交通和行人活动保持警惕。


Phantom AI 利用 TI 的 J784S4 处理器开源软件开发套件 (SDK),为 TDA4VH-Q1 开发了一个多摄像头视觉感知系统。Phantom AI 的 PhantomVision™ 系统为 TDA4VH-Q1 处理器提供了一整套 ADAS 功能,从符合欧盟通用安全法规到符合美国汽车工程师学会 (SAE) L2 级和 L2+ 级标准。除了车辆、弱势道路群体、自由空间、交通标志和交通信号灯检测等基本功能外,PhantomVision™ 还包括了施工区域、转向灯和尾灯检测以及基于 AI 的自我路径预测等附加功能。其多摄像头感知系统由前视、侧视和后视摄像头组合而成,可全方位覆盖车辆的 360 度视野,有助于消除盲点(见图 2)。

图 2:Phantom AI 使用的 360 度

视野的摄像头位置

通过利用 TDA4VH-Q1 的高性能计算、深度学习引擎和用于信号和图像预处理的专用加速器的组合,Phantom AI 使实时操作成为可能。专用视觉预处理加速器可处理相机流水线,包括图像捕捉、色彩空间转换和多尺度图像金字塔构建。结合德州仪器的深度学习库,TDA4VH-Q1 的每秒数万亿次高速运算多核数字信号处理器和矩阵乘法辅助引擎可提供具有快速算法和最小 I/O 操作调度的高效神经网络,从而实现高精度和低延迟。


结语

为 SAE L2 级和 L2+ 级驾驶构建复杂的多传感器 ADAS 系统并不需要水冷式超级计算机。借助 TI TDA4VH-Q1 这一类设计精良的 SoC,并由 Phantom AI 等专业汽车工程师进行设计和开发,可以向市场推出符合功能安全要求的高性价比系统。虽然我们对自动驾驶的未来充满热情,但设计符合功能安全要求的经济高效系统的真正目的是使我们的世界变得更加安全。使 ADAS 技术惠及更多汽车市场领域(使更多汽车配备更多 ADAS),为驾驶员和行人带来更好、更安全的体验。




点击“阅读原文”了解更多 TI TDA4VH-Q1 产品的相关信息!

德州仪器 德州仪器(TI)是全球最大的半导体设计与制造公司之一。我们将在这里为您分享TI最新的动态和技术创新。
评论 (0)
  • Matter协议是一个由Amazon Alexa、Apple HomeKit、Google Home和Samsung SmartThings等全球科技巨头与CSA联盟共同制定的开放性标准,它就像一份“共生契约”,能让原本相互独立的家居生态在应用层上握手共存,同时它并非另起炉灶,而是以IP(互联网协议)为基础框架,将不同通信协议下的家居设备统一到同一套“语义规则”之下。作为应用层上的互通标准,Matter协议正在重新定义智能家居行业的运行逻辑,它不仅能向下屏蔽家居设备制造商的生态和系统,让设备、平
    华普微HOPERF 2025-05-08 11:40 509浏览
  • 在过去的很长一段时间里,外卖市场呈现出美团和饿了么双寡头垄断的局面。美团凭借先发优势、强大的地推团队以及精细化的运营策略,在市场份额上长期占据领先地位。数据显示,截至2024年上半年,美团外卖以68.2%的市场份额领跑外卖行业,成为当之无愧的行业老大。其业务广泛覆盖,从一线城市的繁华商圈到二三线城市的大街小巷,几乎无处不在,为无数消费者提供便捷的外卖服务。饿了么作为阿里本地生活服务的重要一环,依托阿里强大的资金和技术支持,也在市场中站稳脚跟,以25.4%的份额位居第二。尽管市场份额上与美团有一定
    用户1742991715177 2025-05-06 19:43 145浏览
  • 后摄像头是长这个样子,如下图。5孔(D-,D+,5V,12V,GND),说的是连接线的个数,如下图。4LED,+12V驱动4颗LED灯珠,给摄像头补光用的,如下图。打开后盖,发现里面有透明白胶(防水)和白色硬胶(固定),用合适的工具,清理其中的胶状物。BOT层,AN3860,Panasonic Semiconductor (松下电器)制造的,Cylinder Motor Driver IC for Video Camera,如下图。TOP层,感光芯片和广角聚焦镜头组合,如下图。感光芯片,看着是玻
    liweicheng 2025-05-07 23:55 658浏览
  • 文/郭楚妤编辑/cc孙聪颖‍相较于一众措辞谨慎、毫无掌舵者个人风格的上市公司财报,利亚德的财报显得尤为另类。利亚德光电集团成立于1995年,是一家以LED显示、液晶显示产品设计、生产、销售及服务为主业的高新技术企业。自2016年年报起,无论业绩优劣,董事长李军每年都会在财报末尾附上一首七言打油诗,抒发其对公司当年业绩的感悟。从“三年翻番顺大势”“智能显示我第一”“披荆斩棘幸从容”等词句中,不难窥见李军的雄心壮志。2012年,利亚德(300296.SZ)在深交所创业板上市。成立以来,该公司在细分领
    华尔街科技眼 2025-05-07 19:25 547浏览
  • 硅二极管温度传感器是一种基于硅半导体材料特性的测温装置,其核心原理是利用硅二极管的电学参数(如正向压降或电阻)随温度变化的特性实现温度检测。以下是其工作原理、技术特点及典型应用:一、工作原理1、‌PN结温度特性‌硅二极管由PN结构成,当温度变化时,其正向电压 VF与温度呈线性负相关关系。例如,温度每升高1℃,VF约下降2 mV。2、‌电压—温度关系‌通过jing确测量正向电压的微小变化,可推算出环境温度值。部分型号(如SI410)在宽温域内(如1.4 K至475 K)仍能保持高线性度。
    锦正茂科技 2025-05-09 13:52 384浏览
  • 随着智能驾驶时代到来,汽车正转变为移动计算平台。车载AI技术对存储器提出新挑战:既要高性能,又需低功耗和车规级可靠性。贞光科技代理的紫光国芯车规级LPDDR4存储器,以其卓越性能成为国产芯片产业链中的关键一环,为智能汽车提供坚实的"记忆力"支持。作为官方授权代理商,贞光科技通过专业技术团队和完善供应链,让这款国产存储器更好地服务国内汽车厂商。本文将探讨车载AI算力需求现状及贞光科技如何通过紫光国芯LPDDR4产品满足市场需求。 车载AI算力需求激增的背景与挑战智能驾驶推动算力需求爆发式
    贞光科技 2025-05-07 16:54 253浏览
  • 二位半 5线数码管的驱动方法这个2位半的7段数码管只用5个管脚驱动。如果用常规的7段+共阳/阴则需要用10个管脚。如果把每个段看成独立的灯。5个管脚来点亮,任选其中一个作为COM端时,另外4条线可以单独各控制一个灯。所以实际上最多能驱动5*4 = 20个段。但是这里会有一个小问题。如果想点亮B1,可以让第3条线(P3)置高,P4 置低,其它阳极连P3的灯对应阴极P2 P1都应置高,此时会发现C1也会点亮。实际操作时,可以把COM端线P3设置为PP输出,其它线为OD输出。就可以单独控制了。实际的驱
    southcreek 2025-05-07 15:06 743浏览
  • 这款无线入耳式蓝牙耳机是长这个样子的,如下图。侧面特写,如下图。充电接口来个特写,用的是卡座卡在PCB板子上的,上下夹紧PCB的正负极,如下图。撬开耳机喇叭盖子,如下图。精致的喇叭(HY),如下图。喇叭是由电学产生声学的,具体结构如下图。电池包(AFS 451012  21 12),用黄色耐高温胶带进行包裹(安规需求),加强隔离绝缘的,如下图。451012是电池包的型号,聚合物锂电池+3.7V 35mAh,详细如下图。电路板是怎么拿出来的呢,剪断喇叭和电池包的连接线,底部抽出PCB板子
    liweicheng 2025-05-06 22:58 758浏览
  • UNISOC Miracle Gaming奇迹手游引擎亮点:• 高帧稳帧:支持《王者荣耀》等主流手游90帧高画质模式,连续丢帧率最高降低85%;• 丝滑操控:游戏冷启动速度提升50%,《和平精英》开镜开枪操作延迟降低80%;• 极速网络:专属游戏网络引擎,使《王者荣耀》平均延迟降低80%;• 智感语音:与腾讯GVoice联合,弱网环境仍能保持清晰通话;• 超高画质:游戏画质增强、超级HDR画质、游戏超分技术,优化游戏视效。全球手游市场规模日益壮大,游戏玩家对极致体验的追求愈发苛刻。紫光展锐全新U
    紫光展锐 2025-05-07 17:07 437浏览
  • 飞凌嵌入式作为龙芯合作伙伴,隆重推出FET-2K0300i-S全国产自主可控工业级核心板!FET-2K0300i-S核心板基于龙芯2K0300i工业级处理器开发设计,集成1个64位LA264处理器,主频1GHz,提供高效的计算能力;支持硬件ECC;2K0300i还具备丰富的连接接口USB、SDIO、UART、SPI、CAN-FD、Ethernet、ADC等一应俱全,龙芯2K0300i支持四路CAN-FD接口,具备良好的可靠性、实时性和灵活性,可满足用户多路CAN需求。除性价比超高的国产处理器外,
    飞凌嵌入式 2025-05-07 11:54 120浏览
  •         信创产业含义的“信息技术应用创新”一词,最早公开信息见于2019年3月26日,在江苏南京召开的信息技术应用创新研讨会。本次大会主办单位为江苏省工业和信息化厅和中国电子工业标准化技术协会安全可靠工作委员会。        2019年5月16日,美国将华为列入实体清单,在未获得美国商务部许可的情况下,美国企业将无法向华为供应产品。       2019年6
    天涯书生 2025-05-11 10:41 38浏览
  • 在印度与巴基斯坦的军事对峙情境下,歼10C的出色表现如同一颗投入平静湖面的巨石,激起层层涟漪,深刻印证了“质量大于数量”这一铁律。军事领域,技术优势就是决定胜负的关键钥匙。歼10C凭借先进的航电系统、强大的武器挂载能力以及卓越的机动性能,在战场上大放异彩。它能够精准捕捉目标,迅速发动攻击,以一敌多却毫不逊色。与之形成鲜明对比的是,单纯依靠数量堆砌的军事力量,在面对先进技术装备时,往往显得力不从心。这一现象绝非局限于军事范畴,在当今社会的各个领域,“质量大于数量”都已成为不可逆转的趋势。在科技行业
    curton 2025-05-11 19:09 109浏览
  • 温度传感器的工作原理依据其类型可分为以下几种主要形式:一、热电阻温度传感器利用金属或半导体材料的电阻值随温度变化的特性实现测温:l ‌金属热电阻‌(如铂电阻 Pt100、Pt1000):高温下电阻值呈线性增长,稳定性高,适用于工业精密测温。l ‌热敏电阻‌(NTC/PTC):NTC 热敏电阻阻值随温度升高而下降,PTC 则相反;灵敏度高但线性范围较窄,常用于电子设备温控。二、热电偶传感器基于‌塞贝克效应‌(Seebeck effect):两种不同
    锦正茂科技 2025-05-09 13:31 369浏览
我要评论
0
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦