安森美半导体全系列智能感知方案推动AI发展

安森美半导体 2020-12-11 00:00

点击蓝字关注我们


文章来源:电子技术设计

作者:廖均


智能感知技术在汽车、机器视觉和边缘人工智能等领域的应用越来越多。汽车是非常传统的行业,最近几年,电力化和智能化的发展为这个行业带来了新的动力,各种感知产品的应用使汽车变得更安全、更舒适。


机器视觉同样是一个历史很悠久的行业,其应用广泛且多样化,涵盖了包括电子制造、平板检测、机器人、物流等在内的多个细分市场。


目前,中国已成为全球机器视觉市场增长最快的国家。边缘人工智能是新兴市场,主要是由人工智能、5G、IoT等新技术推动,发展非常迅速。



图1:感知技术应用于汽车、机器视觉和边缘人工智能等领域。


安森美半导体近日举办了“智能感知策略及方案”在线媒体交流会,智能感知部全球市场及应用工程副总裁易继辉分析了重点应用市场的需求和趋势,介绍了安森美半导体最新的智能感知发展策略,以及全方位智能感知技术和方案。



图2:安森美半导体智能感知部全球市场及应用工程副总裁易继辉。


CMOS图像传感器的发明者


安森美半导体在成像传感器行业有超过40年的历史,在传感技术方面经历了多次并购,如Cypress的CMOS 图像传感技术、TRUESENSE的CCD图像传感技术,以及Aptina的高容量CMOS 和汽车图像传感器。


TRUESENSE的前身是柯达影像,柯达影像的核心技术来源于贝尔实验室CCD影像。Aptina的前身是美国航天宇航局JPL喷气式推动器实验室。1993年,JPL为了阿波罗登月开发出全球首款CMOS图像传感器。27年过去了,CMOS图像传感器已得到广泛应用。


从三年前开始,安森美半导体又陆续收购了IBM在以色列的毫米波雷达研发中心,以及专注于飞行时间(ToF)激光雷达传感器开发的爱尔兰SensL公司,以满足汽车自动驾驶、机器人、医疗成像等对LiDAR及传感器融合的需求。


图3:安森美半导体是CMOS图像传感器的发明者。


随着第四代工业革命的到来,人工智能对人类社会产生了巨大的影响。斯坦福大学人工智能专家、被人尊称为“人工智能之父”的Andrew Ng认为人工智能是新的电力,如同第二次工业革命电力一样,给整个人类带来了深入的改变;数据是人工智能的动力和发动机;感知是数据的燃料。


“安森美半导体的全系列智能感知方案包括图像感知、多光谱、高光谱的感知,以及激光雷达感知、毫米波雷达感知和传感器融合等,这一切推动了AI和第四次工业革命的进步,”易继辉说:“如果把人工智能比作大脑,那么我们就为大脑提供了眼睛。”


图4:安森美半导体的全系列智能感知方案。


汽车感知爆发式成长


未来的汽车是一个架在四个轮子上、具有极强感知能力的计算机。ADAS摄像头、倒车摄像头、电子车镜、驾驶员监控、乘务员监控、毫米波雷达和激光雷达,现在最好的汽车感知系统已经远远超过了人类的感知能力。


“汽车成像是给人眼看的,如驾驶员、乘客、后视、环视、电子后视镜,安森美半导体在全球占>60%的市场份额;汽车感知是供人工智能和机器视觉用的,安森美半导体占全球>80%的市场份额,而且在逐年扩大。”


易继辉介绍说,在人眼视觉中,图像是为人眼所见并欣赏的,因此通常需要做到清晰、细致、色彩丰富且美观;而在机器视觉中,图像需提供足够的信息,例如边缘、形状、大小等,供算法读取并理解。


汽车成像主要面临三大挑战:


一是宽动态,例如从灰暗的地库开到正对太阳强光的户外,夜晚在对向远光大灯照射下感知树荫下的行人,这些都需要图像传感器具有高动态范围。

二是环境条件,汽车应该能在东北零下几十度的环境下行驶,也能在沙漠或者南方的高温条件下驾驶。

三是对图像传感器来说十分独特的挑战:辨别LED指示牌和交通灯。图像传感器有时会因为频率不同步而捕捉不到信号,这对于驾驶员人眼来说并不是问题,但对机器视觉却是很大的挑战。


图5:汽车成像面临三大挑战。


随着车联网的发展,未来的自动驾驶汽车不仅是“可靠的汽车”,更是“可信的汽车”,具有功能安全性和网络安全性。“Hayabusa是整个市场具有最高宽动态效果和第一款具有网络安全功能的产品,最近已经上市。”易继辉说。


易继辉提到智能驾驶舱也越来越受重视,例如驾驶员识别、车椅位置调节、空调温度、乘客监控等。


图6:智能驾驶舱可进行驾驶员识别、车椅位置调节、空调温度和乘客监控等。


在谈到自动驾驶时,易继辉形象地介绍了L0~L5的概念。他说,L1叫做脱脚(feet off),脚可以自由;L2是脱手(hands off),手可以放开驾驶方向盘;L3是eyes off,驾驶员的眼睛可以不看了;第四级是mind off,脑子不用想了;第五级叫做limit off,即没有任何局限、可以在任何场景下自动驾驶了。


图7:中国汽车驾驶自动化分级的智能感知配置。


“从L1到L5,传感器的数量和种类不断增加。最大的差别在L3和L4,L4必须要激光雷达,对L3,激光雷达是可选的。”易继辉认为,“L3仍然需要驾驶员控制汽车,L4则完全不需要考虑驾驶员。L3就像加减法,L4是微积分:加减法永远算不出极限值,只有微积分才能算出极限值,所以只有在L4的情况下才能涵盖所有极限情况。”


图8:安森美半导体汽车感知+视觉的总体方案。


毫米波雷达在L1~ L5的不同自动驾驶级别上有不同的应用。安森美半导体开发了一种叫做“MIMO+”的专利技术,能够提供4D信息:距离(R)、速度(V)、角度(A)、高度(E),用于L3级的自动驾驶。


图9:毫米波雷达技术在自动驾驶中的应用。


工业机器视觉和边缘人工智能应用


工业4.0、工业自动化、人工智能使机器视觉市场快速发展。边缘人工智能不断应用于一些新的领域,如新零售、智慧农业、畜牧业和农业。


“在新冠后疫情时期出现了一些趋势:一是远程化,远程教学、远程医疗越来越普遍;二是无人化,包括无人送货车、无人商店等,减少了人和人之间的接触,即无接触化。”易继辉说。


图10:工业机器视觉及边缘人工智能市场增长。


易继辉介绍,平板检测是整个工业机器视觉行业中对图像传感器最具挑战性的应用。从1K、2K、4K到8K,像素在逐渐扩大。


检测过程分两步:第一步是暗检测,上电前主要检测一些指纹、划痕和其他物理问题;第二步是上电以后,特别是检测OLED和最新的AMOLED(Active Matrix OLED)。


LED有一个亮板在后面作为发光源,而OLED和AMOLED的每个像素都是一个单独发光源。像素和像素之间发光的强度和色彩的均匀度需要很准确地侦测出来,因而对图像传感器的要求很高。


过去检测LED面板上的1颗像素,对应需要9颗像素(3×3),检测OLED则需要16颗(4×4)甚至25颗(5×5)像素,因此对图像传感器的像素要求越来越高,从4,500万到1.5亿像素,甚至超过2亿像素。


图11:平板检测对图像传感器要求很高。


从下图可以看出,图像传感器的分辨率逐年提升,从过去的200万、500万、800万、1200万像素,到现在超过2000万像素。对于同样尺寸的图像传感器,噪声导数逐年随着像素的增大而不断提高。带宽也在逐年增加。


易继辉举例说,一个29 × 29mm2 的标准工业用摄像头,十年前可能只是200万像素,后来逐渐增加到300万、500万、1200万像素,今年已经达到了1600万像素,这是由技术推动的。这些技术包括:


全局快门,在高速运动下图像不会有拖影;

像素内图像校正,以前是在系统里通过软件校正,现在直接在硬件里,即像素内部做图像校正;

工艺节点,从110纳米到65纳米,再到45纳米甚至更小,成本、尺寸、耗电量逐年下降;

背照式,可提高感光能力;

堆栈架构,将模拟和数字信号放在第二层,人工智能的一些算法放在第三层,实现高智能化的图像传感器。


图12:1.3英寸固定尺寸图像传感器的发展。


“我们用NVIDIA  Xavier  Edge  GPU做人工智能训练,精度可达97%,其中AR1335(1300万)图像传感器可提供了高质量的图像,提高了人工智能的判断精度。”易继辉表示,“我们的目标是在工业机器视觉中利用人工智能。”


图13:采用AR1335图像传感器的水果新鲜度分类系统。


无接触系统的成长潜力也非常大。安森美半导体的AR0230 HDR具有200万像素及宽动态范围,能提供很好的图像质量,进而提高人工智能的判断精度,应用于无接触付款以及飞机场、火车站、高铁站等无接触的通过闸口


图14:人脸识别付款应用(AR0230 HDR)。


结语


从第一次工业革命机械化到第二次工业革命电力化,到第三次工业革命计算机数字化,再到现在的第四代工业革命人工智能化、信息化,人工智能对人类社会的影响和改变远远超过计算机数字工业革命。


如果把人工智能比作大脑,感知就相当于眼睛。安森美半导体提供了全面的感知技术,如图像感知,多光谱、高光谱的感知,激光雷达感知、毫米波雷达感知和传感器融合等,所有这些技术都推动着人工智能和第四次工业革命的进步。



点击阅读原文,了解更多
安森美半导体 安森美(onsemi, 纳斯达克股票代码:ON)专注于汽车和工业终端市场,包括汽车功能电子化和安全、可持续能源网、工业自动化以及5G和云基础设施等。以高度差异化的创新产品组合,创造智能电源和感知技术,解决最复杂的挑战,帮助建设更美好的未来。
评论
  • PLC组态方式主要有三种,每种都有其独特的特点和适用场景。下面来简单说说: 1. 硬件组态   定义:硬件组态指的是选择适合的PLC型号、I/O模块、通信模块等硬件组件,并按照实际需求进行连接和配置。    灵活性:这种方式允许用户根据项目需求自由搭配硬件组件,具有较高的灵活性。    成本:可能需要额外的硬件购买成本,适用于对系统性能和扩展性有较高要求的场合。 2. 软件组态   定义:软件组态主要是通过PLC
    丙丁先生 2025-01-06 09:23 85浏览
  • 这篇内容主要讨论三个基本问题,硅电容是什么,为什么要使用硅电容,如何正确使用硅电容?1.  硅电容是什么首先我们需要了解电容是什么?物理学上电容的概念指的是给定电位差下自由电荷的储藏量,记为C,单位是F,指的是容纳电荷的能力,C=εS/d=ε0εrS/4πkd(真空)=Q/U。百度百科上电容器的概念指的是两个相互靠近的导体,中间夹一层不导电的绝缘介质。通过观察电容本身的定义公式中可以看到,在各个变量中比较能够改变的就是εr,S和d,也就是介质的介电常数,金属板有效相对面积以及距离。当前
    知白 2025-01-06 12:04 173浏览
  • 大模型的赋能是指利用大型机器学习模型(如深度学习模型)来增强或改进各种应用和服务。这种技术在许多领域都显示出了巨大的潜力,包括但不限于以下几个方面: 1. 企业服务:大模型可以用于构建智能客服系统、知识库问答系统等,提升企业的服务质量和运营效率。 2. 教育服务:在教育领域,大模型被应用于个性化学习、智能辅导、作业批改等,帮助教师减轻工作负担,提高教学质量。 3. 工业智能化:大模型有助于解决工业领域的复杂性和不确定性问题,尽管在认知能力方面尚未完全具备专家级的复杂决策能力。 4. 消费
    丙丁先生 2025-01-07 09:25 80浏览
  •     为控制片内设备并且查询其工作状态,MCU内部总是有一组特殊功能寄存器(SFR,Special Function Register)。    使用Eclipse环境调试MCU程序时,可以利用 Peripheral Registers Viewer来查看SFR。这个小工具是怎样知道某个型号的MCU有怎样的寄存器定义呢?它使用一种描述性的文本文件——SVD文件。这个文件存储在下面红色字体的路径下。    例:南京沁恒  &n
    电子知识打边炉 2025-01-04 20:04 100浏览
  • 根据环洋市场咨询(Global Info Research)项目团队最新调研,预计2030年全球无人机锂电池产值达到2457百万美元,2024-2030年期间年复合增长率CAGR为9.6%。 无人机锂电池是无人机动力系统中存储并释放能量的部分。无人机使用的动力电池,大多数是锂聚合物电池,相较其他电池,锂聚合物电池具有较高的能量密度,较长寿命,同时也具有良好的放电特性和安全性。 全球无人机锂电池核心厂商有宁德新能源科技、欣旺达、鹏辉能源、深圳格瑞普和EaglePicher等,前五大厂商占有全球
    GIRtina 2025-01-07 11:02 68浏览
  • 随着市场需求不断的变化,各行各业对CPU的要求越来越高,特别是近几年流行的 AIOT,为了有更好的用户体验,CPU的算力就要求更高了。今天为大家推荐由米尔基于瑞芯微RK3576处理器推出的MYC-LR3576核心板及开发板。关于RK3576处理器国产CPU,是这些年的骄傲,华为手机全国产化,国人一片呼声,再也不用卡脖子了。RK3576处理器,就是一款由国产是厂商瑞芯微,今年第二季推出的全新通用型的高性能SOC芯片,这款CPU到底有多么的高性能,下面看看它的几个特性:8核心6 TOPS超强算力双千
    米尔电子嵌入式 2025-01-03 17:04 55浏览
  • 本文介绍Linux系统更换开机logo方法教程,通用RK3566、RK3568、RK3588、RK3576等开发板,触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。制作图片开机logo图片制作注意事项(1)图片必须为bmp格式;(2)图片大小不能大于4MB;(3)BMP位深最大是32,建议设置为8;(4)图片名称为logo.bmp和logo_kernel.bmp;开机
    Industio_触觉智能 2025-01-06 10:43 87浏览
  • By Toradex 秦海1). 简介嵌入式平台设备基于Yocto Linux 在开发后期量产前期,为了安全以及提高启动速度等考虑,希望将 ARM 处理器平台的 Debug Console 输出关闭,本文就基于 NXP i.MX8MP ARM 处理器平台来演示相关流程。 本文所示例的平台来自于 Toradex Verdin i.MX8MP 嵌入式平台。  2. 准备a). Verdin i.MX8MP ARM核心版配合Dahlia载板并
    hai.qin_651820742 2025-01-07 14:52 45浏览
  • 村田是目前全球量产硅电容的领先企业,其在2016年收购了法国IPDiA头部硅电容器公司,并于2023年6月宣布投资约100亿日元将硅电容产能提升两倍。以下内容主要来自村田官网信息整理,村田高密度硅电容器采用半导体MOS工艺开发,并使用3D结构来大幅增加电极表面,因此在给定的占位面积内增加了静电容量。村田的硅技术以嵌入非结晶基板的单片结构为基础(单层MIM和多层MIM—MIM是指金属 / 绝缘体/ 金属) 村田硅电容采用先进3D拓扑结构在100um内,使开发的有效静电容量面积相当于80个
    知白 2025-01-07 15:02 75浏览
  • 每日可见的315MHz和433MHz遥控模块,你能分清楚吗?众所周知,一套遥控设备主要由发射部分和接收部分组成,发射器可以将控制者的控制按键经过编码,调制到射频信号上面,然后经天线发射出无线信号。而接收器是将天线接收到的无线信号进行解码,从而得到与控制按键相对应的信号,然后再去控制相应的设备工作。当前,常见的遥控设备主要分为红外遥控与无线电遥控两大类,其主要区别为所采用的载波频率及其应用场景不一致。红外遥控设备所采用的射频信号频率一般为38kHz,通常应用在电视、投影仪等设备中;而无线电遥控设备
    华普微HOPERF 2025-01-06 15:29 127浏览
  • 根据Global Info Research项目团队最新调研,预计2030年全球封闭式电机产值达到1425百万美元,2024-2030年期间年复合增长率CAGR为3.4%。 封闭式电机是一种电动机,其外壳设计为密闭结构,通常用于要求较高的防护等级的应用场合。封闭式电机可以有效防止外部灰尘、水分和其他污染物进入内部,从而保护电机的内部组件,延长其使用寿命。 环洋市场咨询机构出版的调研分析报告【全球封闭式电机行业总体规模、主要厂商及IPO上市调研报告,2025-2031】研究全球封闭式电机总体规
    GIRtina 2025-01-06 11:10 104浏览
  • 在智能家居领域中,Wi-Fi、蓝牙、Zigbee、Thread与Z-Wave等无线通信协议是构建短距物联局域网的关键手段,它们常在实际应用中交叉运用,以满足智能家居生态系统多样化的功能需求。然而,这些协议之间并未遵循统一的互通标准,缺乏直接的互操作性,在进行组网时需要引入额外的网关作为“翻译桥梁”,极大地增加了系统的复杂性。 同时,Apple HomeKit、SamSung SmartThings、Amazon Alexa、Google Home等主流智能家居平台为了提升市占率与消费者
    华普微HOPERF 2025-01-06 17:23 145浏览
  • 彼得·德鲁克被誉为“现代管理学之父”,他的管理思想影响了无数企业和管理者。然而,关于他的书籍分类,一种流行的说法令人感到困惑:德鲁克一生写了39本书,其中15本是关于管理的,而其中“专门写工商企业或为企业管理者写的”只有两本——《为成果而管理》和《创新与企业家精神》。这样的表述广为流传,但深入探讨后却发现并不完全准确。让我们一起重新审视这一说法,解析其中的矛盾与根源,进而重新认识德鲁克的管理思想及其著作的真正价值。从《创新与企业家精神》看德鲁克的视角《创新与企业家精神》通常被认为是一本专为企业管
    优思学院 2025-01-06 12:03 119浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦