【光电智造】3D感知龙头全技术路线布局

今日光电 2024-03-17 18:00

今日光电

     有人说,20世纪是电的世纪,21世纪是光的世纪;知光解电,再小的个体都可以被赋能。追光逐电,光赢未来...欢迎来到今日光电!




----追光逐电 光赢未来----

3D 视觉市场尚处在发展早期,空间广阔 

人类 70%以上信息通过眼睛获取,对于机器而言,视觉感知也是其“智能化”升级的重要基础。3D 成像让每一个像素除 x、y 轴数据外,还有 z 轴(深度/距离)数据。围绕着人体、物体、空间扫描一圈,就能得到点云图和精准的“1:1”还原的 3D 模型。 

3D 视觉应用广泛,在消费电子领域,在智能终端设备上搭载 3D 视觉传感器可以使其具备 3D 人脸识别解锁、沉浸式交互、体感交互等能力;在生物识别领域,通过在线下支付终端、智能门锁/门禁等设备上搭载 3D 视觉传感器可以实现更安全、更精准的 3D 刷脸支付和解锁;在 AIoT 领域,3D 视觉传感器可以被搭载在 3D 空间扫描设备、服务型机器人、AR/VR 设备等终端上以实现传统 2D 相机无法实现的功能,例如三维重建、避障导航等;在工业三维测量领域,3D 视觉感知技术可以被用来实现微米级的工业扫描、工业检测等功能。自动驾驶汽车、工业机器人、医疗等更丰富的应用领域也正在探索。不同应用领域对 3D 感知的测量范围、测量精度、尺寸和功耗等性能要求均不同。 

1.2 应用端:起于生物识别,受益机器人视觉 

3D 视觉感知技术最早应用于工业领域,已成功向消费级领域拓展。智能手机:2017年,苹果发布 iPhone X,搭载了前置 3D 结构光视觉传感器,用于人脸解锁、人脸支付等功能。这标志着 3D 视觉感知技术在消费级领域开始规模化普及。华为、魅族等厂商的智能手机都相继搭载了基于 iToF 技术的后置 3D 视觉传感器,2020 年苹果在其 iPad Pro 及 iPhone 12 Pro 中搭载了全新的基于 dToF 技术的 Lidar 扫描仪;刷脸支付:2018 年 8 月15 日,支付宝宣布刷脸支付已经具备了商业化能力。截至 2020 年末,在支付宝、微信支付、银联商务、拉卡拉等第三方支付公司的积极推动下,全国已合计完成超过百万台线下支付设备的铺设。无人机:大疆创新的无人机如 Phantom Pro/Pro+、Mavic 2 Pro/Zoom等型号产品搭载了双目视觉系统,通过图像测距来感知障碍物。XR:Vision Pro 配备 LiDAR激光雷达传感器和深感传感器,可以感知深度信息,是苹果的第一款 3D 相机。其他消费级应用:基于 3D 视觉感知的相关应用如生物识别、三维重建、骨架跟踪、AR 交互、数字孪生、自主定位导航等应用在消费电子、金融、零售、餐饮、汽车、AIoT 等行业落地应用。 

应用三:具身智能将人工智能技术与机器人实体相结合,让“大脑”有了可支配、

可感知、可交互、可行动的“身体”。人形机器人可赋予通用人工智能“物理载体”。 

GPT、数据、算力等技术的发展给机器人大脑提供了极佳的土壤。2023 年 3 月,谷歌和柏林工业大学的团队重磅推出了史上最大的视觉-语言模型——PaLM-E (Pathways Language Model with Embodied),参数量高达 5620 亿(GPT-3 的参数量为 1750 亿)。该模型不仅可以理解图像,还能理解、生成语言,可以执行各种复杂的机器人指令而无需重新训练。谷歌研究人员计划探索 PaLM-E 在现实世界场景中的更多应用,例如家庭自动化或工业机器人。微软团队也在探索如何将 OpenAI研发的 ChatGPT 扩展到机器人领域。 

 2022 年 10 月 1 日 AI Day 上,特斯拉展示了人形机器人 Optimus 的原型机。其中,Optimus 视觉基于特斯拉 FSD 方案,配备 8 个汽车同款 Autopilot 摄像头,最远监测距离可达 250 米。 

人形机器人市场规模展望百亿台。艾媒咨询数据显示,服务业在应用机器人之后成本降低幅度大部分在 50%以内,其中有少部分企业能够将成本降低在 50%-75%。2023 年中国服务型机器人市场规模将达 959.2 亿元,市场份额将有望超越工业机器人;2025 年市场规模将达到 1850.1 亿元,中国服务机器人赛道发展提速,成长空间巨大。

特斯拉 2023 年 3 月的投资者日,马斯克认为未来人形机器人可能超过人类数量,达到 100 亿-200 亿规模。2023WAIC 大会,奥比中光董事长兼 CEO 黄源浩:“未来机器人的数量可能有 100-200 亿,其中人形机器人数量或达 70 亿。” 

机器人视觉相比传统机器视觉更加 3D 化、高度集成化、场景复杂化。高仙无人驾驶清洁机器人 Scrubber75 配备了一个深度相机 Intel RealSense D435i 和一个双目鱼眼相机 Intel RealSense T265。 

服务机器人:目前已实现落地的应用包括扫地机器人、自动配送机器人、引导陪

伴机器人等,服务于家庭、餐厅、旅馆、医院等多个线下场景。根据亿欧智库,2020年中国商用服务机器人市场规模达 106.4 亿元,同比增长 83.03%,预计 2025 年将达到千亿级别。 

在智能机器人领域,奥比中光是国内最早深耕机器人细分赛道的企业之一,推出了双目结构光、单目结构光、激光雷达等产品,赋能多家机器人行业头部企业。奥比中光被 AspenCore 评为中国 TOP 10 传感器公司,斩获服务机器人 3D 视觉传感器市占率第一。奥比中光布局了两种系统方案,一种是低成本的嵌入式视觉传感器,传感器本身不带智能视觉算法;二是自带边缘算力的智能视觉传感器,传感器可自行执行算法及软件。 

1.3 全球 3D 感知市场预计 2028 年达 172 亿美元 

据 Yole Intelligence 报告显示,2022 年 3D 成像和传感市场的收入达到 82 亿美元。预计到 2028 年总体 3D 成像和传感市场将翻倍增长至 172 亿美元。细分来看:3D 传感下游最大应用为消费电子,占比约为 40%。其次是工业领域,占比达21%。国防及航天和汽车领域军占比 17%。医疗占比最少,仅有 5%。 

1.4 方案商的竞合与整合 

3D 视觉感知行业属于新兴行业,处于快速发展的阶段,还没有形成稳定的竞争格局,偏向于竞合关系。目前在消费级应用市场中,已开展相关技术与产品研发的主要企业包括苹果、华为、微软、英特尔、索尼、三星等科技巨头企业,还包括英飞凌、瑞芯微、华捷艾米、奥比中光等企业。苹果(2013 年收购以色列 3D 传感器公司PrimeSense)、华为、三星拥有智能手机等终端产品,目前大都采用自研的 3D 视觉感知技术方案。三星、索尼的图像传感器芯片也会向业内其他企业供货,用于研发面向特定应用场景的传感器产品。

2010 年,微软发布了第一代基于结构光技术的 3D 视觉感知产品 Kinect,用于捕捉三维空间中人体的运动,实现通过体态的人机交互。2013 年,英特尔发布基于结构光技术的产品 RealSense,用于实现手势识别、面部分析、背景移除及 3D 扫描等功能。2014 年,谷歌公布了基于 iToF 技术的 Project Tango 平板电脑和开发工具包,为用户提供运动跟踪、深度感知、区域建模等功能。2015 年,奥比中光开发出 3D 深度引擎芯片 MX400,量产了基于结构光技术的消费级 3D 视觉传感器 Astra,用于三维建模、骨架跟踪、手势识别等应用。 

2023 年初,奥比中光与 NVIDIA 和微软合作推出 Femto Mega 高性能深度相机。Femto Mega 融合微软第一代深度相机 Azure Kinect 的全部性能,并集成英伟达 Jetson Nano 深度算力平台,相较于 Azure Kinect 性能和功能等均有一定优化和升级,主要应用于物流、机器人、制造、工业、零售、医疗保健和健身解决方案等领域的 3D 视觉开发。 

3D 感知龙头,奥比中光受益智能发展 

2.1 从结构光起步,全技术路线布局 

奥比中光成立于 2013 年,全面布局 3D 视觉感知技术,位列全球第一梯队。公司在国内率先开展 3D 视觉感知技术系统性研发;是自主研发一系列深度引擎数字芯片及多种专用感光模拟芯片并实现 3D 视觉传感器产业化应用的少数企业之一;是市场上为数不多能够提供核心自主知识产权 3D 视觉感知产品的企业;是全球少数几家全面布局六大 3D 视觉感知技术的公司。 

自 2015年底量产以来,奥比中光已先后服务全球超过 1,000家客户及众多的开发者,包括 OPPO、蚂蚁集团、捷普、牧原、中国移动、Matterport、贝壳如视、江博士等行业领先者。为 OPPO 旗舰机 Find X 定制开发前置结构光 3D 传感器,使其成为继苹果 iPhone X 后全球第二款量产超百万台搭载 3D 视觉传感器的智能手机;为蚂蚁集团定制开发超百万台应用于线下支付的 3D 视觉传感器;为 Matterport、贝壳如视等定制开发实现房屋 3D扫描功能的 3D 视觉传感器;为全球三大汽车弯管生产企业之一日本三樱提供三维光学弯管检测系统等。 

奥比中光自主设计开发了结构光、双目、iToF、dToF、Lidar 五种 3D 视觉传感系统,可以满足不同应用场景的需求。结构光、iToF、dToF、双目、工业三维测量相关产品已量产,以结构光技术产品为主要收入。基于 iToF 技术的 3D 视觉传感器在 2020 年末刚上市推出,自研的 iToF 感光芯片也进入待量产阶段。Lidar 技术于 2019 年布局,目前仍处于在研阶段。预计新技术平均研发周期 2-3 年左右。

同行业中主要竞争对手索尼、三星、华为已基于 iToF 或 dToF 技术推出产品并得到应用,Lidar(激光雷达)作为自动驾驶核心传感器之一,国内外多家企业也已发布产品。公司处于追赶阶段。公司正在研发的单光子面阵激光雷达可以应用在无人驾驶领域,但截至目前尚未量产。

全栈式技术研发能力。涵盖系统设计、芯片设计、算法研发、光学系统、软件开发、量产技术等底层核心技术,基本覆盖了产品从设计、研发到制造的全周期研发流程。深度引擎芯片已迭代 MX400、MX6000、MX6300、MX6600 四代。2021 年底,公司的 iToF 感光芯片实现量产。 

3D 视觉感知产业链中,公司技术能力已经覆盖上、中、下游。上游:公司目前已具备传感器模组生产商的能力,iToF 感光芯片处于待量产阶段;中游:具备完整的 3D 视觉感知方案商的能力;下游:已经具备了各类应用算法的能力。未来基于产业的发展方向,公司将不断探索产业链各核心环节,为各类客户研制出满足行业需求的产品。 

3D 视觉传感器是主要由激光投影模组、光学成像模组、深度引擎芯片以及其他电子器件、结构件等组成的系统级产品。 

1) 激光投影模组:

由激光发射器、透镜、衍射光学元件等光学元器件构成,整体结构通过特殊散热以及高度集成化设计使得具备小体积、高稳定性、高性能特点;

通过对激光发射器、衍射光学元件的综合光学优化使得衍射光束功率分布均匀、零级强度弱化,确保发射端可以向三维空间投射出对人眼安全且高对比度的激光散斑,以对整个三维空间进行编码。

2) 光学成像模组:

包括感光芯片、定制滤光片以及成像透镜等主要器件;通过设计与发射端光源波长一致的窄带滤光片可以大幅降低环境光影响从而提升成像质量;感光芯片用于接收由三维空间物体反射回的空间编码信息,并输入到深度引擎芯片进行计算。

3) 深度引擎芯片:

内部固化了深度引擎算法,可以在接收到感光芯片的空间编码信息后进行实时的深度解算以输出 3D 数据,与传统的通用处理器调用算法进行深度计算相比,深度引擎芯片具备更快的计算效率以及更精确的计算能力,是实现 3D 视觉传感器由实验室走向量产、产品化的核心。

从技术指标对比来看,公司已量产上市的一些3D 视觉传感器产品与国际科技巨头公司主要竞品在主要技术参数指标上互有优劣势,产品性能相仿,处于可比的技术产品竞争梯队,与国内公司相比则具有一定的优势。

来源:新机器视觉



申明:感谢原创作者的辛勤付出。本号转载的文章均会在文中注明,若遇到版权问题请联系我们处理。


 

----与智者为伍 为创新赋能----


【说明】欢迎企业和个人洽谈合作,投稿发文。欢迎联系我们
诚招运营合伙人 ,对新媒体感兴趣,对光电产业和行业感兴趣。非常有意者通过以下方式联我们!条件待遇面谈
投稿丨合作丨咨询

联系邮箱:uestcwxd@126.com

QQ:493826566

评论
  • 临近春节,各方社交及应酬也变得多起来了,甚至一月份就排满了各式约见。有的是关系好的专业朋友的周末“恳谈会”,基本是关于2025年经济预判的话题,以及如何稳定工作等话题;但更多的预约是来自几个客户老板及副总裁们的见面,他们为今年的经济预判与企业发展焦虑而来。在聊天过程中,我发现今年的聊天有个很有意思的“点”,挺多人尤其关心我到底是怎么成长成现在的多领域风格的,还能掌握一些经济趋势的分析能力,到底学过哪些专业、在企业管过哪些具体事情?单单就这个一个月内,我就重复了数次“为什么”,再辅以我上次写的:《
    牛言喵语 2025-01-22 17:10 38浏览
  • 日前,商务部等部门办公厅印发《手机、平板、智能手表(手环)购新补贴实施方案》明确,个人消费者购买手机、平板、智能手表(手环)3类数码产品(单件销售价格不超过6000元),可享受购新补贴。每人每类可补贴1件,每件补贴比例为减去生产、流通环节及移动运营商所有优惠后最终销售价格的15%,每件最高不超过500元。目前,京东已经做好了承接手机、平板等数码产品国补优惠的落地准备工作,未来随着各省市关于手机、平板等品类的国补开启,京东将第一时间率先上线,满足消费者的换新升级需求。为保障国补的真实有效发放,基于
    华尔街科技眼 2025-01-17 10:44 221浏览
  • 高速先生成员--黄刚这不马上就要过年了嘛,高速先生就不打算给大家上难度了,整一篇简单但很实用的文章给大伙瞧瞧好了。相信这个标题一出来,尤其对于PCB设计工程师来说,心就立马凉了半截。他们辛辛苦苦进行PCB的过孔设计,高速先生居然说设计多大的过孔他们不关心!另外估计这时候就跳出很多“挑刺”的粉丝了哈,因为翻看很多以往的文章,高速先生都表达了过孔孔径对高速性能的影响是很大的哦!咋滴,今天居然说孔径不关心了?别,别急哈,听高速先生在这篇文章中娓娓道来。首先还是要对各位设计工程师的设计表示肯定,毕竟像我
    一博科技 2025-01-21 16:17 100浏览
  •  万万没想到!科幻电影中的人形机器人,正在一步步走进我们人类的日常生活中来了。1月17日,乐聚将第100台全尺寸人形机器人交付北汽越野车,再次吹响了人形机器人疯狂进厂打工的号角。无独有尔,银河通用机器人作为一家成立不到两年时间的创业公司,在短短一年多时间内推出革命性的第一代产品Galbot G1,这是一款轮式、双臂、身体可折叠的人形机器人,得到了美团战投、经纬创投、IDG资本等众多投资方的认可。作为一家成立仅仅只有两年多时间的企业,智元机器人也把机器人从梦想带进了现实。2024年8月1
    刘旷 2025-01-21 11:15 390浏览
  • 80,000人到访的国际大展上,艾迈斯欧司朗有哪些亮点?感未来,光无限。近日,在慕尼黑electronica 2024现场,ams OSRAM通过多款创新DEMO展示,以及数场前瞻洞察分享,全面展示自身融合传感器、发射器及集成电路技术,精准捕捉并呈现环境信息的卓越能力。同时,ams OSRAM通过展会期间与客户、用户等行业人士,以及媒体朋友的深度交流,向业界传达其以光电技术为笔、以创新为墨,书写智能未来的深度思考。electronica 2024electronica 2024构建了一个高度国际
    艾迈斯欧司朗 2025-01-16 20:45 423浏览
  • 嘿,咱来聊聊RISC-V MCU技术哈。 这RISC-V MCU技术呢,简单来说就是基于一个叫RISC-V的指令集架构做出的微控制器技术。RISC-V这个啊,2010年的时候,是加州大学伯克利分校的研究团队弄出来的,目的就是想搞个新的、开放的指令集架构,能跟上现代计算的需要。到了2015年,专门成立了个RISC-V基金会,让这个架构更标准,也更好地推广开了。这几年啊,这个RISC-V的生态系统发展得可快了,好多公司和机构都加入了RISC-V International,还推出了不少RISC-V
    丙丁先生 2025-01-21 12:10 111浏览
  • 2024年是很平淡的一年,能保住饭碗就是万幸了,公司业绩不好,跳槽又不敢跳,还有一个原因就是老板对我们这些员工还是很好的,碍于人情也不能在公司困难时去雪上加霜。在工作其间遇到的大问题没有,小问题还是有不少,这里就举一两个来说一下。第一个就是,先看下下面的这个封装,你能猜出它的引脚间距是多少吗?这种排线座比较常规的是0.6mm间距(即排线是0.3mm间距)的,而这个规格也是我们用得最多的,所以我们按惯性思维来看的话,就会认为这个座子就是0.6mm间距的,这样往往就不会去细看规格书了,所以这次的运气
    wuliangu 2025-01-21 00:15 183浏览
  •  光伏及击穿,都可视之为 复合的逆过程,但是,复合、光伏与击穿,不单是进程的方向相反,偏置状态也不一样,复合的工况,是正偏,光伏是零偏,击穿与漂移则是反偏,光伏的能源是外来的,而击穿消耗的是结区自身和电源的能量,漂移的载流子是 客席载流子,须借外延层才能引入,客席载流子 不受反偏PN结的空乏区阻碍,能漂不能漂,只取决于反偏PN结是否处于外延层的「射程」范围,而穿通的成因,则是因耗尽层的过度扩张,致使跟 端子、外延层或其他空乏区 碰触,当耗尽层融通,耐压 (反向阻断能力) 即告彻底丧失,
    MrCU204 2025-01-17 11:30 182浏览
  • 现在为止,我们已经完成了Purple Pi OH主板的串口调试和部分配件的连接,接下来,让我们趁热打铁,完成剩余配件的连接!注:配件连接前请断开主板所有供电,避免敏感电路损坏!1.1 耳机接口主板有一路OTMP 标准四节耳机座J6,具备进行音频输出及录音功能,接入耳机后声音将优先从耳机输出,如下图所示:1.21.2 相机接口MIPI CSI 接口如上图所示,支持OV5648 和OV8858 摄像头模组。接入摄像头模组后,使用系统相机软件打开相机拍照和录像,如下图所示:1.3 以太网接口主板有一路
    Industio_触觉智能 2025-01-20 11:04 150浏览
  • 本文介绍瑞芯微开发板/主板Android配置APK默认开启性能模式方法,开启性能模式后,APK的CPU使用优先级会有所提高。触觉智能RK3562开发板演示,搭载4核A53处理器,主频高达2.0GHz;内置独立1Tops算力NPU,可应用于物联网网关、平板电脑、智能家居、教育电子、工业显示与控制等行业。源码修改修改源码根目录下文件device/rockchip/rk3562/package_performance.xml并添加以下内容,注意"+"号为添加内容,"com.tencent.mm"为AP
    Industio_触觉智能 2025-01-17 14:09 164浏览
  •     IPC-2581是基于ODB++标准、结合PCB行业特点而指定的PCB加工文件规范。    IPC-2581旨在替代CAM350格式,成为PCB加工行业的新的工业规范。    有一些免费软件,可以查看(不可修改)IPC-2581数据文件。这些软件典型用途是工艺校核。    1. Vu2581        出品:Downstream     
    电子知识打边炉 2025-01-22 11:12 49浏览
  • 数字隔离芯片是一种实现电气隔离功能的集成电路,在工业自动化、汽车电子、光伏储能与电力通信等领域的电气系统中发挥着至关重要的作用。其不仅可令高、低压系统之间相互独立,提高低压系统的抗干扰能力,同时还可确保高、低压系统之间的安全交互,使系统稳定工作,并避免操作者遭受来自高压系统的电击伤害。典型数字隔离芯片的简化原理图值得一提的是,数字隔离芯片历经多年发展,其应用范围已十分广泛,凡涉及到在高、低压系统之间进行信号传输的场景中基本都需要应用到此种芯片。那么,电气工程师在进行电路设计时到底该如何评估选择一
    华普微HOPERF 2025-01-20 16:50 73浏览
  • Ubuntu20.04默认情况下为root账号自动登录,本文介绍如何取消root账号自动登录,改为通过输入账号密码登录,使用触觉智能EVB3568鸿蒙开发板演示,搭载瑞芯微RK3568,四核A55处理器,主频2.0Ghz,1T算力NPU;支持OpenHarmony5.0及Linux、Android等操作系统,接口丰富,开发评估快人一步!添加新账号1、使用adduser命令来添加新用户,用户名以industio为例,系统会提示设置密码以及其他信息,您可以根据需要填写或跳过,命令如下:root@id
    Industio_触觉智能 2025-01-17 14:14 121浏览
  • 随着消费者对汽车驾乘体验的要求不断攀升,汽车照明系统作为确保道路安全、提升驾驶体验以及实现车辆与环境交互的重要组成,日益受到业界的高度重视。近日,2024 DVN(上海)国际汽车照明研讨会圆满落幕。作为照明与传感创新的全球领导者,艾迈斯欧司朗受邀参与主题演讲,并现场展示了其多项前沿技术。本届研讨会汇聚来自全球各地400余名汽车、照明、光源及Tier 2供应商的专业人士及专家共聚一堂。在研讨会第一环节中,艾迈斯欧司朗系统解决方案工程副总裁 Joachim Reill以深厚的专业素养,主持该环节多位
    艾迈斯欧司朗 2025-01-16 20:51 195浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦