人工智能通过单张雷达图像生成3D城市地图

点击蓝字 关注我们

SUBSCRIBE to US


UNIVERSITY OF THE BUNDESWEHR MUNICH


一种新的机器学习系统可以通过单张合成孔径雷达(SAR)图像绘制出城市环境的高度图,从而有可能加快灾害的规划以及响应速度。


德国慕尼黑联邦国防军大学的航空工程师们声称(https://spectrum.ieee.org/topic/aerospace/),他们的SAR2Height框架是首个能从单个合成孔径雷达卫星提供完整 —— 即使并不完美的 —— 三维城市地图的系统。


当地震摧毁一座城市时,信息的供应可能无法满足所有求。当所有基本服务中断后,我们很难评估灾害到底造成了多大的破坏,或者哪里最需要人道主义援助。


“Being able to produce 3D from [synthetic aperture radar] alone would really be a revolution.”

—CARL PUCCI, EO59


使用激光雷达系统(https://spectrum.ieee.org/tag/Lidar)进行空中勘测是三维测绘的黄金标准,但这种激光测距系统的购买和操作成本都很高,这还是在不考虑重大灾难带来额外后勤困难的情况下。


遥感或许是另一种选择,但如果该地区被云层或烟雾遮挡,光学卫星图像几乎毫无用处。


而合成孔径雷达无论白天黑夜,无论天气如何,都能发挥作用。合成孔径雷达是一种有源传感器,它利用卫星向地球表面发射的信号反射—即"合成孔径 "部分来自于雷达利用卫星自身的运动,来模拟更大的天线,从而捕捉波长相对较长的反射信号。目前有数十颗政府和商业合成孔径雷达卫星在地球轨道上运行,其中许多卫星可以在数小时内完成对新地点的成像任务。


然而,合成孔径雷达图像本质上仍然是二维的,在解读时可能比普通照片更加棘手。这在一定程度上是由于一种被称为 "雷达停顿(https://natural-resources.canada.ca/maps-tools-and-publications/satellite-imagery-and-air-photos/tutorial-fundamentals-remote-sensing/microwave-remote-sensing/radar-image-distortions/9325)"的效应造成的,在这种效应下,未损坏的建筑物看起来会向传感器方向倾斜。


"高度本身就是一个超级复杂的话题。” 慕尼黑联邦国防军大学教授Michael Schmitt说:"关于高度的定义有一百万种,将卫星图像转化为有意义的世界几何中的有意义高度是一项非常复杂的工作。”


Schmitt和他的同事Michael Reclastarted首先从TerraSAR-X卫星上获取了51个城市的合成孔径雷达图像,TerraSAR-X卫星是一个是德国公共航空航天中心与私营企业—空中客车防务与航天公司的合作项目。


研究人员随后获得了这些城市的高质量高度图,其中大部分由激光雷达勘测生成,但也有一些由携带立体相机的飞机或无人机生成。下一步是在高度图和合成孔径雷达图像之间进行一对一、像素到像素的映射,在此基础上训练深度神经网络。


结果令人惊叹,Schmitt说:"我们纯粹在 TerraSAR-X 图像上训练了我们的模型,但开箱即用,它在其他商业卫星的图像上也能很好地工作"。他说到,这个模型只需要几分钟就能运行,它可以预测合成孔径雷达图像中建筑物的高度,精确度约为3米—这是典型建筑物的单层高度。


这意味着该系统应该能够发现城市中几乎每一栋遭受重大破坏的建筑物。


休斯顿大学地球传感系统工程教授Pietro Milillo希望在美国国家航空航天局资助的地震恢复项目中使用Schmitt和Recla的模型(https://link.springer.com/article/10.1007/s10518-024-01877-1)。他说:“我们可以将应用从建筑物高度图变为建筑物倒塌概率图。”本月晚些时候,Milillo打算前往去年造成2900多人死亡的摩洛哥地震现场,验证他的应用(https://www.reuters.com/world/africa/morocco-earthquake-death-toll-passes-2800-survivors-camp-outdoors-2023-09-11/)。


“There are a million definitions of what height is, and turning a satellite image into a meaningful height...is a very complicated endeavor.”

—MICHAEL SCHMITT, UNIVERSITY OF THE BUNDESWEHR MUNICH


但Schmitt警告说,人工智能模型还远不够完美。它很难准确预测摩天大楼的高度,而且偏向于北美和欧洲城市。这是因为发展中国家的许多城市没有定期的激光雷达测绘飞行来提供代表性的训练数据。激光雷达飞行与合成孔径雷达图像之间的间隔时间越长,建造或更换的建筑物就越多,模型预测的可靠性就越低。


即使在那些较富裕的国家,"我们也确实依赖于政府执行激光雷达任务并公开数据的缓慢重访周期,"弗吉尼亚海滩一家专门从事合成孔径雷达软件的公司EO59的创始人Carl Pucci说,"这太厉害了。如果仅凭合成孔径雷达就能制作3D图像,那将是一场真正的革命。


Schmitt说,SAR2Height模型现在包含了来自 177个城市的数据,并在不断改进。"我们已经非常接近于通过单张合成孔径雷达图像重建实际的建筑模型。但你必须记住,我们的方法永远不会像传统的立体或激光雷达那样精确。它永远只是一种最佳猜测,而不是高精度测量。”


在一场大地震发生后的混乱中,即使是一个最具可能的猜测也比什么都不知道要好。


供稿:胡乐


微信号|IEEE电气电子工程师学会

新浪微博|IEEE中国

 · IEEE电气电子工程师学会 · 


人工智能如何帮助抵御网络攻击

人工智能引领数据中心发展新趋势

汽车知晓你的信息?解读隐私与安全挑战

汽车成为信息时代的移动计算机:5大数据收集方式解析

IEEE电气电子工程师学会 IEEE是全球最大的专业技术协会之一,一直致力于推动电气电子技术在理论方面的发展和应用方面的进步。IEEE在全球160多个国家有超过四十万名会员。
评论
  • 汽车行业的变革正愈演愈烈,由交通工具到“第三生活空间”。业内逐渐凝聚共识:汽车的下半场在于智能化。而智能化的核心在于集成先进的传感器,以实现高等级的智能驾驶乃至自动驾驶,以及更个性、舒适、交互体验更优的智能座舱。毕马威中国《聚焦电动化下半场 智能座舱白皮书》数据指出,2026年中国智能座舱市场规模将达到2127亿元,5年复合增长率超过17%。2022年到2026年,智能座舱渗透率将从59%上升至82%。近日,在SENSOR CHINA与琻捷电子联合举办的“汽车传感系列交流会-智能传感专场”上,艾
    艾迈斯欧司朗 2024-12-20 19:45 200浏览
  • 国产数字隔离器已成为现代电子产品中的关键部件,以增强的性能和可靠性取代了传统的光耦合器。这些隔离器广泛应用于医疗设备、汽车电子、工业自动化和其他需要强大信号隔离的领域。准确测试这些设备是确保其质量和性能的基本步骤。如何测试数字隔离器测试数字隔离器需要精度和正确的工具集来评估其在各种条件下的功能和性能。以下设备对于这项任务至关重要:示波器:用于可视化信号波形并测量时序特性,如传播延迟、上升时间和下降时间。允许验证输入输出信号的完整性。频谱分析仪:测量电磁干扰(EMI)和其他频域特性。有助于识别信号
    克里雅半导体科技 2024-12-20 16:35 116浏览
  • //```c #include "..\..\comm\AI8051U.h"  // 包含头文件,定义了硬件寄存器和常量 #include "stdio.h"              // 标准输入输出库 #include "intrins.h"         &n
    丙丁先生 2024-12-20 10:18 98浏览
  • Supernode与艾迈斯欧司朗携手,通过Belago红外LED实现精准扫地机器人避障;得益于Belago出色的红外补光功能,使扫地机器人能够大大提升其识别物体的能力,实现精准避障;Belago点阵照明器采用迷你封装,兼容标准无铅回流工艺,适用于各种3D传感平台,包括移动设备、物联网设备和机器人。全球领先的光学解决方案供应商艾迈斯欧司朗(瑞士证券交易所股票代码:AMS)近日宣布,与国内领先的多行业三维视觉方案提供商超节点创新科技(Supernode)双方联合推出采用艾迈斯欧司朗先进Belago红
    艾迈斯欧司朗 2024-12-20 18:55 145浏览
  • 光耦合器,也称为光隔离器,是用于电气隔离和信号传输的多功能组件。其应用之一是测量电路中的电压。本文介绍了如何利用光耦合器进行电压测量,阐明了其操作和实际用途。使用光耦合器进行电压测量的工作原理使用光耦合器进行电压测量依赖于其在通过光传输信号的同时隔离输入和输出电路的能力。该过程包括:连接到电压源光耦合器连接在电压源上。输入电压施加到光耦合器的LED,LED发出的光与施加的电压成比例。光电二极管响应LED发出的光由输出侧的光电二极管或光电晶体管检测。随着LED亮度的变化,光电二极管的电阻相应减小,
    腾恩科技-彭工 2024-12-20 16:31 145浏览
  • 百佳泰特为您整理2024年12月各大Logo的最新规格信息。——————————USB▶ 百佳泰获授权进行 USB Active Cable 认证。▶ 所有符合 USB PD 3.2 标准的产品都有资格获得USB-IF 认证——————————Bluetooth®▶ Remote UPF Testing针对所有低功耗音频(LE Audio)和网格(Mesh)规范的远程互操作性测试已开放,蓝牙会员可使用该测试,这是随时测试产品的又一绝佳途径。——————————PCI Express▶ 2025年
    百佳泰测试实验室 2024-12-20 10:33 153浏览
  • 汽车驾驶员监控系统又称DMS,是一种集中在车辆中的技术,用于实时跟踪和评估驾驶员状态及驾驶行为。随着汽车产业智能化转型,整合AI技术的DMS逐渐成为主流,AI模型通过大量数据进行持续训练,使得驾驶监控更加高效和精准。 驾驶员监测系统主要通过传感器、摄像头收集驾驶员的面部图像,定位头部姿势、人脸特征及行为特征,并通过各种异常驾驶行为检测模型运算来识别驾驶员的当前状态。如果出现任何异常驾驶行为(如疲劳,分心,抽烟,接打电话,无安全带等),将发出声音及视觉警报。此外,驾驶员的行为数据会被记录
    启扬ARM嵌入式 2024-12-20 09:14 108浏览
  •                                                窗        外       年底将近,空气变得格外寒冷,估计这会儿北方已经是千里
    广州铁金刚 2024-12-23 11:49 102浏览
  • ALINX 正式发布 AMD Virtex UltraScale+ 系列 FPGA PCIe 3.0 综合开发平台 AXVU13P!这款搭载 AMD 16nm 工艺 XCVU13P 芯片的高性能开发验证平台,凭借卓越的计算能力和灵活的扩展性,专为应对复杂应用场景和高带宽需求而设计,助力技术开发者加速产品创新与部署。随着 5G、人工智能和高性能计算等领域的迅猛发展,各行业对计算能力、灵活性和高速数据传输的需求持续攀升。FPGA 凭借其高度可编程性和实时并行处理能力,已成为解决行业痛点的关
    ALINX 2024-12-20 17:44 143浏览
  • 随着工业自动化和智能化的发展,电机控制系统正向更高精度、更快响应和更高稳定性的方向发展。高速光耦作为一种电气隔离与信号传输的核心器件,在现代电机控制中扮演着至关重要的角色。本文将详细介绍高速光耦在电机控制中的应用优势及其在实际工控系统中的重要性。高速光耦的基本原理及优势高速光耦是一种光电耦合器件,通过光信号传递电信号,实现输入输出端的电气隔离。这种隔离可以有效保护电路免受高压、电流浪涌等干扰。相比传统的光耦,高速光耦具备更快的响应速度,通常可以达到几百纳秒到几微秒级别的传输延迟。电气隔离:高速光
    晶台光耦 2024-12-20 10:18 189浏览
  • 耳机虽看似一个简单的设备,但不仅只是听音乐功能,它已经成为日常生活和专业领域中不可或缺的一部分。从个人娱乐到专业录音,再到公共和私人通讯,耳机的使用无处不在。使用高质量的耳机不仅可以提供优良的声音体验,还能在长时间使用中保护使用者听力健康。耳机产品的质量,除了验证产品是否符合法规标准,也能透过全面性的测试和认证过程,确保耳机在各方面:从音质到耐用性,再到用户舒适度,都能达到或超越行业标准。这不仅保护了消费者的投资,也提升了该公司在整个行业的产品质量和信誉!客户面临到的各种困难一家耳机制造商想要透
    百佳泰测试实验室 2024-12-20 10:37 239浏览
  • 光耦固态继电器(SSR)作为现代电子控制系统中不可或缺的关键组件,正逐步取代传统机械继电器。通过利用光耦合技术,SSR不仅能够提供更高的可靠性,还能适应更加复杂和严苛的应用环境。在本文中,我们将深入探讨光耦固态继电器的工作原理、优势、挑战以及未来发展趋势。光耦固态继电器:如何工作并打破传统继电器的局限?光耦固态继电器通过光电隔离技术,实现输入信号与负载之间的电气隔离。其工作原理包括三个关键步骤:光激活:LED接收输入电流并发出与其成比例的光信号。光传输:光电传感器(如光电二极管或光电晶体管)接收
    腾恩科技-彭工 2024-12-20 16:30 121浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦