TPAMI, 2023 | 用压缩隐逆向神经网络进行高精度稀疏雷达成像

news2025/1/20 18:31:44

CoIR: Compressive Implicit Radar | IEEE TPAMI, 2023 | 用压缩隐逆向神经网络进行高精度稀疏雷达成像

注1:本文系“无线感知论文速递”系列之一,致力于简洁清晰完整地介绍、解读无线感知领域最新的顶会/顶刊论文(包括但不限于Nature/Science及其子刊;MobiCom, Sigcom, MobiSys, NSDI, SenSys, Ubicomp;JSAC,雷达学报等)。
本次介绍的论文是:<2023, IEEE TPAMI, CoIR: Compressive Implicit Radar>
文章DOI: 10.1109/TPAMI.2023.3301553。

关键词:雷达成像,稀疏傅里叶变换,隐逆向神经网络,压缩感知
在这里插入图片描述

1 引言

随着毫米波技术的发展,毫米波雷达作为一种新型的成像方法,备受关注。与传统成像设备如摄像机和激光雷达相比,毫米波雷达的最大优势在于可以穿透烟尘等严重的环境条件,从而获得高质量的图像。 但是,毫米波雷达也面临角分辨率低的问题。为了提高角分辨率,一种思路是增加天线阵列的口径大小,但这将带来天线耦合、功耗增加、读出带宽增大等问题。因此,如何在硬件资源有限的条件下,提高毫米波雷达的角分辨率,是该领域当前面临的关键技术挑战。

本文提出一种名为 CoIR 的新方法,可实现毫米波雷达的高精度稀疏成像。该方法的主要创新点包括:1)设计一种稀疏线性天线阵,大大减少所需接收天线数量;2)利用隐式神经网络作为先验,实现对压缩后数据的重构。
在这里插入图片描述

2 动机

毫米波成像系统可大致分为三类:

  • 大规模物理天线阵列:可实现实时成像,但成本高昂;

  • SAR技术:使用天线移动来合成大孔径,但成像速率低,系统复杂;

  • MIMO天线阵列:使用多输入多输出技术来合成大孔径,但需要大量的雷达芯片。

这些方法要么成本高,要么取得图像速度慢,难以应用于对成本和速度都有要求的应用中。

另一方面,稀疏雷达成像技术通过使用次Nyquist采样,可有效减少所需天线数量,降低系统成本。但是,直接对采样不足的雷达数据进行傅立叶逆变换,会产生严重的混叠假影。因此,需要开发新的方法来处理这种采样不足的数据。

本文提出的 CoIR 正是基于这样的背景:一方面利用稀疏天线阵列设计减少硬件量,另一方面用隐式神经网络进行重构,提高成像质量。

3 方法

CoIR 的整体流程如下图所示:

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-8v0GZcM9-1692113119524)(<>)]

CoIR 包含两个关键模块:

  1. 稀疏天线阵列设计

  2. 基于隐式神经网络的重构(ComDecoder)

3.1 稀疏天线阵列设计

天线阵列的点扩散函数(PSF)是评价天线阵列成像质量的重要指标,其主瓣半功率宽度表示成像角分辨率,旁瓣水平表示成像模糊和混叠。

本文采用两步设计流程设计稀疏线性天线阵列:1) 设计4元接收天线最小冗余阵列;2) 在满足最大孔径约束的前提下,通过网格搜索找到发射天线阵列位置,使得合成天线阵列PSF的旁瓣水平最小化。

设计结果如下图,与全密集阵列相比,该稀疏天线阵列使用天线数量减少了5.5倍,同时保持了相近的主瓣宽度和较低的旁瓣水平。

在这里插入图片描述

3.2 基于隐式神经网络的成像重构

针对采样不足的雷达数据,CoIR提出使用隐式神经网络进行场景反射系数分布的重构。网络结构如图1所示:

具体步骤是:

  1. 以随机噪声作为输入,通过卷积解码器网络ComDecoder生成复数值极坐标图像;

  2. 对该图像进行2D FFT,合成完整的雷达数据;

  3. 保留稀疏天线位置对应的行,得到仿真稀疏雷达数据;

  4. 计算仿真数据与实际采集数据的损失,并通过反向传播更新ComDecoder的参数。

重复以上过程,使仿真数据逼近实际数据,从而重构出场景的反射系数分布。

这种analysis by synthesis的思想,正是隐式神经网络具有先验偏置的体现,可生成视觉上更自然的重构结果。

4 实验和结果

作者在模拟数据和实测数据上评估了CoIR和多种比较方法的重构性能。

4.1 模拟数据结果

下图给出了一个模拟场景下不同方法的重构结果。

在这里插入图片描述

可以看出,CoIR重构结果最佳,成功还原了场景中的关键结构,同时有效抑压了混叠假象。

作者还测试了不同噪声水平下的重构质量,结果如下图所示。可以看出,在各指标下,CoIR都优于其他方法,尤其在低SNR条件下保持了较高的重构质量。

在这里插入图片描述

4.2 实测数据结果

作者还在实际毫米波雷达数据上验证了各方法的性能。结果表明,在室外和室内两种场景下,CoIR都能很好地重构出场景的主要结构,并有效抑制混叠假象,优于其他无监督方法。

在这里插入图片描述
在这里插入图片描述

综上结果可以看出,CoIR利用隐式神经网络的先验性,实现了对采样不足雷达数据的高质量重构,并 verified in 实验室内外多种场景,证明了方法的泛化性和鲁棒性。

5 不足和未来展望

CoIR也存在一些限制:

  1. 前向模型假设场景静态,无法建模运动目标。

  2. 重构时间较长,约数十秒,难以实现实时。

  3. 目前仅针对线阵,扩展到面阵仍有挑战。

未来的一些可能的改进方向包括:

  • 更好地利用先验知识进行网络初始化,加速重构;

  • 扩展动态场景的雷达成像模型;

  • 探索在面阵或其他成像模式中的应用。

6 总结

本文提出了CoIR方法,实现了毫米波雷达的高精度稀疏成像。主要贡献包括稀疏天线阵列设计和基于压缩感知与隐式神经网络的重构方法。实验结果证明,该方法可以在使用较少天线的条件下重构出高质量的雷达图像,为降低成本的同时提高毫米波雷达的成像能力提供了一种新思路。CoIR也为隐式神经网络在其他成像领域中的应用提供了范例。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/883991.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

〔011〕Stable Diffusion 之 解决绘制多人或面部很小的人物时面部崩坏问题 篇

✨ 目录 &#x1f388; 脸部崩坏&#x1f388; 下载脸部修复插件&#x1f388; 启用脸部修复插件&#x1f388; 插件生成效果&#x1f388; 插件功能详解 &#x1f388; 脸部崩坏 相信很多人在画图时候&#xff0c;特别是画 有多个人物 图片或者 人物在图片中很小 的时候&…

【编织时空二:探究顺序表与链表的数据之旅】

本章重点 链表 链表的结合实现 顺序表和链表的区别和联系 1.链表 顺序表的问题及思考 顺序表的优点&#xff1a; 顺序表中的元素在内存中是连续存储的&#xff0c;因此可以通过索引直接访问任意位置的元素。顺序表尾插尾删操作实现简单。 问题&#xff1a; 中间/头部的插入…

我的创作纪念日+【MySQL】- 08 影响MySQL性能的配置参数

我的创作纪念日【MySQL】- 08 影响MySQL性能的配置参数 写在前面我的创作纪念日 mysql 优化服务器设置1.创建MySQL配置文件2.InnoDB缓冲池&#xff08;Buffer Pool&#xff09;3.线程缓存4.表缓存5.InnoDB I/O配置&#xff08;事务日志&#xff09;6.InnoDB并发配置7.优化排序&…

《电路》基础知识入门学习笔记

文章目录&#xff1a; 一&#xff1a;电路模型和电路规律 1.电路概述 2.电路模型 3.基本电路物理量&#xff1a;电流、电压、电功率和能量 4.电流和电压的参考方向 5.电路元件—电阻 6. 电路元件—电压源和电流源 7.受控电源 8.基尔霍夫&#xff08;后面都要用这个方法…

G1的原理整理

有道云笔记 G1垃圾收集器是JDK7 update 4&#xff08;2011年7月7日&#xff09;引入的一款垃圾收集器&#xff0c;全称Garbage-First Garbage Collector&#xff0c;G1是一个分代的&#xff0c;增量的&#xff0c;并行与并发的标记-复制垃圾回收器。它的设计目标是为了适应现在…

一篇讲明白,配电柜如何精准监测

当今社会&#xff0c;电力作为现代生活和工业生产中不可或缺的重要能源&#xff0c;扮演着关键的角色。为了确保电力系统的可靠供应和高效运行&#xff0c;配电柜作为电力系统的核心组件之一&#xff0c;具有着重要的地位。 因此&#xff0c;配电柜监控系统在确保稳定的电力供应…

LC-链表的中间节点(双指针)

LC-链表的中间节点&#xff08;双指针&#xff09; 链接&#xff1a;https://leetcode.cn/problems/middle-of-the-linked-list/description/ 描述&#xff1a;给你单链表的头结点 head &#xff0c;请你找出并返回链表的中间结点。 如果有两个中间结点&#xff0c;则返回第二…

Nacos和GateWay路由转发NotFoundException: 503 SERVICE_UNAVAILABLE “Unable to find

问题再现&#xff1a; 2023-08-15 16:51:16,151 DEBUG [reactor-http-nio-2][CompositeLog.java:147] - [dc73b32c-1] Encoding [{timestampTue Aug 15 16:51:16 CST 2023, path/content/course/list, status503, errorService Unavai (truncated)...] 2023-08-15 16:51:16,17…

【广州华锐视点】VR警务教育实训系统模拟真实场景进行实践训练

随着科技的发展&#xff0c;虚拟现实技术在教育领域得到了广泛的应用。VR警务教育实训系统就是其中的一种应用&#xff0c;该系统由广州华锐互动开发&#xff0c;可以模拟真实的警务场景&#xff0c;让学生通过虚拟现实技术进行实践训练&#xff0c;提高学生的实践能力和技能水…

“超越传统的HTTP请求:深度解析Axios,打造前端开发的终极利器“

解锁前端开发的新境界 - 深入探索Axios&#xff0c;构建卓越的互联网应用 在当今数字化世界中&#xff0c;互联网应用的需求日益增长&#xff0c;而无论是大型企业还是初创公司&#xff0c;都需要一个强大而可靠的工具来处理与后端服务器之间的通信。这就是Axios的光辉时刻。作…

53.Linux day03 文件查看命令,vi/vim常用命令

今天进行了新的学习。 目录 1.cat a.查看单个文件的内容&#xff1a; b.查看多个文件的内容&#xff1a; c.将多个文件的内容连接并输出到一个新文件&#xff1a; d.显示带有行号的文件内容&#xff1a; 2.more 3.less 4.head 5.tail 6.命令模式 7.插入模式 8.图…

等保测评标准和规范有哪些?

等保测评标准和规范的出现&#xff0c;为我国信息安全等级保护制度的建立和健全提供了重要的保障。 作为信息安全领域的重要评估标准&#xff0c;等保测评旨在通过对信息系统、网络安全设备和安全产品等的安全性能、安全功能、安全管理、安全控制和安全审计等方面的要求进行检查…

【11】Redis学习笔记 (微软windows版本)【Redis】

注意:官redis方不支持windows版本 只支持linux 此笔记是依托微软开发windows版本学习 一、前言 Redis简介&#xff1a; Redis&#xff08;Remote Dictionary Server&#xff09;是一个开源的内存数据结构存储系统&#xff0c;它也被称为数据结构服务器。Redis以键值对&am…

代码随想录算法训练营第58天|动态规划part15|392.判断子序列、115.不同的子序列

代码随想录算法训练营第58天&#xff5c;动态规划part15&#xff5c;392.判断子序列、115.不同的子序列 392.判断子序列 392.判断子序列 思路&#xff1a; &#xff08;这道题也可以用双指针的思路来实现&#xff0c;时间复杂度也是O(n)&#xff09; 这道题应该算是编辑距…

OpenCV-Python中的图像处理-傅里叶变换

OpenCV-Python中的图像处理-傅里叶变换 傅里叶变换Numpy中的傅里叶变换Numpy中的傅里叶逆变换OpenCV中的傅里叶变换OpenCV中的傅里叶逆变换 DFT的性能优化不同滤波算子傅里叶变换对比 傅里叶变换 傅里叶变换经常被用来分析不同滤波器的频率特性。我们可以使用 2D 离散傅里叶变…

BGP+MPLS+VPN

实验要求及拓扑 一、实验思路 1.先中间R2-R4区域可通 2.在R2、R4上创建两个虚拟空间 3.将R2上的R2和R1、R6直连接口关联到对应虚拟空间、将R4上的R4和R5、R7直连接口关联到对应虚拟空间&#xff0c;然后再配置IP地址 4.R2和R4BGP建邻 5.R2和R4邻居间端建立一个VPNV4的关系&…

包管理工具 nvm npm nrm yarn cnpm npx pnpm详解

包管理工具 nvm npm yarn cnpm npx pnpm npm、cnpm、yarn、pnpm、npx、nvm的区别&#xff1a;https://blog.csdn.net/weixin_53791978/article/details/122533843 npm、cnpm、yarn、pnpm、npx、nvm的区别&#xff1a;https://blog.csdn.net/weixin_53791978/article/details/1…

SHELL 基础 SHELL注释 及 执行SHELL脚本的四种方法

SHELL 脚本编写规范 &#xff1a; 脚本开头 &#xff1a; # 脚本第一行 &#xff1a; #! /bin/bash 或 #!/bin/sh &#xff08; 脚本解释器 &#xff09; # 程序段开头需要加 版本版权信息 &#xff0c;例如 &#xff1a; # Date 创建日期 # Author : 作者 # …

【微服务】一文了解 Nacos

一文了解 Nacos Nacos 在阿里巴巴起源于 2008 2008 2008 年五彩石项目&#xff08;完成微服务拆分和业务中台建设&#xff09;&#xff0c;成长于十年双十一的洪峰考验&#xff0c;沉淀了简单易用、稳定可靠、性能卓越的核心竞争力。 随着云计算兴起&#xff0c; 2018 2018 20…

基于视觉的仪表检测/指针仪表自动识别读数——论文解读

中文论文题目&#xff1a;基于关键点检测的指针仪表读数识别算法研究与应用 英文论文题目&#xff1a; Research and Application of PointerMeter Reading Recognition AlgorithmBased on Key Point Detection 部分摘要&#xff1a; 本文在总结概括了关键点检测和传统指针仪表…