基于张量补全的交通数据复原文献汇总(最新)

news2024/12/23 13:26:46

        由于传感器故障和通信故障等因素导致的交通数据缺失严重制约了ITS的发展与应用。如何准确、高效地恢复缺失数据已成为ITS的一个关键问题。近年来,LRTC(低秩张量补全)的方法已被广泛应用于交通数据补全。本文将介绍几篇最新的关于交通数据补全的文献。欢迎批评指正!

1、LRSSRTC(2022)

文献:A Novel Spatiotemporal Data Low-Rank Imputation Approach for Traffic Sensor Network

期刊:IEEE Internet of Things Journal

作者:Xiaobo Chen, Shurong Liang, Zhihao Zhang, Feng Zhao

摘要:物联网 (IoT) 具有通过改善乘客体验、安全性和效率来改变运输业的巨大潜力。然而,交通传感器网络收集的时空数据经常受到缺失值(MV)的影响,这会影响系统的整体性能。因此,MV的准确回收对于物联网在运输中的成功应用至关重要。在本文中,我们通过将低秩张量完成(LRTC)和稀疏自表示集成到一个统一的框架中,提出了一种新的MVs插补模型。这样,可以很好地利用全局多维相关性以及样本自相似性进行插补。为了求解所提出的模型,该文遵循乘子交替方向法(ADMMs)原理,提出了一种复杂的求解算法。重要的是,通过分析问题结构,可以有效地实施ADMM中的每个步骤。此外,为了为模型选择合适的参数,该文提出一种基于对偶谐波生成策略的改进和谐搜索启发式算法,充分考虑当前和谐记忆中包含的信息。对两个真实世界的交通数据进行了实验,以评估所提出的方法。结果表明,与经典矩阵/张量补全算法和其他竞争算法相比,该方法显著提高了插补性能。  

主要思想:使用加权SNN建模全局低秩结构,使用稀疏自表示来建模局部特性(周期性)。

 

 

 

2、TBTC(2023)

文献:Transforms-based Bayesian Tensor Completion Method for Network Traffic Measurement Data Recovery

期刊:IEEE Transactions on Network Science and Engineering

作者:Zecan Yang, Laurence T. Yang, Lingzhi Yi, Xianjun Deng, Chenlu Zhu, Yiheng Ruan

摘要:网络流量测量被视为下一代网络系统的基石。其目的是监控网络流量并为流量工程提供数据支持。因此,从全网角度监控流量数据尤为重要。然而,网络业务的激增导致了网络流量的爆发式增长,这给全网流量的衡量带来了重大挑战。因此,如何从部分流量数据推断全网流量极为重要。该文提出一种基于变换的贝叶斯张量补全(TBTC)方法来推断网络流量数据。首先,将缺少条目的异构网络流量数据根据时间维度和其他属性组织成观测张量;其次,利用稀疏层次先验诱导因子张量的侧切片稀疏性,使得观测张量的输卵管秩可以估计;进一步,提出了一种用于模型学习的变分贝叶斯推理方法,并提出了一种高效的更新方法。最后,在实验中实现了基于线性变换的张量完成模型的两种算例。在两个真实网络流量数据集上的实验结果验证了所提方法能够高效、准确地恢复网络流量数据。

主要思想:基于贝叶斯理论,将缺失张量表示为两个因子张量的余弦变换积/任意可逆线性变换的张量-张量积,然后用TNN进行优化求解。

 

 余弦变换积:

任意可逆线性变换的张量-张量积

 

3、ManiRTD (2023)

文献:Manifold Regularized Tucker Decomposition Approach for Spatiotemporal Traffic Data Imputation

来源:arXiv:2305.06563v2 [stat.ML] 16 May 2023

作者:Wenwu Gong, Zhejun Huang, Lili Yang

摘要:时空交通数据插补(STDI)是从部分观测到的交通数据中估计缺失的数据,是数据驱动的智能交通系统(ITS)中不可避免的挑战。由于交通数据的多维和时空属性,我们将缺失的数据插补视为张量补全问题。在过去的十年中,许多研究都是基于张量分解的STDI。然而,如何利用时空相关性和核心张量稀疏性来提高插补性能仍有待解决。本文重塑了3阶/4阶汉克尔张量,并提出了一种创新的流形正则化塔克分解(ManiRTD)STDI模型。明确地说,我们通过引入多路延迟嵌入变换将感觉交通状态数据表示为第 3/4 张量。然后,ManiRTD使用稀疏正则化项改进了Tucker核的稀疏性,并采用因子矩阵的流形正则化和时间约束项来表征时空相关性。最后,在交替近端梯度更新规则下,通过块坐标下降框架对ManiRTD模型进行了表征。在真实世界的时空交通数据集(STD)上进行数值实验。我们的结果表明,所提出的模型优于其他因子分解方法,并且在各种缺失的情景下更精确地重建了STD。

主要思想:使用多路延迟嵌入变换重塑矩阵,形成四阶Hankel张量;利用Tucker分解挖掘长期全局性趋势,通过流形正则化和托普利兹正则化捕捉短期局部性趋势。

 

4、LETC(2023) 

文献:Correlating sparse sensing for large-scale traffic speed estimation: A Laplacian-enhanced low-rank tensor kriging approach

期刊:Transportation Research Part C: Emerging Technologies

作者:Tong Nie, Guoyang Qin, Yunpeng Wang, Jian Sun

摘要:交通速度是表征路网流动性的核心。许多交通应用都依赖于它,如实时导航、动态路径规划、拥堵管理等。传感和通信技术的快速发展使得交通速度检测变得比以往更加容易。然而,由于静态传感器的稀疏部署或移动传感器的低穿透率,检测到的速度是不完整的,并且远离全网使用。此外,由于各种原因,传感器容易出现错误或缺失的数据,这些传感器的速度会变得非常嘈杂。这些缺点要求有效的技术从不完整的数据中恢复可信的估计。在这项工作中,我们首先将该问题识别为时空克里金问题,并提出了一个拉普拉斯增强的低秩张量补全( LETC )框架,该框架同时具有低秩性和多维相关性,用于有限观测下的大规模交通速度克里金。具体来说,三种类型的速度相关性包括时间连续性、时间周期性和空间邻近性被仔细选择并同时用三种不同形式的图拉普拉斯进行建模,即时间图傅里叶变换、广义时间一致性正则化和扩散图正则化。然后,我们通过几种有效的数值技术设计了一个有效的求解算法来将所提出的模型扩展到全网络克里金。通过在两个公开的百万级交通速度数据集上进行实验,我们最终得出结论并发现我们提出的LETC即使在低观测率下也能达到最先进的克里金性能,同时与基线方法相比节省了一半以上的计算时间。同时也为网络层面的时空交通数据建模和kriging提供了一些见解。 

主要思想:在TNN的基础上,引入TGFT(描述时间周期性)、DGR(描述空间邻近性)、 GTCR (描述时间连续性)正则化项。

 

 

 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/617335.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

python3 爬虫相关学习7:初步摸索使用 BeautifulSoup

1 一个爬图片pic的代码的例子 下面这段是爬一些图片pic的代码学写了一段bs的代码,但是马上报错 #E:\work\FangCloudV2\personal_space\2learn\python3\py0001.txtimport requests from bs4 import BeautifulSoupurl"https://movie.douban.com/celebrity/10115…

搭建个人博客

个人网站用处有很多,可以写博客来记录学习过程中的各种事,不管是新知识还是踩坑记录,写完就丢在网站上,方便日后复习,也可以共享给他人,让其他人避免踩雷。 当然也不仅限于技术性的文章,生活中有…

隐马尔可夫模型在数学建模中的应用及MATLAB实现

2023年9月数学建模国赛期间提供ABCDE题思路加Matlab代码,专栏链接(赛前一个月恢复源码199,欢迎大家订阅):http://t.csdn.cn/Um9Zd 目录 2023年9月数学建模国赛期间提供ABCDE题思路加Matlab代码,专栏链接(赛前一个月恢复源码199,欢迎大家订阅):http://t.csdn.cn/Um9Zd 隐马尔可…

(二)CSharp-数据类型

一、数据类型 1、C#程序是一组类型声明 C 程序是一组函数和数据类型C 程序是一组函数和类C# 程序是一组类型声明 2、类型是一种模板 类型由下面的元素定义: 名称用于保存数据成员的数据结构一些行为及约束条件 3、实例化类型 从某个类型模板创建实际的对象&am…

完败!资深码农 VS 新手+AI;阿里云AI黑客松千万奖金池;手把手教你用AI写小说;微软AI入门课 | ShowMeAI日报

👀日报&周刊合集 | 🎡生产力工具与行业应用大全 | 🧡 点赞关注评论拜托啦! 🤖 阿里云首届AI黑客马拉松,共享 1000 万美元风投资金池 阿里云官方宣布,将以国内最大AI模型社区「Model Scope 魔…

基于双视角图表示算法的双向人职匹配偏好建模推荐系统构建

基于双视角图表示算法的双向人职匹配偏好建模推荐系统构建 文章目录 基于双视角图表示算法的双向人职匹配偏好建模推荐系统构建1. 传统推荐系统模型2. 协同过滤算法3. 基于双视角图表示学习算法的模型构建3.1 数据输入3.2 双视角交互图的构建3.3 混合偏好传播策略3.4 对于双向意…

H5项目怎么打包成APP

文章目录 前言一、新建5APP项目二、删除不需要的文件三、将H5打包的文件拷贝到当前目录下四、配置APP五、发行-云打包六、安装apk总结 前言 开发uni-app的编辑器HBuilderX可以将H5项目打包成APP,相信很多小伙伴还不知道这个功能,下面将介绍下如何将H5打…

linux MMU内存管理单元

本篇文章简要阐述MMU的概念,以及以段地址的转换过程为例,简单说明MMU将虚拟地址转换成物理地址的过程。更多详细内容请查看《ARM-MMU(中文手册).pdf》。 1、MMU概述 在ARM存储系统中,使用MMU实现虚拟地址到实际物理地址的映射。为何要实现这…

人工智能学习07--pytorch21--目标检测:YOLO系列理论合集(YOLOv1~v3)

如果直接看yolov3论文的话,会发现有好多知识点没见过,所以跟着视频从头学一下。 学习up主霹雳吧啦Wz大佬的学习方法: 想学某个网络的代码时:到网上搜这个网络的讲解 → 对这个网络大概有了印象 → 读论文原文( 很多细…

Django实现接口自动化平台(五)httprunner(4.x)介绍【持续更新中】

上一章: Django实现接口自动化平台(四)解决跨域问题【持续更新中】_做测试的喵酱的博客-CSDN博客 下一章: 一、httpruner介绍 1.1 背景: 之所以学习httpruner的用法,是要把httpruner嵌入我们的自动化平…

全网最全、最新MyBatis框架核心知识

MyBatis框架 1. 软件开发常用结构 MyBatis是操作数据库的,相当于是一个增强的JDBC 1.1 三层架构 三层架构包括: 界面层(User Interface layer)业务逻辑层(Business Logic Layer)数据访问层(Dat…

Window搭建IOS App自动化测试环境

平台搭建:tidevice(Windows逆向通信iOS工具)WebDriverAgent(iOS通信服务)facebook-wda(iOS测试框架) macOSXcode:在手机上安装WebDriverAgent的时候需要用到,必须要Xcod…

HDFS概述及其优缺点

什么是HDFS? HDFS的全称是hadoop distributed file system,即hadoop的分布式文件系统。 见名知意,它就是用来进行文件存储的。毕竟它是大数据的一个组件,用来存储这种海量的数据。 它是基于03年10月份,谷歌发表的GFS…

Hadoop 怎么委任和解除节点?

前言 本文隶属于专栏《大数据技术体系》,该专栏为笔者原创,引用请注明来源,不足和错误之处请在评论区帮忙指出,谢谢! 本专栏目录结构和参考文献请见大数据技术体系 正文 Hadoop 集群的管理员经常需要向集群中添加节点…

Android Studio引用第三方库的方式

title: 大小端详解 date: 2023-06-06 21:01:24 comments: true #是否可评论 toc: true #是否显示文章目录 categories: #分类 - gradle - android studio tags: #标签 - gradle - android studio summary: android stduio 导入第三方库方式 Android Studio引用第三方库的方式 …

NCUTer 我的创作纪念日(2023-06-06)

前言 大家好,我是NCUTer,今天收到私信,突然发现,我来到CSDN已经2年多了,距离发布第一篇博客已经2年整了。正式规划性的写博客,是在2021年6月底开始的,当时啥也不懂,不知道该怎么去做…

10万字XX市开发区智慧综治中心平台建设一期工程招标文件word

(一)智慧综治中心信息化平台 需基于“一个平台,多级用户”的原则,利用移动互联网、物联网、大数据、人工智能和地理信息等新一代信息技术,整合辖区多方社会治理数据,建立一个覆盖全区三级综治中心用户的统一…

2个原因解答:为什么网络安全缺口大,招聘却很少?

2023年我国网络空间安全人才数量缺口超过了140万,就业人数却只有10多万,缺口高达了93%。这里就有人会问了: 1、网络安全行业为什么这么缺人? 2、明明人才那么稀缺,为什么招聘时招安全的人员却没有那么多呢?…

【博客639】Life of a label in prometheus

prometheus中label的生命周期 前言 Prometheus labels allow you to model your application deployment in the manner best suited to your organisation. As directly supporting every potential configurations would be impossible, we offer relabelling to give you t…

Paxos算法

组成 Paxos算法有proposer, accepter, leaner三种角色节点,其中proposer有点像客户端,而accepter是存储节点。 持久化需要 basic-Paxos是二阶段进行的 第一阶段 propose发起prepare请求,带上rnd accpeter如果发现rnd,比如自己…