MAN TruckScenes数据集:第一个用于自动驾驶卡车的大规模多模式数据集。

news2024/11/14 12:02:52

2024-07-15,为了推进自动驾驶卡车技术的发展并确保其在公共道路上的安全性,由慕尼黑工业大学和MAN Truck & Bus SE联合创建了MAN TruckScenes数据集。数据集首次为研究社区提供了一个包含丰富环境条件下的卡车特定挑战,如拖车遮挡、新型传感器视角和终点站环境的多模态数据集,具有里程碑式的意义。

一、研究背景

自动驾驶卡车运输是一项很有前途的技术,可以极大地影响现代物流和环境。确保其在公共道路上的安全是需要准确感知环境的主要职责之一。然而,自动驾驶卡车的安全可靠运行取决于对周围环境的准确感知。为了实现这一目标,现代自动驾驶汽车依靠机器学习算法来检测、跟踪和预测周围的物体。然而,机器学习方法的使用也推动了对大规模数据集的需求。

目前遇到困难和挑战:

1、自动驾驶卡车需要对周围环境有准确的感知能力,但目前缺乏专为卡车设计的大规模数据集。

2、重型车辆需要不同的传感器安装位置和多个传感器来覆盖整个周边区域,且必须应对由于车辆动态组合而产生的遮挡问题。

3、长途卡车通常在物流或集装箱码头等固有不同环境中运行,这要求数据集能够覆盖广泛的操作设计领域。

数据集地址:MAN TruckScenes Dataset|自动驾驶数据集|卡车研究数据集

二、让我们一起来看一下MAN TruckScenes数据集

MAN TruckScenes是一个专为自动驾驶卡车设计的多模态数据集,包含了740多个场景,每个场景长达20秒,覆盖了多种不同的环境条件。数据集通过在德国的公共道路和物流终点站进行超过25小时的测量驾驶来构建。

数据集特点:

1、传感器组包含4个摄像头、6个激光雷达、6个雷达传感器、2个惯性测量单元(IMU)和高精度全球导航卫星系统(GNSS)的多模态传感器套件。

2、手动标注了3D边界框,并经过仔细审查,以实现高质量标准。

3、标注了27个对象类别、15个属性,并提供了超过230米范围的数据。

4、场景根据34个不同的场景标签进行标记,所有对象都进行了全程跟踪。

此外,MAN TruckScenes 是第一个提供 360° 覆盖的 4D 雷达数据的数据集,因此是最大的带有 3D 注释框的雷达数据集。

基准测试:

提供了基于CenterPoint检测模型的基准3D对象检测结果,并鼓励在感知、跟踪和预测的所有领域进行研究。

公开可用的自动驾驶感知数据集的比较。覆盖率表示根据 计算的地理覆盖范围,范围是指所有边界框距离 的第 99.9 个百分位数。场景是时间一致的序列,样本是带注释的关键帧,遵循 nuScenes 表示法。Vehicle 是指记录车辆。

MAN TruckScenes 数据集的终端、雨雪场景的示例选择。顶行显示融合激光雷达点云,中间行显示左前摄像头的图像,底部显示融合雷达点云。

MAN TruckScenes 设置的传感器规格。

从俯视图角度放置传感器及其相应的坐标系。右侧传感器模块显示在详细图纸中,左侧模块相同但已镜像,雷达传感器绕 x 轴翻转。顶部安装的激光雷达传感器(侧面和正面)向下倾斜。GNSS 使用类似于车辆框架的虚拟坐标系,但位于底盘 IMU 旁边。

所有 747 个数据集场景的场景标签分布。

所有数据集拆分中所有 27 个对象类的带注释的 3D 边界框的数量。

MAN TruckScenes 数据集的测试拆分的基线结果。

三、让我们一起展望数据集的应用

比如,我是一名自动驾驶卡车的开发者。

假设现在是冬天的某个傍晚,太阳已经落山,天空中飘着雪花,路面开始结冰。自动驾驶卡车正在德国的一条主要高速公路上向南行驶,前往一个物流中心。这时,自动驾驶卡车需要处理各种挑战。

  1. 天气条件:首先,天已经黑了,而且正在下雪,这会影响摄像头的视觉效果,也会让激光雷达的信号反射变得不稳定。但是,不用担心,MAN TruckScenes数据集包含了夜间和雪天的驾驶场景,系统已经在类似的条件下进行了训练。

  2. 路面条件:随着雪花的积累,路面开始变得滑,这可能会影响车辆的操控。系统已经在数据集中模拟过这种路面条件,知道如何调整速度和刹车策略。

  3. 交通环境:自动驾驶卡车正在高速公路上行驶,交通比较密集。这时,一辆轿车在自动驾驶卡车右侧的车道上加速,试图超车,同时,自动驾驶卡车的左侧车道上有一辆大型货车正在并行行驶。MAN TruckScenes数据集包含了多辆车辆在同一场景下的交互,系统知道如何处理这种情况。

  4. 接近物流中心:当自动驾驶卡车接近物流中心时,需要从高速公路转换到更复杂的物流中心环境。MAN TruckScenes数据集包含了物流中心的详细场景,系统已经学会了如何识别和响应常见的物流中心特征,比如装卸区、仓库入口和叉车。

  5. 拖车操纵:在物流中心,自动驾驶卡车可能需要连接或断开拖车。MAN TruckScenes数据集提供了拖车操纵的场景,系统可以学习如何准确地操纵卡车与拖车连接的角度。

  6. 传感器挑战:在物流中心,可能会遇到大型金属集装箱,这些集装箱可能会干扰雷达信号。MAN TruckScenes数据集包含了这种多径效应的案例,系统已经学会了如何过滤这些干扰,保持准确的感知。

通过MAN TruckScenes数据集,自动驾驶卡车能够在这样的真实复杂场景中进行训练,确保它在面对现实生活中的挑战时能够做出正确的决策。这个数据集就像是自动驾驶卡车的“驾校”,让它们在各种天气和光照条件下,学会安全驾驶。

来吧,让我们走进:MAN TruckScenes Dataset|自动驾驶数据集|卡车研究数据集

找免费数据集网站:

遇见数据集-让每个数据集都被发现,让每一次遇见都有价值遇见数据集,国内领先的百万级数据集搜索引擎,实时追踪全球数据集市场,助力把握数字经济时代机遇。icon-default.png?t=O83Ahttps://www.selectdataset.com/

 

遇见数据集-让每个数据集都被发现,让每一次遇见都有价值遇见数据集,国内领先的百万级数据集搜索引擎,实时追踪全球数据集市场,助力把握数字经济时代机遇。icon-default.png?t=O83Ahttps://www.selectdataset.com/

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2236741.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

基于微信小程序的实习管理系统(附源码,文档)

博主介绍:✌程序员徐师兄、7年大厂程序员经历。全网粉丝12w、csdn博客专家、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java技术领域和毕业项目实战✌ 🍅文末获取源码联系🍅 👇🏻 精彩专栏推荐订阅👇…

mp3格式音频怎么做成二维码?扫码获取音频文件的制作方法

随着二维码的广泛使用,现在很多内容都会通过生成二维码的方式来传输内容,通过这种方式可以更快捷的实现内容分享,简化其他人获取内容的流程,有效提高效率。音频是目前常见的一种内容分享方式,比如录音、听力、音乐等类…

山东布谷科技:关于直播源码|语音源码|一对一直播源码提交App Store的流程及重构建议

自从YY、六间房开启国内聊天室和秀场等网红盛行的网络红利时代以来,紧随其后国内各大音视频平台相应出现,先有映客花椒等直播平台的风头正劲,后有功能板块更丰富的头条抖音Tiktok等,盈利功能点不仅仅有直播PK连麦等礼物打赏功能&a…

【NOIP普及组】统计单词数

【NOIP普及组】统计单词数 💐The Begin💐点点关注,收藏不迷路💐 一般的文本编辑器都有查找单词的功能,该功能可以快速定位特定单词在文章中的位置,有的还能统计出特定单词在文章中出现的次数。 现在&#x…

ArkTs语言常用数据类型和使用说明及示例(9种常用,7种非常用)

具体请前往:ArkTs语言基本数据类型及使用说明--包括9种常用变量类型和7种非常用类型

“双十一”电商狂欢进行时,在AI的加持下看网易云信IM、RTC如何助力商家!

作为一年一度的消费盛会,2024年“双十一”购物狂欢节早已拉开帷幕。蹲守直播间、在主播热情介绍中点开链接并加购,也已成为大多数人打开“双11”的重要方式。然而,在这火热的购物氛围背后,主播频频“翻车”、优质主播稀缺、客服响…

机器学习中的分类:决策树、随机森林及其应用

💗💗💗欢迎来到我的博客,你将找到有关如何使用技术解决问题的文章,也会找到某个技术的学习路线。无论你是何种职业,我都希望我的博客对你有所帮助。最后不要忘记订阅我的博客以获取最新文章,也欢…

ETL架构怎么选?全量、增量还是实时流式?

一、 ETL : 基本定义:ETL 是将业务系统的数据经过抽取(Extract)、清洗转换(Transform)之后加载(Load)到数据仓库的过程,目的是将企业中分散、零乱、标准不统一的数据整合…

特色3D打印机stm32迷你8轴双核心主板

我自己设计的3D打印机主板 1. 这是一块迷你的8轴主板, 主板尺寸为100mm*75mm, 使用一个8cm静音风扇散热足够了2. 这是一个带有保护的板子, 驱动上的gpio具有过压保护功能, 能够直接抗住24V的冲击, 意味着一个驱动炸了, 板子不烧, 并且其他的驱动也没事, 主板支持自动关机3. 8…

【2】GD32H7xx 串口Idle + DMA接收不定长数据

目录 1. IDLE中断相关介绍2. D-Cache与DMA同时使用2.1 I-Cache与D-Cache2.2 D-Cache与DMA同时使用时的数据一致性问题2.2.1 CPU读取DMA写入到SRAM的数据2.2.2 DMA读取CPU写入到SRAM的数据 3. Uart Idle DMA收发程序4. 程序测试 1. IDLE中断相关介绍 在 GD32H7xx MCU 中&#…

证书学习(六)TSA 时间戳服务器原理 + 7 个免费时间戳服务器地址

目录 一、简介1.1 什么是时间戳服务器1.2 名词扩展1.3 用时间戳标记顺序1.4 7 个免费TSA时间戳服务器地址(亲测可用)1.5 RFC 3161 标准二、时间戳原理2.1 时间戳服务工作流程2.2 验证工作流程2.3 举个例子2.4 时间戳原理总结三、代码实现3.1 curl 命令请求时间戳3.2 java 代码…

一步一步从asp.net core mvc中访问asp.net core WebApi

"从asp.net core mvc中访问asp.net core WebApi"看到这个标题是不是觉得很绕口啊,但的确就是要讲一讲这样的访问。前面我们介绍了微信小程序访问asp.net core webapi(感兴趣的童鞋可以看看前面的博文有关WEBAPI的搭建),这里我们重点不关心如何…

信捷 XD PLC C语言 FB和FC 不同

信捷 XD PLC 的C语言下 FB和FC 的使用,如果你有困惑,本文可能会帮到你! 调用FB要带后缀_Body的,这个地方很容易忽视和出错。 不同之处FBFC可以在全局变量表中建立此类型对象可以1个,也可以多个不可以参数类型及数量有…

「Mac畅玩鸿蒙与硬件28」UI互动应用篇5 - 滑动选择器实现

本篇将带你实现一个滑动选择器应用,用户可以通过滑动条选择不同的数值,并实时查看选定的值和提示。这是一个学习如何使用 Slider 组件、状态管理和动态文本更新的良好实践。 关键词 UI互动应用Slider 组件状态管理动态数值更新用户交互 一、功能说明 在…

共享汽车管理:SpringBoot框架的高效实现

摘要 随着信息技术在管理上越来越深入而广泛的应用,管理信息系统的实施在技术上已逐步成熟。本文介绍了共享汽车管理系统的开发全过程。通过分析共享汽车管理系统管理的不足,创建了一个计算机管理共享汽车管理系统的方案。文章介绍了共享汽车管理系统的系…

艾体宝产品丨加速开发!Redis Copilot智能助手上线

我们最近发布了 Redis Copilot,旨在帮助开发者更加高效地使用 Redis 构建应用。提升应用性能,简化构建过程是我们不懈的追求。Redis Copilot 正是为此而生的人工智能助手,助力开发者迅速掌握 Redis 的使用技巧。现在您可以在 Redis Insight 中…

阿里云centos7.9服务器磁盘挂载,切换服务路径

项目背景 1、项目使用的服务器为阿里云centos7.9,默认的磁盘为vda,文件系统挂载在这个磁盘上,项目上使用的文件夹为/home/hnst/uploadPath 2、vda使用率已达到91% 3、现购置一块新的磁盘为vdb,大小为2T 目的 切换服务所使用的…

Electron + Vue3 开发桌面应用+附源码

什么是 Electron? Electron 是一个使用 JavaScript、HTML 和 CSS 构建跨平台桌面应用程序的框架。它由 GitHub 开发并维护,允许开发者使用现代 Web 技术创建原生应用程序。Electron 结合了 Chromium 渲染引擎和 Node.js 运行时环境,使得开发…

【Leecode】Leecode刷题之路第44天之通配符匹配

题目出处 44-通配符匹配-题目出处 题目描述 个人解法 思路: todo代码示例:(Java) todo复杂度分析 todo官方解法 44-通配符匹配-官方解法 前言 本题与10. 正则表达式匹配非常类似,但相比较而言,本题稍…

单元/集成测试解决方案

在项目开发的前期针对软件单元/模块功能开展单元/集成测试,可以尽早地发现软件Bug,避免将Bug带入系统测试阶段,有效地降低HIL测试的测试周期,也能有效降低开发成本。单元/集成测试旨在证明被测软件实现其单元/架构设计规范、证明被…