SLAM论文速递:SLAM—— 流融合:基于光流的动态稠密RGB-D SLAM—4.25(2)

news2024/9/22 5:28:42

论文信息

题目:

FlowFusion:Dynamic Dense RGB-D SLAM Based on Optical Flow
流融合:基于光流的动态稠密RGB-D SLAM

论文地址:

https://arxiv.org/pdf/2003.05102.pdf

发表期刊:

 2020 IEEE International Conference on Robotics and Automation (ICRA)

标签

xxxx

摘要

动态环境下的运动目标遮挡了静态环境特征,导致错误的相机运动估计,是视觉SLAM的一大挑战。本文提出一种新的稠密RGB-D SLAM解决方案,同时完成动/静态分割、相机自运动估计以及静态背景重建。新颖之处是使用光流残差来突出RGB D点云中的动态语义,并为相机跟踪和背景重建提供更准确和高效的动态/静态分割。

内容简介

本文通过基于流的动/静态分割来解决动态SLAM问题,从而摆脱预先知道动态目标的假设。与已有方法不同,提出了一种新的基于光流残差的动态分割密集融合RGB-D SLAM方案。通过改进动态因子的影响,该方法能够有效地提取当前RGB-D帧中的动态片段,进而准确地重建出静态环境。此外,在具有挑战性的真实类人机器人SLAM场景上的演示表明,所提出的方法优于其他最新的动态SLAM解决方案在这里插入图片描述
所提方法的流程图如图1所示。该方法将两个RGB- d帧A和B作为输入,将RGB图像输入PWC以估计光流(黄色箭头)。同时,将A和B的强度和深度对输入到鲁棒相机自运动估计器,以估计初始相机运动x(在第III-A节中介绍)。然后,我们用x将帧A扭曲到A ',并获得投影的2D场景流(在第III-B节),以进行动态分割。经过多次迭代(Section III-C,绿色箭头),得到静态背景,用于后续的环境重建。由于该方法利用光流残差进行动态分割,因此称为流融合(flow fusion, FF)。

评价

该评价来自于CHATGPT4解读:
1)方法:
    该论文提出了一种新颖的密集RGB-D SLAM方法,可以同时实现动态/静态场景分割、相机自运动估计以及静态背景重建。该方法的创新之处在于使用光流残差突出RGB-D点云中的动态语义信息,从而为相机跟踪和背景重建提供更准确、高效的动态/静态分割。

2)创新点:
    使用光流残差进行动态/静态场景分割,提高了SLAM系统在动态环境下的性能。
    同时实现动态/静态场景分割、相机自运动估计以及静态背景重建。
通过改进动态因素影响,有效地在当前RGB-D帧中提取动态分割,准确地重建静态环境。
    在真实的挑战性人形机器人SLAM场景中,所提出的方法优于其他现有的动态SLAM解决方案。
    
3)精炼总结:
    本文提出了一种基于光流残差的密集RGB-D SLAM方法,可以在动态和静态环境下实现高效准确的性能。通过使用光流残差进行动态/静态场景分割,该方法在动态环境下具有较强的鲁棒性。

结合您的研究方向,可能的创新方向如下:

1、将深度学习技术(如卷积神经网络和循环神经网络)与光流残差相结合,进一步提高动态/静态场景分割的准确性和效率。
2、探索多传感器融合的方法,将激光雷达、摄像头和IMU等传感器的信息集成到所提出的SLAM方法中,以提高系统在动态环境下的性能。
3、研究在不同光照条件和遮挡情况下,如何提高基于光流残差的动态/静态场景分割方法的鲁棒性。
4、尝试将所提出的方法应用于不同类型的机器人,例如自动驾驶汽车、无人机和服务机器人,以评估其在各种应用场景中的适用性。

阅读总结

没看懂,光流这块不太懂

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/459067.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

【Spring Cloud】Spring Cloud 是什么?

文章目录 前言一、子项目二、常用组件三、把 Spring Cloud 官方、Netflix、Alibaba 三者整理成如下表格: 前言 Spring 以 Bean(对象) 为中心,提供 IOC、AOP 等功能。Spring Boot 以 Application(应用) 为中…

Python小姿势 - Python操作Excel表格数据

Python操作Excel表格数据 在日常工作中,我们经常会遇到一些需要对表格数据进行处理的情况,比如:数据清洗、数据分析、数据可视化等。对于这些任务,我们可以使用Python来进行操作。 在Python中操作Excel表格数据,我们可…

electron+vue3全家桶+vite项目搭建【13】封装加载进度显示,新建窗口 演示主进程与渲染进程通信

文章目录 引入实现效果演示:1.封装新建窗口工具2.测试新建窗口3.封装进度条加载4.测试进度条加载 引入 这里我们通过封装electron的工具类来演示electron中的主进程和渲染进程利用ipc进行通信 demo项目地址 electron官方文档ipc通信 实现效果演示: …

通过注册表设置远程桌面的配置

***************************修改远程终端端口号*************************** [HKEY_LOCAL_MACHINE\SYSTEM\ControlSet001\Control\Terminal Server\Wds\rdpwd\Tds\tcp] "PortNumber"dword:00000d3d [HKEY_LOCAL_MACHINE\SYSTEM\ControlSet001\Control\Terminal Ser…

代码优雅之道——如何干掉过多的if else

1、前言 注意标题是过多的,所以三四个就没必要干掉了。实际开发中我们经常遇到判断条件很多的情况,比如下图有20多种情况,不用想肯定是要优化代码的,需要思考的是如何去优化? 网上很多说用switch case啊,首…

算法刷题|198.打家劫舍、213.打家劫舍Ⅱ、337.打家劫舍Ⅲ

打家劫舍 题目:你是一个专业的小偷,计划偷窃沿街的房屋。每间房内都藏有一定的现金,影响你偷窃的唯一制约因素就是相邻的房屋装有相互连通的防盗系统,如果两间相邻的房屋在同一晚上被小偷闯入,系统会自动报警。 给定…

【社区图书馆】Fundamentals Of Computer Graphics——The beginning of computer graphics

目录 English 中文 English "Fundamentals Of Computer Graphics" is a classic textbook on computer graphics, also known as the "Tiger Book". It is considered one of the best introductory texts in the field of computer graphics. The book …

1分钟搭建自己的GPT网站

如果觉得官方免费的gpt(3.5)体验比较差,总是断开,或者不会fanqiang,那你可以自己搭建一个。但前提是你得有gpt apikey。年初注册的还有18美金的额度,4.1号后注册的就没有额度了。不过也可以自己充值。 有了…

【Redis】Redis事务

介绍 可以一次执行多个命令,本质是一组命令的集合。一个事务中的所有命令都会序列化, 按顺序地串行化执行而不会被其他命令插入一个队列中,一次性、顺序性、排他性的执行一系列命令没有隔离级别的概念,没有脏读、不可重复读等。 …

思维导图从入门到大神

思维导图怎么做?思维导图是一种发散性思维的图。在我们生活的方方面面都有运用。无论是工作、学习、还是生活,我们都可以用到它。那思维导图是怎么绘制的呢?其实非常简单,只要这简单的几步 1、首先在绘制思维导图前,我…

veImageX 演进之路:iOS 高性能图片加载 SDK

动手点关注 干货不迷路 1. SDK简介 图片在业务应用场景是一个常见的元素,veImageX(简称ImageX)为业务提供了灵活、高效的一站式图片处理解决方案,包括了服务端 SDK、上传 SDK 和客户端图片加载 SDK。本文就来介绍下 iOS 客户端图…

力扣 1493(删掉一个元素以后全为 1 的最长子数组)Java

目录 题目 约束 用例 解题思路 各位看官先看执行结果 这道题呢,采用的滑动窗口思想。 题目 给你一个二进制数组 nums ,你需要从中删掉一个元素。 请你在删掉元素的结果数组中,返回最长的且只包含 1 的非空子数组的长度。 如果不存在…

15天学习MySQL计划-索引(进阶篇)第七天

索引 1.索引概述 1.介绍 索引(index)是帮助MySQL高效获取数据的数据结构(有序)。在数据之外,数据库系统还维护着满足特定查找算法的数据结构,这些数据结构以某种方式引用(指向)数…

HTTP1.1(十二)Cookie的格式与约束

一 Cookie的格式与约束 ① Cookies是什么 1) cookie是我们在前端编程中经常使用的概念2) 使用cookie利用浏览器帮助我们保存客户的相关状态信息,保存用户已经做了什么事情3) 重点和难点[1]、cookie的工作原理[2]、cookie的限制是什么[3]、session又是怎样与cookie关联起来 …

【Android Framework (七) 】- ActivityManagerService(AMS)

文章目录 知识回顾启动第一个流程initZygote的流程system_serverServiceManagerBinderLauncher的启动 前言源码分析1.AMS的启动. ActivityManagerService.java2.setSystemProcess3.应用进程的初始化4.Activity的启动流程 拓展知识1.介绍一下Activity的启动流程。2.ActivityMana…

Handbook of MusicPsychology 音乐心理学手册 ( 多纳德·霍杰斯 Donald.A.Hodges) 笔记

由两个以上的音组成的结合音,除了该声波的波形,人耳会另外脑补出不存在的波形 频率相距较远的一些音与频率相距较近的一些音,前者累加的响度比后者要大 除了泛音部分,音的起声部分也是音色辨别的关键 音高、响度、音色、时值&a…

托福高频真词List07 // 附托福TPO阅读真题

目录 ​ 4月24日单词 生词 熟词 4月25日真题 4月24日单词 生词 🍡live in strictly aquatic habitat / əˈkwɑːtɪk / 🍡only live in aquatic environment 只生活在水生环境中 readilyquickly readilyeasily adv 迅速地 adv 轻易地 wide…

聚观早报|中国将是ChatGPT主要对手;​iPhone 15将使用USB-C接口

今日要闻:中国将是ChatGPT主要对手;iPhone 15将使用USB-C接口;31名ChatGPT训练派遣工遭解雇;大疆Mavic 3 Pro无人机高清图曝光;中国红牛回应被禁止生产销售 中国将是ChatGPT主要对手 微软总裁布拉德史密斯接受采访时表…

前端开发之vue动态路由实现方案

前端开发之vue动态路由实现方案 前言2. 实现1、登录页面创建登录函数和watch监听路由2、调用的login方法(1)登录方法(2)存储token 3、router.push的时候调用路由守卫(1)创建路由守卫,建议路由守…

MySQL Community Server 8.0.33安装教程【笔记】

仅安装MySQL Community Server 下载网址:https://dev.mysql.com/downloads/installer/ 1、下载对应版本; 2、下载后,双击安装,弹出界面选择【Custom】; 3、弹出界面选择【MySQL Server 8.0.33 - X64】; 3、弹出界面…