SLAM论文速递:SLAM—— 流融合:基于光流的动态稠密RGB-D SLAM—4.25(2)

news/2024/3/29 8:36:36/文章来源:https://blog.csdn.net/m0_61847109/article/details/130360510

论文信息

题目:

FlowFusion:Dynamic Dense RGB-D SLAM Based on Optical Flow
流融合:基于光流的动态稠密RGB-D SLAM

论文地址:

https://arxiv.org/pdf/2003.05102.pdf

发表期刊:

 2020 IEEE International Conference on Robotics and Automation (ICRA)

标签

xxxx

摘要

动态环境下的运动目标遮挡了静态环境特征,导致错误的相机运动估计,是视觉SLAM的一大挑战。本文提出一种新的稠密RGB-D SLAM解决方案,同时完成动/静态分割、相机自运动估计以及静态背景重建。新颖之处是使用光流残差来突出RGB D点云中的动态语义,并为相机跟踪和背景重建提供更准确和高效的动态/静态分割。

内容简介

本文通过基于流的动/静态分割来解决动态SLAM问题,从而摆脱预先知道动态目标的假设。与已有方法不同,提出了一种新的基于光流残差的动态分割密集融合RGB-D SLAM方案。通过改进动态因子的影响,该方法能够有效地提取当前RGB-D帧中的动态片段,进而准确地重建出静态环境。此外,在具有挑战性的真实类人机器人SLAM场景上的演示表明,所提出的方法优于其他最新的动态SLAM解决方案在这里插入图片描述
所提方法的流程图如图1所示。该方法将两个RGB- d帧A和B作为输入,将RGB图像输入PWC以估计光流(黄色箭头)。同时,将A和B的强度和深度对输入到鲁棒相机自运动估计器,以估计初始相机运动x(在第III-A节中介绍)。然后,我们用x将帧A扭曲到A ',并获得投影的2D场景流(在第III-B节),以进行动态分割。经过多次迭代(Section III-C,绿色箭头),得到静态背景,用于后续的环境重建。由于该方法利用光流残差进行动态分割,因此称为流融合(flow fusion, FF)。

评价

该评价来自于CHATGPT4解读:
1)方法:
    该论文提出了一种新颖的密集RGB-D SLAM方法,可以同时实现动态/静态场景分割、相机自运动估计以及静态背景重建。该方法的创新之处在于使用光流残差突出RGB-D点云中的动态语义信息,从而为相机跟踪和背景重建提供更准确、高效的动态/静态分割。

2)创新点:
    使用光流残差进行动态/静态场景分割,提高了SLAM系统在动态环境下的性能。
    同时实现动态/静态场景分割、相机自运动估计以及静态背景重建。
通过改进动态因素影响,有效地在当前RGB-D帧中提取动态分割,准确地重建静态环境。
    在真实的挑战性人形机器人SLAM场景中,所提出的方法优于其他现有的动态SLAM解决方案。
    
3)精炼总结:
    本文提出了一种基于光流残差的密集RGB-D SLAM方法,可以在动态和静态环境下实现高效准确的性能。通过使用光流残差进行动态/静态场景分割,该方法在动态环境下具有较强的鲁棒性。

结合您的研究方向,可能的创新方向如下:

1、将深度学习技术(如卷积神经网络和循环神经网络)与光流残差相结合,进一步提高动态/静态场景分割的准确性和效率。
2、探索多传感器融合的方法,将激光雷达、摄像头和IMU等传感器的信息集成到所提出的SLAM方法中,以提高系统在动态环境下的性能。
3、研究在不同光照条件和遮挡情况下,如何提高基于光流残差的动态/静态场景分割方法的鲁棒性。
4、尝试将所提出的方法应用于不同类型的机器人,例如自动驾驶汽车、无人机和服务机器人,以评估其在各种应用场景中的适用性。

阅读总结

没看懂,光流这块不太懂

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.luyixian.cn/news_show_103183.aspx

如若内容造成侵权/违法违规/事实不符,请联系dt猫网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

flex布局属性详解

Flex布局 flex-directionflex-wrapflex-flowjustify-contentalign-itemsalign-content其他orderflexalign-self 含义:Flex是Flexible Box的缩写,意为”弹性布局”,用来为盒状模型提供最大的灵活性。 flex-direction flex-direction属性决定主轴的方向&…

危险区域闯入识别系统 yolov8

危险区域闯入识别系统通过YOLOv8网络模型技术,危险区域闯入识别系统对现场画面中发现有人违规闯入禁区,系统立即抓拍告警同步回传后台。YOLOv8 提供了一个全新的 SOTA 模型,包括 P5 640 和 P6 1280 分辨率的目标检测网络和基于 YOLACT 的实例…

Model-Contrastive Federated Learning 论文解读(CVPR 2021)

Model-Contrastive Federated Learning 论文解读 对比学习SimCLR 对比学习的基本想法是同类相聚,异类相离 从不同的图像获得的表征应该相互远离,从相同的图像获得的表征应该彼此靠近 具体框架: T随机数据增强模块:随机裁剪然…

光波导相控阵技术

在简述电光效应和热光效应的基础上综述了国内外光波导相控阵技术研究进展,包括一维和二维光波导相控阵的技术途径、结构特点和性能指标,给出了光波导相控阵的优势以及在激光雷达、成像等领域的应用前景。结果表明,光波导相控阵技术正向着大扫…

JavaScript Debugger 调试断点模式

在代码中加入debugger,相当于断点停顿,可用于查看变量传递情况,比如:Vue组件中生命周期onLoad(options) ,在上一页面进入下一页面后,传递进来的参数值。 备注 :options 参数为字符串&#xff0…

从需求分析到上线发布,一步步带你开发收废品小程序

在如今的环保和可持续性的大趋势下,废品回收已经成为了人们日常生活中不可或缺的一部分。收废品小程序的开发可以帮助人们更方便地找到回收废品的地点,并有效减少废品对环境造成的污染。因此,我们的收废品小程序需要满足以下需求:…

2023年电信推出新套餐:月租19元=135G流量+长期套餐+无合约期!

在三大运营商推出的流量卡当中,电信可以说是性价比最高的一个,相对于其他两家运营商,完全符合我们低月租,大流量的要求,所以,今天小编介绍的还是电信流量卡。 在这里说一下,小编推荐的卡都是免…

中国制造再击败一家海外企业,彻底取得垄断地位

中国制造已在13个行业取得领先优势,凸显出中国制造的快速崛起,日前中国制造又在一个行业彻底击败海外同行,再次证明了中国制造的实力。 一、海外企业承认失败 提前LGD宣布它位于广州的8.5代液晶面板生产线停产,预计该项目将出售给…

Linux命令rsync增量同步目录下的文件

业务场景描述 最近遇到一个问题,需要编写相应的Linux命令,增量同步/var/mysql里的所有文件到另外一个目录/opt/mysql,但是里面相关的日志文件xx.log是不同步的,这个场景,可以使用rsync来实现 什么是rsync命令&#x…

6、什么是类型断言?

虽然 TypeScript 很强大,但有时还不如我们了解一个值的类型方便,这时候我们更希望 TypeScript 不要帮我们进行类型检查,而是交给我们自己来,所以就用到了类型断言。类型断言有点像是一种类型转换,它把某个值强行指定为…

当,Kotlin Flow与Channel相逢

前言 之前的文章已经分析了Flow的相关原理与简单使用,Flow之所以用起来香,Flow便捷的操作符功不可没,而想要熟练使用更复杂的操作符,那么需要厘清Flow和Channel的关系。 本篇文章构成: 1. Flow与Channel 对比 1.1 Fl…

论文实验1、安装tensorflow运行节点嵌入相关方法

还是官方的教程好使 使用 pip 安装 TensorFlow 只有三步 1.安装python,版本太高不行,在推荐版本里选最高的。 2.安装python虚拟环境venv python -m venv --system-site-packages .\venv .\venv\Scripts\activate 3.在虚拟环境里装tensorflow pip…

开发人员应考虑使用 Edge浏览器的 8 个理由

1.无限访问ChatGPT 这是正确的。您可以通过 Bing 访问 GPT-4。但与 2021 年后没有数据的 ChatGPT 不同,必应通过从自己的搜索引擎中提取最新数据来对其进行补偿。 首先,点击Edge 浏览器左上角的Bing 小图标 Bing 具有三个选项卡:Chat、Compo…

VSCode连接远程服务器调试代码详细流程

文章目录 1.远程连接服务器2. 打开项目文件目录3. 配置调试环境 在研究人工智能项目时,很多时候本地机器性能不够,只能把代码拉倒服务器上,然后利用服务器资源来运行代码。遇到问题时需要调试,本文详细介绍利用VScode来调试远程服…

DAB-Deformable-DETR代码学习记录之模型构建

DAB-DETR的作者在Deformable-DETR基础上,将DAB-DETR的思想融入到了Deformable-DETR中,取得了不错的成绩。今天博主通过源码来学习下DAB-Deformable-DETR模型。 首先我么看下Deformable的创新之处: Deformable-DETR创新 多尺度融合 首先便是…

layui 表格中嵌入下拉框被遮挡

1、代码 单元格样式: * 设置下拉框的高度与表格单元相同 */.layui-table-cell {width: 100%;height: 100%;border: 1px;border-color: #F2F2F2;} 表格初始化后的回调: done: function (res, curr, count) {$(".layui-table-body, .layui-tabl…

MC9S12G128开发板—实现按键发送CAN报文指示小车移动功能

实验环境:MC9S12G128开发板 基本功能:控制开发板上的按键,模拟车辆移动的上下左右四个方位,通过can通信告诉上位机界面,车辆轨迹的移动方位。 1. 1939报文发送的示例代码 MC9S12G128开发板1939协议发送can报文数据的…

php+vue 校友交流平台

1.普通用户功能分析 (1)用户注册:用于注册校友录用户。 (2)用户登录:供校友录用户登录。 (3)资料修改:修改当前登录使用者信息。 (4)…

“量子+生成式AI”!IBM联合生物制药公司Moderna进行疫苗研究

​ (图片来源:网络) 4月20日,以COVID-19疫苗而闻名的生物技术和制药公司Moderna Inc.表示,宣布正在与IBM公司合作,利用量子计算和生成式人AI探索推进研究mRNA技术的方法。 双方签署了一项协议,允…

【社区图书馆】Fundamentals Of Computer Graphics——The beginning of computer graphics

目录 English 中文 English "Fundamentals Of Computer Graphics" is a classic textbook on computer graphics, also known as the "Tiger Book". It is considered one of the best introductory texts in the field of computer graphics. The book …