【论文阅读】An Object SLAM Framework for Association, Mapping, and High-Level Tasks

news/2024/11/29 23:30:02/

一、系统概述

这篇文章是一个十分完整的物体级SLAM框架,偏重于建图及高层应用,在前端的部分使用了ORBSLAM作为基础框架,用于提供点云以及相机的位姿,需要注意的是,这篇文章使用的是相机,虽然用的是点云这个词,但其形容的实际上是三角化之后的ORB特征点。除此之外,论文使用YOLO作为目标检测的基础框架,提供目标的包围框以及语义类别。
在地图构建的部分,论文选择将物体添加到地图中形成物体地图,并且利用物体之间的相互关系,构建了基于物体的拓扑地图,在拓扑地图的基础上又构建出了后续物体抓取、增强现实等丰富的应用。
在这里插入图片描述

二、物体级的信息关联

信息关联,即data association,强调的是建立2d-3d或者2d-2d之间的联系,即观测到的物体之间的匹配关系,这一问题在一般的SLAM问题中主要是通过描述子匹配的方法来解决的,但是上升到物体之后,这一方法就不是那么好用了。
文章将物体分为了两类:
①局部物体 local object
在当前时刻当前视角下观测到的物体,物体在一开始提取时本身是一帧图像特征点三角化的结果,一帧图像中物体的包围框,对包围框内部的点进行三角化,作为这一物体一开始的点云,物体的中心用点云的均值来表示。
②全局物体 global object
连续几帧都可以对某一物体进行观测,则认为局部物体是确实存在于地图中的,此时物体就变为全局物体,此时物体中心利用多视角下增量构建的点云来计算。
在这里插入图片描述
对于这两类物体,论文使用了一系列的方法来对解决信息关联的问题,主要是利用了四个步骤来实现:

IoU模型

IoU模型针对的是连续几帧都可以观测到物体的情况,其方法简单来说就是对包围框进行投影,将前两帧的包围框投影到当前帧,计算包围框与当前帧包围框的交并比,如果重叠足够大则认为通过了IoU模型的检验。

NP检验模型

但是在实际运行代码的过程中,考虑到物体提取的不稳定性以及遮挡等不可抗拒因素,并不是所有物体都可以实现连续观测,因此对于任意两帧,我们采用NP检验模型进行检测。该检测主要是基于一个假设:如果两组点来自同一个物体,其特征点分布应该相同。论文使用了威尔克科森秩和检验来验证这一模型,用的是概率论里面假设检验的知识,如果假设检验认为属于同一物体,那么就可以建立物体之间的联系。

单采样和双采样T检验模型

为了更加准确的检验,论文在NP检验模型之后,又补充了单采样T检验,由于物体中心在不同视角下的观测,分布一般满足高斯分布,基于这一假设,作者通过曼-惠特尼U检验来验证这一假设,依然是使用假设检验的内容进行验证。
前面使用了三种方法进行检验,保证了准确率的同时,也让一些不稳定的匹配关系没能成功保留,所以论文在单采样T检验之后,又补充了一个双采样T检验,通过对历史中心点的检验,来判断观测结果是否属于同一个物体。

可以说论文作者在物体关联这一块,属实是把概率论整的很明白。首先通过投影包围框计算交并比来计算一个连续帧下的物体关联关系,之后用NP检验来扩展到非连续帧下的观测结果,同时用单采样T检验对物体中心也进行一次筛选,最后利用双采样T检验对误筛除的关联进行补充,后面三步其实都是根据假设检验来进行的检测。


http://www.ppmy.cn/news/168517.html

相关文章

诺基亚手机网络设置

手机网络设置接入点:帐号名称(cmwap): 接入点设置 :传输方式(分组数据) 传输方式设置 :分组数据接入点(cmwap) …

诺基亚系列介绍

1和2系列属于低端普及型,一般价格不高,功能相对来说也较少。比如蝴蝶机2300和去年推出的1100。 3系列属于展现自我型,是有独特的外观和特别的功能的款式,比如音乐功能强大的3300,当然还有我们性价比很高的3200。 5系列…

诺基亚700智能手机最小

诺基亚700智能手机最小 诺基亚最近推出的诺基亚700与320的HD AMOLED屏幕。这款手机是非常轻了80克的尺寸为110 X 5110毫米。此外,该手机还得到了25921944像素500万像素的分辨率,以及拥有LED闪光灯,支持自动对焦。此外,它具有NFC连…

LeGO-LOAM

LeGO-LOAM的参数在utility.h 由于20.04自带的是OpenCV4&#xff0c;所以要对LeGO-LOAM代码做一点改动&#xff1a; 找到utility.h中的&#xff1a;#include<opencv/cv.h>&#xff0c;修改为#include <opencv2/imgproc.hpp>或#include <opencv2/opencv.hpp>。…

诺基亚2700c游戏是JAVA_诺基亚2700c参数 诺基亚2700优缺点

手机的发展历程已经有十几年的时间了&#xff0c;在这十几年的时间里&#xff0c;手机不停的更新换代&#xff0c;从最初的按键直板手机&#xff0c;到现在的全触屏智能手机;手机的品牌也在这十几年的时间里不停的翻篇。诺基亚是前些年的手机行业巨头&#xff0c;那时诺基亚的手…

我的Nokia6070

基本参数  型号 6070  上市时间 2006  网络制式 GSM 900/1800/1900  手机类型 直板  主屏参数 彩屏,65536色,CSTN,128160像素  内存容量 16M&#xff1b;包括 3.2 MB 用户可用存储空间  系统 Series 40  标准配置 锂电池BL-5B 820mAh,AC-3旅行充电器,H…

用诺基亚6070

买手机了&#xff0c;12月9号买的&#xff0c;诺基亚6070。不知道这个型号关注的人多吗。用了几天我对它是很满意的。它是我的第一款手机&#xff0c;让我成为有机一族。有了手机的确方便多了。 我买的是水晶蓝的&#xff0c;挺漂亮的。看上去不容易掉漆。虽然体积小但还算大方…

药品说明书的翻译,英译中如何翻译效果好?

近年来&#xff0c;随意进口药品不断出现&#xff0c;药品说明书的翻译需求也在日益增加。那么&#xff0c;药品说明书英译中有何特点&#xff0c;如何做好药品说明书的翻译&#xff1f; 据了解&#xff0c;一份药品说明书里往往包含医学术语&#xff0c;如药品名称、药品成分、…