楼主

[视觉算法] 【分享帖】LSD-SLAM: Large-Scale Direct Monocular SLAM

[复制链接]
工程Jellyfish
2016-2-2 10:47:55 只看该作者

马上注册,玩转Robomaster!

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
SLAM(Simultaneous localization and mapping),我们要达到的目的就是估计机器人(传感器-比如相机)的位置轨迹,然后创建地图。locating和map两者互相依赖,密不可分。然而我们已知的信息一个是observation,即传感器收集到的信息(现在研究的多的一般是基于RGB-D相机的,比如微软Kinect,因为不仅能收集到深度和颜色信息,而且比以前laser scanner等轻巧便宜);还有一个就是我们施加给机器人的control commands.我们要解决的就是通过这两个已知,去估计位置和地图这样一个问题。表达成概率问题如下:


                               
登录/注册后可看帖子


Map形式的有好多种。最传统就是去重建一些landmark,用Extend Kalman滤波器(EKF)去估计landmarks以及机器人的位置,是第一个SLAM的有效的解决方案。其他的map representation比如occupancy grids也比较常见,是把要重建的环境表达成网格的形式,通过比如Bayes滤波器family中的某种可以计算每个小格被占用的概率,来还原地图。在S. Thrun. 的《Robotic mapping: A survey》中有详细的说明,如下表列举了一些主要的算法以及相关特性。这个在2002年就发表了,也算比较老了,但许多描述都是SLAM的重要基础。


                               
登录/注册后可看帖子


SLAM一个重要的首先要解决的问题是registration的问题,我的理解是把不同角度采集到的数据整合(alignment)到一个坐标系中。针对两组数据(比如两幅不同角度采集的画面),可以点对点的进行匹配,寻找他们之间的transformation从而进行数据alignment并进行对sensor的定位,一个重要的算法是ICP(Iterative closest point

                               
登录/注册后可看帖子

(Example: Aligning Two 3D Maps)

从registration的角度,很多研究有把SLAM的问题分成dense和feature-based两种(如下图),前者(右图)多是对密集的点云(point cloud)通过ICP来进行点对点alignment ,这种做法比较准确,把所有的数据都联合起来就可以得到地图与sensor的轨迹。但因为纯是点对点运算,可能会丢失一些画面中属于画面特征的重要信息。所以feature-based也被广为应用,我们提取出SIFT,SURF等图像特征,再对这些特征进行alignment,算法比如RANSAC,可以实现对特征的联合。但针对特征不明显的环境,比如深夜环境,特征的办法就没有dense的办法有效了。两种方法都可以实现对数据的registration,也有一些项目是结合两种方法的。



                               
登录/注册后可看帖子

(来源 http://vision.in.tum.de/research/vslam

除了registration,SLAM(主要是graph-based SLAM)还有一个重要的待解决问题是Loop Closure Detection(闭环检测?),它是检测新的观察到的环境来确定自己是不是到了一个曾经到过的地点, 以消除localization的不确定性。因为如果一直是通过对不同角度采集到的不同画面(不同帧)一步一步的进行联合来估计sensor的位置的话,这个定位误差会累积,多以loop closure意义重大,这里不展开了。

接下来我们需要对地图的整体构建进行optimization,这是关键一步。我们要解决将特征点re-project回3D空间时的误差最小化问题,这就是bundle adjustment(BA)问题,用到least square等算法,最小化误差。g2o便是一个解决SLAM或者BA中这个误差最小化问题的框架,原话是:an open-source C++ framework for optimizing graph-based nonlinear error functions。另外还有TORO,是通过梯度下降实现graph中constraint带来的误差从而达到优化的有效算法。

最终我们要的3D地图,有颜色,有表面,可能质地也可以展现出来。这是map representation的问题,相关的方法有Surfel,Volumetric Representation(代表KinectFusion),Mesh,等等...



跳转到指定楼层
沙发

[视觉算法] 【分享帖】LSD-SLAM: Large-Scale Direct Monocular SLAM

[复制链接]
工程Jellyfish
 楼主| 2016-2-2 10:49:02 只看该作者
吐个小槽。。。。。。。。pdf传不上来啊。 10M的文件就上传无力了。
板凳

[视觉算法] 【分享帖】LSD-SLAM: Large-Scale Direct Monocular SLAM

[复制链接]
前哨站012地下党
2016-2-2 22:02:20 只看该作者
Jellyfish 发表于 2016-2-2 10:49
吐个小槽。。。。。。。。pdf传不上来啊。 10M的文件就上传无力了。

嗯,上传网盘吧,然后发个链接,设个密码,照样能卖
地板

[视觉算法] 【分享帖】LSD-SLAM: Large-Scale Direct Monocular SLAM

[复制链接]
前哨站012地下党
2016-2-2 22:02:43 只看该作者
顺便把地板也抢了吧
5#

[视觉算法] 【分享帖】LSD-SLAM: Large-Scale Direct Monocular SLAM

[复制链接]
前哨站012地下党
2016-2-2 22:04:39 只看该作者
还有楼主你的帖子里的图片显示貌似也有些许的问题,不知道我的网络的原因。
6#

[视觉算法] 【分享帖】LSD-SLAM: Large-Scale Direct Monocular SLAM

[复制链接]
前哨站chencailee
2016-2-2 23:40:34 只看该作者
来涨涨见识。。。。
7#

[视觉算法] 【分享帖】LSD-SLAM: Large-Scale Direct Monocular SLAM

[复制链接]
梯队队员sdnjyxr
2017-10-25 14:51:41 只看该作者
楼主 你图片不显示啊 求原文
8#

[视觉算法] 【分享帖】LSD-SLAM: Large-Scale Direct Monocular SLAM

[复制链接]
禁止发言patebeng
2019-11-1 15:28:10 只看该作者
提示: 作者被禁止或删除 内容自动屏蔽
9#

[视觉算法] 【分享帖】LSD-SLAM: Large-Scale Direct Monocular SLAM

[复制链接]
正式队员gj944468183
2019-11-4 20:50:34 只看该作者
问一下,这个在Master里能应用在哪个方面?
10#

[视觉算法] 【分享帖】LSD-SLAM: Large-Scale Direct Monocular SLAM

[复制链接]
梯队队员墨雪流年K
2020-8-27 10:25:40 只看该作者
干货!顶一下!
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

触屏版 | 电脑版

Copyright © 2024 RoboMasters 版权所有 备案号 粤ICP备2022092332号

快速回复 返回顶部 返回列表