协作SLAM论文赏析

协作SLAM通常是部署在多台机器人上的多个SLAM系统,它们各自实现自己的定位和建图,当地图区域出现重叠时进行地图融合,然后共同维护一个融合后的全局地图。协作SLAM使得SLAM系统能够分布式的部署在移动终端,比如微型飞行器(Micro Aerial Vehicles,MAV),并将大部分的计算量部署在地面设备上,使得低成本、低功耗设备的定位成为可能。

本文介绍协作SLAM领域的一篇论文,2013年发表的《Collaborative Monocular SLAM with Multiple Micro Aerial Vehicles》。文章作者提出一套完整的协作SLAM实时运行系统,系统分为MAVs和地面基站两个部分。每个MAV内置VO,可以实时计算相机位姿和特征点。地面基站负责为每个MAV维护一个单独的地图,并执行闭环检测,当检测到闭环时进行地图融合。系统如图1所示。

简单来说,协作SLAM就是多个SLAM系统共用一个地图。其中,单个SLAM系统的解决方案,与主流方案保持一致,基于特征点法的前端,基于局部地图的后端(类似于ORB-SLAM中的Covisibility Graph)加上基于视觉词袋的回环检测。

除此之外,我们主要关注该系统的创新点,或者说它主要解决的问题。

1. MAV与地面基站的通信

地面基站就是一台计算机,作者将运行于其上的算法称为CSfM(Collaborative Structure from Motion)。由图一可知,CSfM中为每一个MAV创建了对应的Frame Handler Thread,负责与MAV通信。MAV上部署了轻量级VO(视觉里程计),该VO实时地将关键帧的特征点和相对于上一关键帧的相对位姿发送给对应的Frame Handler Thread。注意,VO只发送关键帧的特征点相对位姿,而不是所有帧,因此降低了通信流量。

CSfM获取到相对位姿后,叠加到上一帧的位姿上,就得到了当前帧的位姿。计算公式为:

2.CSfM与VO的尺度漂移问题

所有的单目SLAM都或多或少有尺度漂移问题。尺度漂移是指随着SLAM系统的运行,真实场景在地图中的尺度发生变化,既可能变大也可能变小。特别是对于不含回环检测的VO,尺度漂移尤为严重。由于CSfM中有局部BA和回环检测,因此可以认为尺度漂移很小,不予考虑。但MAV上的VO,任意时刻只保留5个关键帧,尺度漂移非常严重。因此在CSfM接收到VO的数据后,需要采用一个尺度变换,以消除VO尺度漂移的影响。

设CSfM中某Frame Handler Thread与其对应的VO的尺度缩放因子为λk,修改式(1)为

即可。λk是需要随时更新的,这可以通过简单的计算得出,具体公式可以查看论文原文。

3.如何跨地图检测回环?

基于外观的回环检测方法已经很成熟了,所以作者用的也是视觉词袋。只不过,与每个MAV拥有单独的地图不同,整个系统只有唯一的视觉词袋。因此,无论哪个Frame Handler Thread执行闭环检测,用的都是同一个视觉词袋,检测到的回环就有可能是跨地图的。

4.检测到回环后,如何做地图融合?

检测到回环后立即估计当前帧与回环帧之间的位姿转移矩阵{R, t, s},其中s是两个地图之间的尺度缩放因子。由于两个单目SLAM系统开始时的定位和建图是互相独立的,所以它们的尺度肯定不一致,s可以通过计算任意一对同时出现在当前帧与回环帧的特征点的距离的比值来确定。

使用RANSAC P3P方法计算出当前帧和回环帧的位姿转移矩阵Rt,然后将其中一个地图和位姿按照该矩阵投影到另一个坐标系下,融合成一个地图。融合的时候,需要将相同的地图点合并成一个,以免产生冗余。

地图融合后,应当执行一次全局BA优化,以降低位姿和地图点的误差。但全局BA计算量太大,而且容易陷入局部极小值。因此作者采用两步优化策略,先执行一次全局位姿图优化(Pose-Graph Optimization),再执行全局BA。全局BA和位姿图优化以及两者的区别,请参考文末参考资料。

5.多线程并发访问融合后的地图

地图一旦融合,对应的多个Frame Handler Thread以后就要同时操作这同一个地图。因此多线程并发的效率和安全性成为需要考虑的重点。

如图四所示,CSfM中每个地图维护了一个KF-List,用来保存所有关键帧。每一个关键帧KF又维护了一个MP列表,可以访问到所有可观测的地图点。而每个地图点反过来也保存了所有能够观察到该地图点的关键帧。为了保证局部BA或全局优化不产生多线程冲突,对KF修改前需要获取该KF的锁,对MP修改前需要获取所有可观测到该MP的KFs的锁。也就是说,锁只加在KF上,而不加在MP上,因为MP远多于KF,对MP加锁会大大加重性能负担。

采用该方案使得并发的局部BA成为可能,在一定程度上保证了系统的实时性。

最后,作者通过几个室内和室外的实验验证了系统的可行性,精度与state-of-the-art的视觉SLAM系统相当。

图9中,地图融合前,两个地图分别在不同的位置,用红色和绿色点表示。检测到回环后,两个地图通过坐标变换融合到一起,成为一个地图。

这种分布式的协作SLAM方案对多机器人协作、飞行器协作提供了良好的技术支持。

参考资料

《SLAM后端优化》 金戈大王
《SLAM后端优化(续)》 金戈大王

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 205,033评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,725评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,473评论 0 338
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,846评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,848评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,691评论 1 282
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,053评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,700评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 42,856评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,676评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,787评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,430评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,034评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,990评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,218评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,174评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,526评论 2 343

推荐阅读更多精彩内容

  • 定位问题的引入 我们所熟知的机器人,可以大致分为以下四类: 1. 操作机器人: 模仿人的手和手臂的动作,特点...
    飞帅阅读 1,684评论 0 2
  • 姓名:16020140096刘珣玥 转载自:http://mp.weixin.qq.com/s/y1_vF6p0Z...
    刘珣玥阅读 2,787评论 0 5
  • 一、前言 视觉里程计与传统的里程计不同,不使用码盘等设备,只利用摄像头拍摄的连续图像帧就可以计算里程,非常方便,因...
    金戈大王阅读 8,943评论 0 11
  • 家离单位不算远,开车五六分钟,走路也不过十来分钟,过一个红绿灯拐个弯就到。 最近一段时间常步行去上班,...
    水稻人生阅读 291评论 0 0
  • 今天应该是国家队正式进场救市的第一天。因为前几天国家只是出台了利好,但没想到,空方力量过于强大,国家队只好自己出马...
    flyfrog阅读 679评论 0 1