VOT2018结果总结

分类

  1. 单目标跟踪
  2. 短期跟踪:假定在跟踪失败后不能重新检测成功,而是要reset。
  • 短期实时跟踪,要求预测边界框的速度快于或等于视频帧率。
  1. 长期跟踪:在短期跟踪的基础上,执行re-detection。

给短期跟踪与长期跟踪提供的唯一信息是第一帧的边界框。

短期跟踪测试数据集
UAV123,OTB,VOT。
长期跟踪测试数据集
LTB35:UAVL20,Youtobe,AMP。

长期跟踪相关

与短期跟踪相比,长期跟踪关注度低很多。

  • 长期跟踪的视频至少长2分钟,20-25fps,最好长10分钟。
  • 相比短期跟踪,长期跟踪要处理目标长时间离开视野的情况。竞赛要求长期跟踪需要报告每一帧中目标位置和目标的出现置信度。
  • 长期跟踪器需要两个部分组成,短期部分检测部分来检测目标重新出现的状况。此外,需要短期组件和检测器之间的交互机制,其适当地更新视觉模型并在目标跟踪和检测之间切换。其中TLD就是一个开创性的工作,启发了后续的长期跟踪工作。

短期挑战跟踪结果

  • 有4个tracker基于CNN匹配,一个基于循环神经网络,14个应用孪生网络(SiamFC,SiamRPN),34个基于相关滤波(C-COT,ECO)。
  • 62%的tracker用到了CNN特征。
  • 冠军是LADCF,运行在CPU上。papercode
针对视觉特性:
  • 总体最佳表现者仍然处于每个属性排名的顶部,但是没有一个跟踪器在每个属性方面始终优于所有其他跟踪器。
  • 影响跟踪最大的视觉特征是:遮挡、光照改变和运动改变。

短时实时挑战跟踪结果

  • Top 10 中的八个都是孪生结构SiamFC的扩展。这些跟踪器使用预训练的CNN特征,最大化相关定位精度,需要GPU。
  • 两个使用相关滤波的tracker在CPU上运行。
  • SiamRPN是冠军,精度高,速度快。papercode

长期跟踪挑战结果(VOT2018新添加挑战)

  • 排名第一的是MobileNet-based tracking by detection algorithm (MBMD) 。定期更新短期部分,不更新长期部分。应用了边框回归网络和基于MobileNet的验证网络。回归网络在给定第一帧目标的搜索区域内对目标对象的边界框进行回归。包回归网络使用SSD-MobileNet架构[35,52],其参数在在线跟踪期间是固定的。
  • MBMD,papercode
  • DaSiamRPN是SiamRPN(短期跟踪)的扩展,SiamRPN在短期跟踪效果很好,但是目标再出现时他无法追回。短期跟长期部分都不更新。

个人理解,短期部分指的是提取特征+检测、跟踪+给出回归框。

针对视觉特性:
  • 最具挑战性的属性是快速运动,视野外,宽高比变化和完全遮挡。
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 217,657评论 6 505
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,889评论 3 394
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,057评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,509评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,562评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,443评论 1 302
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,251评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,129评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,561评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,779评论 3 335
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,902评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,621评论 5 345
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,220评论 3 328
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,838评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,971评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,025评论 2 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,843评论 2 354