图神经网络与深度学习在智能交通中的应用:综述

@[toc]
论文地址:https://arxiv.org/abs/2005.11691
https://arxiv.org/pdf/2005.11691.pdf
论文作者:Jiexia Ye, Juanjuan Zhao, Kejiang Ye, Chengzhong Xu (IEEE Fellow)
关键词:图神经网络(GNNs),图卷积神经网络(GCN),深度学习,智能交通;
备注:如该论文对读者有所帮助,希望在读者的工作中能引用该论文。

Abstract and Introduction

深度学习在计算机视觉和自然语言处理上的成功激发了学者将深度学习应用于交通领域的研究热情。传统上,很多工作将交通网络建模为网格或者分段,但很多交通网络本质上是图的结构,非图结构建模会导致某些有用的空间信息的丢失。最近,将深度学习扩展到图结构上的工作越来越多,这些技术被统称为图神经网络 graph neural networks (GNNs)。在这背景下,交通领域中,构建基于图视角的深度学习框架也越来越多。本论文旨在对这些框架进行总结,提供一个全面、深入、细致、实用性强的综述。

本论文的贡献如下:
(1)系统且扼要地描述了现有的traffic problems和相应的research directions, challenges。
(2)总结了针对时空预测类交通问题的一般性problem formulation,同时给出了从四种交通数据集(sensors datasets, GPS datasets, rail-hailing datasets, transaction datasets) 中构建图的具体指导。还进一步对图的关键元素-adjacency matrix的定义进行讨论。
(3)将已有的图深度学习框架分解,总结其中常见的深度学习技术,包括 GNNs (SGCN/GGCN), RNNs (RNN/GRU/LSTM), TCN, Seq2Seq, GAN, gated/attention/residual mechanism。分析这些技术的理论,优缺点,在交通场景中的具体变种和应用。
(4)具体阐述了交通场景中的共同挑战(时间依赖,空间依赖,时空联动,外部因素),并针对每种挑战,总结了多种基于深度学习的解决方案。
(5)收集了一些公开的数据集,还有公开的代码,提出了未来的研究方向

Related Work

在这部分里,作者介绍了10篇交通综述论文,其中大部分是深度学习综述论文;另外,还介绍了5篇图神经网络的综述论文。作者还指出,这些综述基本没有提到图神经网络在智能交通中的应用,因而作者的工作实属首次。

Problems, Research directions, Challenges

作者扼要介绍了交通领域中的五种交通问题,分别是交通堵塞,出行需求,交通安全,交通监管,自动驾驶,并介绍了每种交通问题下的研究方向。同时,作者也扼要阐述了每种研究方向的重要性和有关工作。


在这里插入图片描述

另外,作者提取了各种交通问题面临的共同挑战,并概要指出了其对应的深度学习技术。


在这里插入图片描述

Problems formulation and Graph construction

作者定义了论文中用到的数学符号,非常细致和系统,将变量分为时间变量,空间变量,时空变量,可以作为相关工作的符号定义的参考。

基于大部分调查的交通问题都属于时空问题,作者总结出一个一般性的问题建模框架,如下所示:


在这里插入图片描述

另外,作者针对四种数据集 (sensors datasets, GPS datasets, rail-hailing datasets, transaction datasets),细致地介绍如何针对这些数据集构建图,如何定义点,边,点的特征等。


在这里插入图片描述

在这里插入图片描述

最精彩的部分是作者总结了图的邻接矩阵的定义。在不同的交通应用中,针对不同的交通模式,可以定义各种邻接矩阵。假设交通网络拓扑结构是固定的,可设计固定的邻接矩阵;假设交通网络是动态的,可设计动态的邻接矩阵。另外假设网络结构是多样的,可设计多个邻接矩阵。

Deep Learning techniques perspective

在这里插入图片描述

(1)概要

作者将近三年(2018-2020)的基于图的深度学习框架进行分解,总结了五种经常出现的技术,分别是图神经网络GNNs,循环神经网络RNNs,时间卷积网络TCN,序列到序列模型seq2seq,生成对抗网络GAN,还有门机制/注意力机制/残差机制等。

作者深入地分析这些技术的核心公式,优缺点,还介绍了每种技术在交通中是如何应用的,列举了它们的变种公式,所解决的问题。
这部分的特色是深入和细致,配套公式多但清晰;不是泛泛而谈,停留在文字描述层面。相信读者能通过阅读这部分,更深刻地了解这些深度学习技术的原理,以及如何在具体任务中对它们进行重新设计。

(2)GNNs

针对最热点和最核心的图神经网络,作者主要介绍了它在交通领域最常见的两个分支,分别是SGCN, DGCN;作者对SGCN的关键工作进行梳理 ,分别是(1)Bruna/Shuman 2013 (2) Defferrard 2016 (3) Kipf 2016;


在这里插入图片描述

图(1):GNNs的一般框架


在这里插入图片描述

图(2):SGCN的公式
在这里插入图片描述

图(3):DGCN的公式

在这里插入图片描述

在这里插入图片描述

图(4)各种GNNs的变种

(3) RNNs

作者比较了三种常见的时间序列模型(RNN,LSTM,GRU)的优缺点,阐述了它们在交通中的应用。


在这里插入图片描述

图(1):RNN的框架


在这里插入图片描述

图(2):RNNs的变种

(4) TCN

TCN是一个新兴的处理时间序列的网络,作者对它的原理以及它在交通中的应用作出详细的介绍。

在这里插入图片描述

图(1)TCN的结构


在这里插入图片描述

图(2)TCN的公式


在这里插入图片描述

图(3)TCN的应用

(5) Seq2Seq

Seq2Seq能处理多步输出,作者介绍了Seq2Seq的无注意力和有注意力版本,并总结了交通工作中对encoder和decoder的设计。


在这里插入图片描述

图(1)Seq2Seq


在这里插入图片描述

(6) GAN

作者介绍了GAN在交通中的应用


在这里插入图片描述

Challenges and solutions

作者细致地介绍了交通领域所面临的一些共同挑战,以及针对这些挑战所提供的解决方案。作者主要总结了时间依赖性,空间依赖性,时空依赖性,外部因素四种挑战。
对于时间依赖性,作者细分为(1)Multi-timescale,(2)Different Weights;对空间依赖性,作者细分为 (1)Spatial Locality,(2) Multiple Relationships,(3) Global Connectivity 三种挑战。

Open datasets and codes

作者收集了一些公开的交通数据集和代码,以促进智能交通的研究。


在这里插入图片描述

Directions

作者总结了三个未来的研究方向,包括技术方面的,应用方面的,挑战方面的。

Conclusion

本论文在交通综述领域中,是一篇深入且细致的论文,实用性强。唯一的不足之处在于,只总结了基于图视角的有关工作,但这也是本论文的特色之处。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 217,406评论 6 503
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,732评论 3 393
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 163,711评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,380评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,432评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,301评论 1 301
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,145评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,008评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,443评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,649评论 3 334
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,795评论 1 347
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,501评论 5 345
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,119评论 3 328
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,731评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,865评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,899评论 2 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,724评论 2 354