从定性遥感到定量遥感——大数据时代的空间数据科学

笔者最近一周之内连续听了四场关于定量遥感前沿进展的讲座(内容遍布目前定量遥感的诸多热点领域)。
这四场讲座分别从定量遥感信息技术整体的前沿进展、气溶胶(民众最关心的PM2.5)定量遥感、植被生态环境定量遥感(高光谱遥感、多光谱遥感)到最后一个雷达遥感(SAR)。可以说十分丰富,信息量也非常大。所以听完之后,有些想法和思考来谈一谈关于从定性遥感到定量遥感的发展以及必然。
首先会有很多人会疑惑什么是定量遥感?和普通的遥感有啥区别?那么我想还是先从遥感的起源和定义说起。遥感,也就是Remote Sensing。最早是由这位美国海军的老太太提出的,具体的故事看下图介绍。

从广义来说,遥感就是以非直接接触形式探测物体的一种方法,最广泛的一种方式就是以电磁波来进行探测。物体之间的差异,造成了对不同波长的电磁波反射特性不尽相同,通过这个特点,通过传感器接收物体反射回来的电磁波信息,就是典型的遥感探测,当然我们也可以称之为被动遥感。而通过传感器主动发射电磁波并接收物体反射回来的电磁波,同样是遥感探测,也可以称之为主动遥感(有点像海豚的超声波定位原理)。被动遥感的典型案例包括目前多数光学卫星遥感,主动遥感则是近年来兴起的微波遥感、激光雷达遥感等。当然从广义角度来说,无人机航拍这类也可以算是遥感的一类,但是从狭义来说,我认为它还算不上遥感。而遥感的狭义定义就是定量遥感的基础,遥感的狭义定义应当是指通过接收记录物体反射电磁波特性来探测物体性质的方法。所以狭义的遥感的关键是物体反射的电磁波特性。嗯,敲黑板、划重点。三个字:电磁波!电磁波!电磁波!重要事情说三遍。
遥感的价值就在于遥感探测得到的电磁波信息,那么电磁波信息能带给我们什么呢?
初中老师(也有可能是高中老师吧)曾经曰过:“太阳光是白光(其实它五颜六色),物体在人的视觉里呈现不同颜色,就是因为它吸收了部分光,反射了部分光,这一部分信息被人的视觉所接收并生成图像。”事实上,卫星遥感同样是这个道理,卫星遥感大部分接受的电磁波信息就是地物反射的太阳光波谱信息,所以,不了解遥感的人总觉得它就是在给地球拍照。


图片来源:ArcGIS Earth

其实准确说来也没错。人类视觉接收到的也是地物反射的太阳光波谱信息,相机和卫星接收到的也是如此,只不过人类视觉接收的信息可能以某种生物信息或者信号方式记录存在,而相机(RGB值)和卫星则均使用数字来记录。所以我们会觉得卫星遥感影像有时候很直观,看着跟眼睛看到的真实事物或者拍出来的照片一样,三者者事实上也是一样的道理(盗用知乎的一句话:传感器接受到外界光子,要么形成电压信号,要么形成电流信号,然后转换成我们所熟悉的pixel,尽管三者有些许差别,总的来说核心的问题并没有太大差异,文末贴链接)。
一个很核心的问题在于,人类视觉可以接受的波谱信息有限制,也就是我们说的可见光部分。但是卫星遥感数据接收的范围则远比这广得多——微波(合成孔径雷达)、热红外等。
但是无论是可见光部分或者非可见光部分,卫星所接收的都是用来描述电磁波的信息,而电磁波的信息又是反映物体的物理特性的(前面提到过,物体间的差异导致的反射波谱不同)。所以遥感技术应用的核心就是将电磁波信息转化为对人类有用的Knowlegde。那么如何转化呢?熟悉遥感的同学会知道目视解译这个词。也就是说看图识物。就像前面提到的,由于遥感成像原理与人眼成像原理类似,我们可以把它当地球拍的一系列照片,通过看着一系列照片,我们可以做监测(就像警察叔叔看监控找犯人一样),监测地球发生的变化,也可以监测某种地物的变化(从监控视频中找出犯人)。就像下面的图片。


图片来源:Google Earth Engine

然而一切的发明都是从偷懒开始的,一定会开始想方设法降低自己看照片的工作量。这就出现了计算机上面的一大分支——图像识别与图像分类。正如我上文提到的,卫星遥感的原理跟相机成像原理最核心部分是类似的。那么也就是说卫星遥感影像某种程度上也可以看成是特殊的“图片”。
嗯,讲了很久。貌似都是遥感的基础概念。
接下来!!!敲黑板,再次划重点。
什么是定性遥感?什么是定量遥感?
定性遥感就是类似于看图识物,通过将遥感影像当做特殊的“图片”,通过诸如计算机的图像识别、分类的方法去进行分析和处理得到我们所需要的Knowledge。比如简单的土地利用分类、面向对象的分割与分类或者监测变化等,仅仅是定性的划分。


GLC30 m土地覆被

而定量遥感,我就套用一下李传荣老师讲座时的定义:向社会和公众提供有用信息的技术。要精准描述构成地物状态特征的物理化学要素,以及导致地物目标变化的物理化学动力驱动机制。
事实上,它的核心就是第一个重点,遥感目前的根本在于电磁波。那么电磁波这么一个物理现象,要做的不仅仅是将电磁波谱映射成普通图像去做解译、分类。既然我们通过卫星接收到了很多人类无法肉眼观测到的电磁波信息,那么我们就希望通过建立具有物理意义的方程以及模型,将电磁波信息转化为对人类更有用的Knowledge。这就是定量遥感所要做的事情。
而定量遥感的典型分析方法就是耳熟能详的遥感定量反演。为什么叫反演?其实就是我想知道B的具体值,但是我无法直接观测B的具体值,但是我能观测到A的具体值,而A和B相互之间的关系,可以通过物理学意义的模型或者是其他模型进行表达,那么我就同过A的值去反推出B的值,这就是反演。相信大家就会很清楚,在定量遥感里,A就是传感器接受的波谱信息,而B则可以有很多种东西。比如:
1.二氧化碳探测——温室气体

来源:GOSAT卫星反演结果。

https://data2.gosat.nies.go.jp/index_en.html

动图链接:https://pan.baidu.com/s/1hsNyTrY

去年我们国家在12月26日刚刚发射了TanSAT卫星,使得中国成为了第三个发射监测温室气体排放卫星的国家(前两个是美国和日本,分别是OCO-2卫星和GOSAT卫星),这件事对于我们的意义是什么呢?过去我们没有自己的碳卫星,发达国家在气候变化和谈上说中国排放多,我们难以反驳。现在我们有了自己的碳卫星,我们就有了谈判的手段。同时TanSAT卫星尽管有些方面不如前两个卫星,但是有些方面性能远超前两个卫星。
2.地表温度
地表温度反演,探究城市热环境的影响因素与空间格局分布。探究冷热岛效应成因分布。

MODIS的LST产品

3.气溶胶反演
气溶胶,可能如PM2.5,PM10这些更耳熟能详。但是要注意的就是气溶胶光学厚度≠PM2.5,它是介质消光系数在大气垂直方向上的积分(简单说它没有分离PM2.5、PM10等气溶胶物质)。所以不做垂直订正和湿度订正就拿来跟PM2.5建立关系的AOD都是耍流氓。


PM2.5分布图,来源:网络

MODIS气溶胶产品

4.生态环境定量遥感
植被动态变化与生态环境相关要素如叶面积指数、NDVI、光合有效辐射、NPP、GPP等。


VPM模型求算的GPP

除了以上四个,还有很多对应的定量遥感产品——水体叶绿素浓度产品、雪深产品等等。
那么定量遥感的核心就是如何通过卫星接收的数据和具有实际物理意义的模型去反演得到我们所需要的产品。而从模型来说,主要分为几类:经验模型、半经验模型、物理模型。
经验模型可以被认为是统计意义上的模型,即无视具体的物理过程,单纯靠统计方法建立的模型。
半经验模型一般是结合了部分的物理意义的统计模型。
物理模型则是严格按照电磁波谱和辐射传输特性经过推导的到的机理模型。
可以说物理模型才是定量遥感真正的核心,因为前面两个模型建立之后通常无法复制。物理模型其实有两大部分,即包括了辐射传输方程推导的模型以及几何光学模型(普及下,这就是布鞋院士李小文院士从事的研究)。
然而,定量遥感的研究已经有一段时间,却依旧处在一个不为人知的和无法广泛应用的时代。主要是由于地表的复杂性、定量遥感反演目前出现的病态反演问题、定量遥感产品缺乏验证和质量控制的多重因素影响。复杂性——地表非朗伯体特性、地形起伏等影响;
病态反演问题——参数求解过程大部分是求解参数大于方程数;
缺乏验证和质量控制——不确定性,缺乏统一标准等。
当然可以说现在这些问题开始有逐步的改善——毕竟一句话,问题都解决了,还要搞研究的人干什么。
但是可以肯定的是,目前计算机技术的发展、卫星载荷的发展、传感器的发展、多颗卫星共同监测、高光谱遥感、激光雷达、合成孔径雷达的普及的情况下,定量遥感的很多问题将会得到改善。
所以是时候从定性遥感走向定量遥感,因为这是必然。随着技术的发展和模型精度提高,遥感应用产品也将更加普及。毕竟现在是大数据时代,我们不断强调的是数据即服务和软件即服务,定量遥感作为地球观测的客观载体,将会迸发出更大的潜力。
很多人都会这么说,遥感数据是GIS里面的天生大数据,确实遥感数据满足了大数据的4V或者说5V的特征,但是它又跟计算机意义上的大数据有所不同。计算机上的大数据普遍的格式是什么呢?比较典型包括像文本、图片、视频,而甚至像LBS这样的经纬度数据。简而言之,它是高频数据,时间间隔非常短(诸如5min这样的时间间隔)。而遥感数据却不同,卫星的重访周期基本上很难达到5min,所以它非高频数据,那么从这个角度来说,很多大数据算法是否适用呢?同时它具有非常丰富的物理信息,所以就像老师们说的,我们更应该考虑的是这个不太一般的大数据如何去用,不是简单的拿来主义,用这些所谓的机器学习、深度学习去看图识物,可能更值得考虑的事如何将定量遥感的物理模型与大数据的数据挖掘、机器学习等手段相结合。
最后的最后,回到主题——大数据时代的空间数据科学。对于空间数据科学来说,这可能是个最好的时代。因为我们不缺数据,但是可能也是个最坏的时代,因为我们多的是黑箱的算法,更缺少的是内在机制的理论研究。
毕竟,科学家还是要有梦去追。

关于卫星遥感影像与相机成像原理差异知乎解答:

https://www.zhihu.com/question/29835925

后记——
从这四场讲座中,了解到很多前沿,对于定量遥感了解可能会更透彻。也了解到自己很多不足。一些简单的想法。就当是学习之后的呓语。
最后的最后,推荐两本定量遥感的书吧(京东和当当有满减活动,不用谢,叫我雷锋)。



最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,948评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,371评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,490评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,521评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,627评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,842评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,997评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,741评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,203评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,534评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,673评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,339评论 4 330
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,955评论 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,770评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,000评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,394评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,562评论 2 349

推荐阅读更多精彩内容