Single Image Haze Removal Using Dark Channel Prior

Single Image Haze Removal Using Dark Channel Prior

Abstract

  • 主题:提出一种暗通道先验去雾算法,这是一种统计方法。
  • 原理:基于一种观测现象,即outdoor image的大部分局部图象包含一些像素,它们至少在一个颜色通道上具有很低的强度。
  • 作用:评估图象雾浓度,去雾恢复图象,同时获取高质量的深度图。

关于原理的解释

在绝大多数非天空的局部区域里,某一些像素总会有至少一个颜色通道具有很低的值。换言之,该区域光强度的最小值是个很小的数

Introduction

(第一段全译,阅读问题)

室外图像质量通常会被大气中的浑浊介质(如微粒、水颗粒)降低。雾霾、烟尘就是这样一种大气的吸收和散射现象。相机接受的场景的光辐射在它传播的直线上被这些介质减弱。而且,这些接收进来的光线混杂着空气光(airlight,气象名词,大气中的微粒反射周围的光线,对某个目标物质的光线造成干扰)。这种被退化的图象会损失对比度和图象保真度,如图1所示。由于散射的量度依赖于场景点到相机的距离,所以这种图象质量的退化在空间上是变化的(ps:也就是说,可通过这个变化的值得到图的深度)。

  1. 光学成像角度解释雾对图象的影响与联系。雾会通过反射或折射影响成像质量,且这种影响与空间距离有关。
  2. 去雾很重要。a)无雾的图象更优,去雾极大的提升图象可见性,修正色偏。b)目前的各层面的图像算法的性能都受限于场景光辐射的低对比度和偏差。c)去雾还可以提供场景深度信息。
  3. 目前去雾的难点。雾与图象场景未知的深度有关,故对单一的输入的含雾图象来说这个问题是欠约束的。因此,现有的方法都是基于多图象(多图不同极化程度方法)或附加信息的(已知输入图象的深度信息、3D模型)。
  4. 目前的单图去雾研究。都是基于某些限定假设的,存在局限性与漏洞。
  5. 本文的研究:提出一种新的先验方法,暗通道先验(dark channel prior),它基于这样一种统计现象:大多数非天空的图象场景中存在一些像素点(称之为暗像素),它们通常至少有一个色彩通道的强度非常低,含雾图象的暗点在这个色彩通道上的强度主要受环境光(airlight)影响,因此,这些暗像素可以直接提供雾霾传播的准确估计,结合雾的图象模型和soft matting interpolation(抠图算法),可以恢复高质量的去雾图象,同时产生对应的深度图。
  6. 当然,暗通道先验方法也存在局限性,如场景对象本身就和环境非常相似(如背景是雪地、白墙)的时候算法方法不再有效。但这种局限可忽略,因为这种情况下雾基本上看不见……

ps:整个逻辑:问题产生的原理-问题又不得不解决-解决的难点-现有的突破及它们的局限性-本文方法的突破及局限性。

整个论文关注点:雾影响与空间(景深)的关系、暗通道先验方法、soft matting interplotion、byproduct(深度图)。


Background

  • hazy image model
  • Tan's method and its shortage
  • Fattal's method Independent Component Analysis(ICA) and its defect
  • our method dark channel prior to estimate the transimission t(x)

这里之前提出的两种方式(Tan‘s method and ICA)并没有看懂……

Dark Channel Prior

  1. 暗通道先验方法基于一种观测现象:无雾的图象中非天空的图块上,至少有一个颜色通道,存在一些像素,它们的值很低近似于0.
  2. 暗通道定义及其公式表达。
  3. 实践过程:无雾风景图500*500,以patch(图块)大小为15*15绘制暗通道图,再同样的方式绘制有雾图的暗通道图。对比观察。
  4. 结论:暗通道值可以作为雾的浓度的一种粗糙估计(值越低雾越小)。

Haze Removal Using Dark Channel Prior

Transmission(rough t)

  1. 计算透射率t(x)

    根据暗通道的先验公式作为附加的约束方程,联立雾图模型方程,假设A为已知常量可计算得t。

  2. 天空部分的附加解释。t趋于0。

  3. 引入修正系数w模拟实际情况。

这里假设每一个patch内t(x)是常数,这样得出的t比较粗糙。

Soft Matting (refined t)

matting方式得到精细的t(x)值

数学推导没看懂……反正就是对图象I做一个拉普拉斯变化,然后通过一个方程,得到精化的t值。

Atmospheric Light (A)

暗通道中最亮的的1%的patches认为是雾最浓的块,回到原图,在这些patches中找到亮度最大的点就可以作为A。这适用于图中存在天空(具有景深无穷大的区域,透射率趋于0,模型退化成I=A)的图,同时也适用于没有天空的图。通过模型公式可解释。

Recovering

根据上文的A和t,通过原雾图模型推倒可得出去雾方程,为了防止t无穷小引起的问题,给t一个阈值0.1

Patch Size

窗口越大,暗通道图越暗,但是准确性越低(处理粒度变大)。但是窗口越小,饱和度越大,窗口越大,出现光晕。

Experimental

Discussion

暗通道先验方法的不足之处,失效的场景,后续改进的方向(基本上是模型问题,求A和t的方法问题)。

实验复现

  • 实验一:以500*500图的15*15块做有雾图和无雾图的暗通道对比。
  • 实验二:根据天空t近似0的理论想办法做天空部分优化,A的影响
  • 实验三:透射率图,transmission maps,Fig6.b ,这里需要做两个对比,用了soft matting和没有的情况下的粗糙的t map
  • 实验四:根据t 做出深度图
  • 实验五:完整的去雾实例。
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,544评论 6 501
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,430评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,764评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,193评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,216评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,182评论 1 299
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,063评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,917评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,329评论 1 310
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,543评论 2 332
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,722评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,425评论 5 343
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,019评论 3 326
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,671评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,825评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,729评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,614评论 2 353

推荐阅读更多精彩内容