Recovering High Dynamic Range Radiance Maps from Photographs

关于自动曝光方面论文的阅读,Recovering High Dynamic Range Radiance Maps from Photographs,这篇论文主要针对vSLAM希望了解相应的曝光算法,由加大伯克利的Paul E. Debevec,Jitendra Malik完成。

上述篇论文被ICRA2017 中的Active Exposure Control for Robust Visual Odometry in HDR Environments 所引用,主要引用了其中的曝光模型(自己理解,专用名词未必正确)。仅作为阅读笔记以记录,如果能够对阅读者有所帮助,那再好不过。如有错误,也请各位大神多多指出并指点。

2.1

关键参数

曝光量exposure X, 幅照度 irradiance E, 曝光时间 exposure time delta t, 光密度optical density D

关于Z,是一个关于每个像素上原始曝光量X的非线性方程,后被称之为f。


算法的实现第一步也就是要恢复处这个f,这样就可以计算每个像素上的曝光量X,

可表述为反函数X = f ^(-1) ( Z ), f^(-1)为反函数而非-1次方,注意这里假设f为单调递增。

在求解f时,有一些前提假设

1、场景是静止的;2、处理速度足够快,可忽略光照变化;3、幅照度E对于每个像素都是一样的。

这样可以得到Zij = f(Ei Tj)  (1)

依然假设Z是单调且是可以求反,(1)可以写成

Ei Tj = f(^-1)(Zij);

两边同时求ln可得

ln[ f(^-1)(Zij) ] = ln(Ei) * (Tj) = ln(Ei) + ln(Tj);

将 f(^-1) 表示为g,就可得式(2):

g(Zij) = ln(Ei) + ln(Tj);

(2)式中,Z和T是已知的,E是未知的。

恢复g,只需要恢复出一副图像中所有像素亮度的g值。

最终问题归为一个最小化问题

上述最小化问题中分为两个部分,第一部分是为了该最小化问题求解出的解满足公式(2)。

第二部分是为了保证g函数是平滑的,在这里g''(z) = g(z-1) - 2g(z) + g(z+1), 加权系数λ,需要根据实际测量量中的噪声来选择。

因为在(3)中的最小化问题中是关于E,g的平方,所以这个最小化问题是较为简单的线性最小二乘问题。求解这个超定方程组,还需要使用SVD分解。


除此之外,还需要三个点来完成上述公式的实现。

1、g和E可以加上一个尺度因子α。论文中对此进行了描述,将E+α代替E,g+α代替g,公式3并不会发生变化。

2、在第二个多项式中添加权重函数w。

所以公式3就变成了:

3、在计算的过程中,并不需要遍历所有像素。论文中做了详细叙述,给定P副图像中的N个像素值,必须要求解N个ln(Ei)的值和(Zmax-Zmin)个g值,为了保证超定方程的求解,需要满足

N*(P-1) > (Zmax - Zmin);

而每个像素值的范围为0-255,所以,假设有P = 11,每个图像只需要有50个像素即可,即N = 50. 公式3所需要满足的方程个数为N × P + Zmax - Zmin,如果遍历所有像素,很显然方程数量太过庞大。论文中提到,可以在方差较小的图像区域进行采样,以便保证光照亮度在选择的区域内是不变的。作者在文中最后交代当时他是用人工来选取区域的,但也说这部分很容易能够实现自动选取。

2.2

从公式2中可得公式5:

这里将公式4中的权重系数重新使用,目的是让增加接近响应函数中的中间部分像素的权重。

结合多次曝光,有助于降低恢复E中包含的噪声。


2.3 How many images are necessary?

1. 恢复图像响应曲线。至少2张。

2. 恢复辐照图,给定响应曲线。这里没有确定的数量,是一个动态数,R/F ,R为要恢复的最大辐照亮度范围,F为图像工作范围。

内容上基本就是以上这么多,由于我的研究内容不设计彩色部分,所以后续彩色部分便不再描述。论文比较老,但是思想比较实用。提出了恢复响应曲线和辐照图的方法,这对于后续做AE有很大帮助。对于vSLAM而言,尤其是基于灰度不变假设的方案来说,论文中的思想同样十分有帮助。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,919评论 6 502
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,567评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 163,316评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,294评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,318评论 6 390
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,245评论 1 299
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,120评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,964评论 0 275
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,376评论 1 313
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,592评论 2 333
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,764评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,460评论 5 344
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,070评论 3 327
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,697评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,846评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,819评论 2 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,665评论 2 354

推荐阅读更多精彩内容