MICCAI2022:Y-Net: A Spatiospectral Dual-Encoder Network for Medical Image Segmentation

引言

大家晚上好,
我这次分享的是,
来自MICCAI2022的Ynet
选这一篇,主要是因为
它和普通的分割网络不同,
它拥有两个编码器分支

(翻页)

捕获.JPG

这篇文章的主要贡献是
他提出了 一种端到端自编码器的模型,
用于 视网膜层 和 流体层分割。
二是 作者提出的 频谱编码器
用于从图像中提取频域特征。
三是 Ynet的表现,不仅比 Unet好,而且
参数还比 Unet少

(翻页)

2.JPG

下面就来看一下 Ynet
首先从外形上来看,有两组编码器
其中的,这半边的空间的编码器
和底下的解码器
这样看的话,
就是一个完整的Unet

作者的改进是,
加入了FFC卷积块,
用来提取OCT图像中的光学信息

这个FFC块,并不是作者提出的,
而是来自 ICMLA 2020 的一篇文章

这篇文章提出了FFC块,
也就是快速傅里叶变换块,,
在密集的细胞,数据集上进行分割,
初衷是 证明了 FFC能提高普通卷积快的速度

这个是 FFC块
有两个输入,一个是 xl,
就是初始的输入的图像,,
一个是xg, 这个初始值为0
之后这两个向量
会通过这边的卷积块
在通过 Batch Norm层 生成 xl`

同时这两个向量
还会通过 一个卷积,一个频谱块
提取光学信息,
在通过 Batch Norm层 生成xgxl 和 xg`又,
同时作为下一个FFC块的输入

频谱快,它里面是有一个
可以调节的超参数 a
这个a就可以控制
a百分比考虑全局信息
1-a百分比考虑局部信息

最后的这个灰色的块
是 应用快速傅里叶变换
得到 频域特征
最后,将处理后的信息
通过 IFFT带回空间域

(翻页)

1.JPG

下面来看一下实验结果
第二列是 标签值
可以看到 Ynet在一些高亮区域上
标注会比 Unet要好

(翻页)

4.JPG

这里的RelayNet是2017年的一篇文章
是第一次做视网膜视层分割网络
采用的也是类Unet结构

Langeage是MICCAI2020的一篇文章,
主要的创新是,将分割问题重新表述为语言处理,
也就是,不再将图像分成小块,
而是将图像视为一组像素序列。。
然后用 循环神经网络(RNN)来,
进行 OCT图像的分割。

这些列,都是视网膜的几个层
可以看到,Ynet 在某些层的标注上
比如说,ILM和Fluid层
要比 Uent要好一点
平均也比 Uent好一点

(翻页)

5.JPG

这个就是对超参数 a 和
FFC块做了一些消融实验

第一行显示了Y-Net模型
在第二个分支中 使用正则卷积块的性能。
表格的其余部分显示了作者的模型,
在不同α值下的表现。
从这个表中,可以看到
最佳性能α值分别为0.25和0.5,
两个模型在流体分割中均达到0.93的Dice值,
在视网膜层分割中比其他模型好一点。

通过α的值既不太大(1)也不太小(0),
作者的模型能够将全局和局部特征关联起来,
从而获得最佳性能。

(翻页)

这个文章的优点就是,
它 借鉴了前人提出的 FFC块
用作编码器,
和 Unet 结合起来
形成了 Ynet。。
做实验验证了
Ynet比 Unet 在某些特定层
的划分要好

缺点就是
模型太复杂,容易过拟合
在保证模型精度不变的情况下,
可以通过降低模型复杂度来解决

这篇文章给我的启发就是,
如果能通过一种方法
把全局特征和局部特征结合起来
应该能提高模型的性能
除了常见的
把transformer 和 卷积 结合起来的模型。

还有,像MedT的logo策略中,
的global分支,用浅层的卷积网络
提取相对全局信息
又比如,这篇文章的a变量
可以调节全局特征和局部特征的比例

如果能有一种更好的结合起来的办法
应该也能提高模型的性能。

(翻页)
大家有什么问题吗?
没有的话,那我就结束了

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 217,734评论 6 505
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,931评论 3 394
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,133评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,532评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,585评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,462评论 1 302
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,262评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,153评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,587评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,792评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,919评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,635评论 5 345
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,237评论 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,855评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,983评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,048评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,864评论 2 354

推荐阅读更多精彩内容