论文阅读:CcNet:A cross-connected convolutional network for segmenting retinal vessels using multi-scale
CcNet

时间:2019/5

视网膜血管分割有助于帮助诊断糖尿病视网膜病变。目前RVS的自动分割面临着模型精度、鲁棒性及分割速度的限制。本文提出了一种交叉连接的RVS分割网络叫做CcNet。在CeNet中卷积层用于提取图像特征并对像素点进行分类,本模型在图像的绿色通道上进行了训练和测试,交叉连结体现在将主路径和二级路径提取的多级特征进行了融合。最终在DRIVE数据集上取得了0.9528,STARE数据集上取得了0.9633的准确率。除此之外本算法的计算速度更快(0.063s),因此本算法在分割精度、鲁棒性及处理速度方面更适合实际应用中。

Section I:Introduction

糖尿病视网膜病变的确诊人数越来越多,已经成为世界范围内致盲的一大原因,而临床上常通过分析视网膜图片进行诊断,因为借助查看血管的损伤可以帮助诊断糖尿病视网膜病变,但由于人工视网膜血管分割过程费时费力限制了RVS的大规模应用,因此完成视网膜血管的自动分割算法很有意义。主要方法有两类:监督和无监督方式。
无监督学习方法:常依赖于阈值滤波,常采用的方法可分为5类:匹配滤波、图像形态学操作、血管追踪、多级分析及模型化的算法。匹配滤波通过高斯滤波提取出血管轮廓但容易在分割病变血管时出错;在形态学操作中长使用中心线检测及曲线预测来检测血管;血管追踪常通过局部信息寻找血管匹配的最佳路径。上述方法都可对血管的宽度精确探测但都需要初始化种子点。而在多级分析系统中可以同时完成健康和病变视网膜的分割。
而监督学习的方式往往检测效果更好,特征的提取分为人工和自动两种,人工特征的提取十分依赖与特征提取者积累的经验;而借助于ANN、CNN等的自动特征提取效率更高。
虽然大部分CNN网络都取得了较好的分割结果,但仍存在一些挑战。一是现有的方法中对于数据预处理包含大量超参数,二是跟多深度学习的框架忽视了“模型的稳定性”这一特征;三是尽管大部分框架使用了GPU进行了加速但进行预测时仍然需要较长的时间。
为了解决前文提及的问题,本文提出了交叉连结的CcNet用于视网膜血管分割。基于其交叉连接的方式,CcNet可以自动高效的学习多级特征。
本文的主要贡献有
(1)设计了一种融合多级特征的框架用于RVS问题
(2)预处理阶段没有过多超参数,因此降低了主观因素的影响
(3)本文提出的框架性能超过了目前提出的绝大多数框架同时在保证准确率的前提下拥有更佳的鲁棒性及实时性
Section II主要介绍网络框架,Section III介绍实验及结果讨论 Section IV进行总结及未来展望。

Section II CcNet

PartA 网络结构
CNN深层网络提取的特征往往更抽象,对于视网膜血管分割,深层次的特征往往有助于检测血管结构,而浅层特征学习到的是血管细节。因此将浅层次与深层次的特征结合可以提高网络的性能。UNet结构通过skip connection的跳层连接将深浅层次的特征有效的进行了融合。我们的网络结构与UNet相比有两点不同:
第一点:UNet使用了下采样学习深层次特征,但随着下采样的进行丢失了部分血管的细节特征,因此CcNet中每一层特征尺寸都一样大,不仅保留了图像细节也有助于特征的融合;
二是UNet中每级仅将收缩路径中的一层卷积通过skip connection连接到扩展路径上。在CcNet中主路径上的所有卷积层都与次级路径相连。这种模式有助于图像信息及梯度在网络中的流动,也更有利于深层网络的训练。
网络结构如Fig1所示,第一行代表主路径,第二行代表二级路径。为了学习到多样化的特征主路径中使用了更多的卷积核;而为了减少网络的参数,每一次交叉连结都会经过CRM模块的处理(CRM=conv-RuLU-maxpooling),因为CRM中kernel更少。主路径的输出经过CRM处理后会与二级路径的每一级输出进行级联(concatenate)
Part B 预处理
大部分研究在绿色通道上开展,因为绿色通道中血管与背景的对比度是最大的直接将绿色通道的图片喂如入网络而没有用高斯滤波及HE、切patch等一系列的预处理操作,这样最大限度避免了主观因素的影响。和其他工作相比,本文采取的预处理方法是最简单也最好达到的。
PartC 后处理
最终输出的像素点超过255的灰度值像素。被限制在255以内。随后根据输出的二值图像计算ROC,AUC等常规指标。
PartD training set
预训练有助于加速网络的收敛,因此我们准备了预训练的数据集,包括镜像、旋转、绿色通道的提取。实验中我们还发现最终的收敛精度受预训练图像尺寸的影响很小,因此我们将图片设置为80*80的规格,与其他网络设置的patch大小相近。该数据集用于网络的预训练,训练参数会作为网络的初始值继续进行训练。

Section III Experiments

Dataset
DRIVE: 40 images 565 * 584 pixels
STARE:20 images 700 * 605 pixels
实验平台:Caffe框架 on a GeForce GTX 1070
性能比较:最终输出的二值图每一个像素点被分成2类:血管区域和非血管区域。每张图有4种输出:
TP:真阳性
FN:假阴性
TN:真阴性
FP:假阳性
根据此可以计算出敏感度Sensitivity,特异性Soecificity以及准确度Accuracy和AUC曲线。
最终性能如Table 1所示。

与其他网络的对比
DRIVE
STARE
CcNet分割效果的可视化对比:
列从左至右分别代表原图、GT、对比工作1Niemeijer、对比2Fu、本文
行从上至下依次为受损区域、毛细血管、视神经盘的分割结果
其中Niemeijer分割效果最差,Fu分割效果提升了但是对于视神经盘的分割出现了错误(row 3 column4)
而本文提出的方法在受损区域、细微血管、视神经盘区域的分割效果更好,更具有实际应用的意义。
交叉训练
本文还进行了交叉训练,在A数据集上训练好后在B数据集上进行验证,来看Acc的波动性。本文的CcNet具有最佳的鲁棒性。

Summary

本文的亮点有三处:
(1)交叉连接的方式(个人感觉看起来更像DenseNet的连接方式)
(2)没有对数据进行过多的预处理
(3)具有更佳的鲁棒性及分割速度
不足:对lesion area的分割效果不是最佳的
连接方式的不同:
UNet:skip connection
CcNet:cross-connection between primary path and secondary path
还可以通过更深层次的网络,引入CRF进一步提升performance

论文阅读——CcNet:A cross-connected convolutional network for segmenting retinal vessels using multi-scale相关推荐

  1. 论文阅读笔记:CcNet: A cross-connected convolutional network for segmenting retinal vessels using 多尺度特征

    论文链接:CcNet: A cross-connected convolutional network for segmenting retinal vessels using multi-scale ...

  2. 论文阅读:SCDNET: A novel convolutional network for semantic change detection in high resolution optical

    SCDNET:一种用于高分辨率光学遥感图像变化检测网络 变化检测 新的网络架构 SCD的局限性 提出的SCDNET架构 网络结构 多尺度空洞卷积模块 注意力机制 LOSS函数 实验 结论 变化检测 变 ...

  3. 论文阅读 [TPAMI-2022] ManifoldNet: A Deep Neural Network for Manifold-Valued Data With Applications

    论文阅读 [TPAMI-2022] ManifoldNet: A Deep Neural Network for Manifold-Valued Data With Applications 论文搜索 ...

  4. 论文阅读——TR-GAN: Topology Ranking GAN with Triplet Loss for Retinal Artery/Vein Classification

    论文阅读--TR-GAN: Topology Ranking GAN with Triplet Loss for Retinal Artery/Vein Classification 基于对抗神经网络 ...

  5. 读论文《SNUNet-CD: A Densely Connected Siamese Network for Change Detection of VHR Images》

    SNUNet-CD: A Densely Connected Siamese Network for Change Detection of VHR Images SNUNet-CD:稠密连接孪生网络 ...

  6. 论文阅读:A Primer on Neural Network Models for Natural Language Processing(1)

    前言 2017.10.2博客园的第一篇文章,Mark. 由于实验室做的是NLP和医疗相关的内容,因此开始啃NLP这个硬骨头,希望能学有所成.后续将关注知识图谱,深度强化学习等内容. 进入正题,该文章是 ...

  7. 【论文阅读】Hierarchical Multi-modal Contextual Attention Network for Fake News Detection --- 虚假新闻检测,多模态

    本博客系本人阅读该论文后根据自己理解所写,非逐句翻译,欲深入了解该论文,请参阅原文. 论文标题:Hierarchical Multi-modal Contextual Attention Networ ...

  8. 论文分享 DeepCenterline: A Multi-task Fully Convolutional Network for Centerline Extraction

    DeepCenterline: a Multi-task Fully Convolutional Network for Centerline Extraction 摘要 提出了一种新的中心线提取框架 ...

  9. 深度学习-视频行为识别:论文阅读——双流网络(Two-stream convolutional networks for action recognition in videos)

    这里写目录标题 视频的行为识别 前言 背景 内容组成 主要贡献 算法介绍 网络结构 双流(two stream)网络结构 空间流卷积网络(Spatial stream ConvNet) 时间流卷积网络 ...

最新文章

  1. mysql常见关键字
  2. php smarty 时间,smarty的时间格式-详细 | 时刻需
  3. vue中echarts 5.0版本以上不支持因为官方移除了地图数据和map文件夹
  4. MVC4将Controller与views分开
  5. 晋级赛关键一场遇到服务器中途维护,第四届全球争霸赛-大区赛常见问题说明...
  6. tomcat7.0.42如何设置mysql数据库连接池
  7. list c++template
  8. HTML5开发APP有哪些优点和缺点?HTML5优势和劣势大对比
  9. 机器学习 - [源码实现决策树小专题]决策树中混杂度数值度量的Python编程实现(信息熵和基尼系数的计算)
  10. 云队友丨巴菲特是怎样炼成的?两万字长文深度起底股神的传奇人生
  11. CSS 中的层叠,层级关系
  12. python应用体系_Python金融应用之基金业绩评价体系构建
  13. pythonalist是什么意思_3. Python3轻食丨一个故事看懂List所有用法:1年级1班的班级生活...
  14. 金彩教育:怎么布局人群标签
  15. 硬件设计9---什么是示波器?
  16. jodatime java8交互_Joda-time学习笔记
  17. java 生成交易快照_Java生成订单号/交易流水号
  18. 小心QQ信息中的网址传播维金Worm.Win32.Viking.ix/Worm.Viking.pg
  19. 2018 年秋季 10 月江苏省计算机等级考试回忆(二级 Python)
  20. 工商管理专业知识与实务(初级)【9】

热门文章

  1. 【转载于软件小妹】百度网盘简易下载助手(直链下载复活版)
  2. 判断一棵树是不是另一棵树的子树
  3. C#,哈夫曼编码(Huffman Code)压缩(Compress )与解压缩(Decompress)算法与源代码
  4. 【知识网络分析】作者合作网络(Co-authorship)
  5. CM211-1-ZG-当贝纯净桌面-线刷固件包-
  6. OpenStack Queens版搭建详解
  7. c++小游戏:坦克大战
  8. phonegap 拍照上传照片
  9. java(11):tomcat简介与使用(上)
  10. 程序猿reading 自我修炼