【每周CV论文】初学深度学习图像修复应该要读的文章
欢迎来到《每周CV论文》。在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的。
图像修复(image inpainting)或补全(scene completion)即去除图像中的一些小目标,属于底层图像编辑中的一类技术,今天给大家推荐初学该领域必须要读的文章。
作者&编辑 | 言有三
1 基于GAN的基本模型
传统的图像修复方法通常是用相似度算法从图像的其他区域选择图像块进行补全,ContextEncoder是首个使用GAN的图像补全框架。
文章引用量:1000+
推荐指数:✦✦✦✦✦
[1] Pathak D, Krahenbuhl P, Donahue J, et al. Context encoders: Feature learning by inpainting[C]//Proceedings of the IEEE conference on computer vision and pattern recognition. 2016: 2536-2544.
2 判别器改进
Context Encoder模型的生成器和判别器结构都比较简单,补全的结果虽然比较真实,但是边界非常不平滑,不满足局部一致性。针对这个特点,研究者联合使用了全局判别器和局部判别器对Context Encoder模型进行了改进。
文章引用量:500+
推荐指数:✦✦✦✦✦
[2] Iizuka S, Simo-Serra E, Ishikawa H. Globally and locally consistent image completion[J]. ACM Transactions on Graphics (ToG), 2017, 36(4): 1-14.
3 注意力机制改进
传统图像补全方法擅长从背景图像中采样,CNN模型则擅长直接生成新的纹理,为了综合利用这两类方法的长处,并充分使用图片中的冗余信息,研究者提出了基于注意力机制的方法[3]来进行图像补全,这一类方法通常采用由粗到细的两个步骤, 第一步先粗略补全,第二步再在未遮挡区域寻找与遮挡区域中相似的图片块来进行改进。
文章引用量:260+
推荐指数:✦✦✦✦✦
[3] Yu J, Lin Z, Yang J, et al. Generative image inpainting with contextual attention[C]//Proceedings of the IEEE conference on computer vision and pattern recognition. 2018: 5505-5514.
4 卷积方式改进
很多框架将缺失的区域使用白色或者是随机噪声来填充,白色/随机噪声本来没有有效信息, 对它们与有效的信息不加区别的卷积并不合理, 这样的补全结果会出现一些不合理的图像块,导致往往需要计算量较大的图像融合等后处理操作。Nvidia提出了Partial Convolution,它通过修改卷积操作来改进图片补全。
文章引用量:270+
推荐指数:✦✦✦✦✦
[4] Liu G, Reda F A, Shih K J, et al. Image inpainting for irregular holes using partial convolutions[C]//Proceedings of the European Conference on Computer Vision (ECCV). 2018: 85-100.
5 基于边缘的补全
当一个作画者开始画一幅图时,往往先描绘出整体的边缘轮廓,然后再上色。基于这样的启发,有一类图像修复框架采取先对边缘进行修复,然后对纹理内容进行修复的思路,EdgeConnect是其中的一个代表。
文章引用量:很少
推荐指数:✦✦✦✧✧
[5] Nazeri K, Ng E, Joseph T, et al. EdgeConnect: Structure Guided ImageInpainting using Edge Prediction[C]//Proceedings of the IEEE InternationalConference on Computer Vision Workshops. 2019: 0-0.
6 应用
在图像修复算法中非常重要的一类应用就是对老旧照片进行修复,去除刮痕等。
文章引用量:较少
推荐指数:✦✦✦✦✦
[6] Wan Z , Zhang B , Chen D , et al. Bringing Old Photos Back to Life[J]. 2020..
7 文章解读
关于图像修复相关文章的详细解读,在有三AI知识星球-网络结构1000变-图像修复以及GAN下有较多的文章,感兴趣可以移步。
总结
本次我们介绍了初学图像修复领域值得读的文章,当前研究重点在于GAN模型,复杂退化类型图像的修复等方向,读者可以继续关注。
有三AI知识星球
知识星球是有三AI的付费内容社区,里面包括各领域的模型学习,数据集下载,公众号的付费图文原稿,技术总结PPT和视频,知识问答,书籍下载,项目推荐,线下活动等资源,了解详细请阅读以下文章:
【杂谈】有三AI知识星球一周年了!为什么公众号+星球才是完整的?
【杂谈】万万没想到,有三还有个保密的‘朋友圈’,那里面都在弄啥!
转载文章请后台联系
侵权必究
往期精选
【每周论文推荐】 初入深度学习CV领域必读的几篇文章
【每周CV论文推荐】 掌握残差网络必读的10多篇文章
【每周CV论文推荐】 初学者必须精读的5篇深度学习优化相关文章
【每周CV论文推荐】 CV领域中数据增强相关的论文推荐
【每周CV论文推荐】 初学高效率CNN模型设计应该读的文章
【每周CV论文推荐】 初学目标检测必须要读的文章
【每周CV论文推荐】 初学深度学习图像分割必须要读的文章
【每周CV论文推荐】 初学GAN必须要读的文章
【每周CV论文推荐】 深度学习人脸检测入门必读文章
【每周CV论文推荐】 初学深度学习人脸关键点检测必读文章
【每周CV论文推荐】 初学深度学习人脸识别和验证必读文章
【每周CV论文推荐】 初学深度学习人脸属性分析必读的文章
【每周CV论文推荐】 初学活体检测与伪造人脸检测必读的文章
【每周CV论文推荐】 初学深度学习单张图像三维人脸重建需要读的文章
【每周CV论文推荐】 人脸识别剩下的难题:从遮挡,年龄,姿态,妆造到亲属关系,人脸攻击
【每周CV论文推荐】换脸算法都有哪些经典的思路?
【每周CV论文】深度学习文本检测与识别入门必读文章
【每周CV论文】深度学习图像降噪应该从阅读哪些文章开始
【每周CV论文】初学GAN图像风格化必须要读的文章
【每周CV论文】初学深度学习图像超分辨应该要读的文章
【每周CV论文】初学深度学习图像对比度增强应该要读的文章
【每周CV论文】初学深度学习图像修复应该要读的文章相关推荐
- 【每周CV论文】深度学习图像降噪应该从阅读哪些文章开始
欢迎来到<每周CV论文推荐>.在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的. 图像降噪是图像处理领域中非常传统和经典的问题 ...
- 【每周CV论文】初学深度学习图像超分辨应该要读的文章
欢迎来到<每周CV论文>.在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的. 图像超分辨是一个非常实际应用价值的方向,今天给大 ...
- 【每周CV论文】深度学习文本检测与识别入门必读文章
欢迎来到<每周CV论文推荐>.在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的. 文本检测和识别是计算机视觉的一个非常重要的应 ...
- 「每周CV论文」深度学习图像降噪应该阅读哪些文章
图像降噪是图像处理领域中非常传统和经典的问题,今天给大家推荐学习该领域值得读的文章. 作者&编辑 | 言有三 1 基本CNN结构 图像去噪模型的输出是无噪声的图像,与输入图像大小相同,所以可以 ...
- 【每周CV论文】初学深度学习图像风格化要读的文章
欢迎来到<每周CV论文>.在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的. 图像风格化的研究由来以久,这是一个艺术和科学相结 ...
- 【每周CV论文】初学深度学习图像对比度增强应该要读的文章
欢迎来到<每周CV论文>.在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的. 图像对比度增强,即增强图像中的有用信息,抑制无用 ...
- 文献阅读笔记--深度学习图像修复方法综述
1.基本信息: 深度学习图像修复方法综述 强振平,何丽波,陈旭,徐丹 2018-10 中国图像图形学报 2.核心内容: (1)基于深度学习的图像修复理论及其发展现状的综述,所使用的方法是对基于深度学习 ...
- 论文笔记 | 深度学习图像数据增广方法研究
1 背景 在许多领域,受限于数据获取难度大,标注成本高等原因,往往难以获得充足的训练数据,这样训练得到的深度学习模型往往存在过拟合的问题,进而导致模型泛化能力差,测试精度不高等. 数据扩充的作用:扩大 ...
- 【毕业设计】深度学习图像修复算法研究与实现 - python
文章目录 1 前言 2 什么是图像内容填充修复 3 原理分析 3.1 第一步:将图像理解为一个概率分布的样本 3.2 补全图像 3.3 快速生成假图像 3.4 生成对抗网络(Generative Ad ...
最新文章
- 限制TensorFlow只在CPU上运行的方法
- 浏览器打开域名变成localhost_史上最全微信域名防封API原理及实现方案
- 关于SVN 目录结构
- BPP 相关——01
- 使用Spark Streaming SQL基于时间窗口进行数据统计
- 解决HP ProLiant DL380 G5的Centos 7安装与启动不能识别硬盘问题
- PHP JSON文件解析并获取key、value,判断key是否存在
- 又有好奇心,又能自主学习,这个机器人棒棒哒!
- 学计算机用多大的u盘合适,u盘装系统需要多大的u盘|装系统需要多大的U盘
- 【Python游戏】用Python实现一个2048小游戏 | 附带源码
- 关于彻底删除捆绑软件的解决方案
- 整合UWALOHA和VBF
- 整理的一些关于手机拍照技巧的内容
- 表格进阶03—出纳日报表(表格,再次练习)
- 【Zookeeper】分布式集群(详细图文)
- java中集合的分类以及集合的选择
- jquery.SuperSlide
- 蓝桥杯嵌入式国赛模块训练之数码管
- 用于持续医疗监测的无袖带血压估计算法【翻译】
- Java - 拷贝亿赛通项目
热门文章
- JDK 16 即将发布,迎来重大改变,新特性速览!
- Java之JSON数据
- mysql和mongodb替换字段中某字符
- Spring Cloud(八)使用Zipkin进行分布式链路跟踪
- 打印helloworld,注释,从源文件到可执行文件
- [转]opensuse vim 的语法高亮
- python主要用于系统编程_一文带你了解python是什么?能做什么?为什么(附赠40G项目实战+绝版电子书)...
- ZooKeeper概述与原理
- 关闭aslr oracle,地址空间布局随机化 (Address Space Layout Randomization, ASLR)
- mysql逆向工程_Mybatis+Mysql逆向工程