1. 总导读:

以往Inpainting出现了基于语义的方法以及基于纹理的方法,但是将二者分立来看会导致荒谬的结果以及边缘的模糊。比如,仅通过轮廓是肯定绘制不出动物的皮毛那种感觉的,也肯定绘制不出绿色的感觉。因此这篇论文在相干先验(尽可能使纹理与语义具有一致性)的基础上引入了语义与纹理相结合的方法。并采用重建损失、对抗性损失和相干性损失来提高图像的逼真度。采用交叉熵损失来保证预测分割图的准确性。

2. 详细介绍:

本文提出了两种新的设计方法:
(1)使用语义智能注意传播(SWAP)模块显式捕获未知区域(缺失区域)与已知区域之间的语义相关性;因此,当语义映射到图像纹理时,填充一个未知的patch只指代那些语义相同的已知patch,而不是整个图像,避免了不相关的纹理填充。
(2)设计了两个损失项(如下图所示)来学习全局和局部的一致性关系。利用图像级结构相干损耗监督图像与相应分割图之间的结构匹配,生成清晰的图像边界。此外,非局部斑块级的一致性损失旨在评估斑块纹理在语义域中的分布,以鼓励生成的纹理与匹配的已知相同语义的斑块相似。
Non-local Path Coherence Loss.:最大化纹理相似性

2021-CVPR-图像修复论文导读《Image Inpainting Guided by Coherence Priors of Semantics and Textures》相关推荐

  1. 2021-CVPR-图像修复论文导读《TransFill: Reference-guided Image Inpainting by Merging Multiple Color and ~~~》

    <TransFill: Reference-guided Image Inpainting by Merging Multiple Color and Spatial Transformatio ...

  2. 【半监督医学图像分割 2021 CVPR】CVRL 论文翻译

    文章目录 [半监督医学图像分割 2021 CVPR]CVRL 论文翻译 摘要 1. 介绍 1.1 总览 1.2 无监督对比学习 2. 实验 3. 总结 [半监督医学图像分割 2021 CVPR]CVR ...

  3. 基于深度学习的Image Inpainting (图像修复)论文推荐(持续更新)

    传统的图形学和视觉的研究方法,主要还是基于数学和物理的方法.然而随着近几年深度学习在视觉领域取得的卓越的效果,视觉领域研究的前沿已经基本被深度学习占领.在这样的形势之下,越来越多的图形学研究者也开始将 ...

  4. 《Globally and locally consistent image completion》图像修复论文解读

    作者在context encoder的基础上进行改进,整个网络由一个修复网络和两个鉴别网络(全局鉴别网络和局部鉴别网络)组成.修复网络用来对进入其中的图像进行修复,而鉴别网络用来对图像进行判别.鉴别网 ...

  5. 10篇必读深度图像修复论文,珍贵老照片有救了!

    如果觉得有帮助,就关注一下吧! 照片,在大家生活中扮演者非常重要的角色. 难忘的瞬间.美好的风景.珍贵的回忆,我们总喜欢用照片把它保留下来. 但是,瑕疵.水印.遮挡.涂鸦这些让美好蒙上了一层阴影. 当 ...

  6. 基于GAN的图像修复--论文笔记

    文献下载看下载处或评论链接 /1 Region Normalization for Image Inpainting 主要内容:将损坏的图像输入到神经网络中可能会产生问题,例如无效像素的卷积.归一化的 ...

  7. 图像修复论文阅读笔记-----Globally and Locally Consistent Image Completion

    概述 论文链接:https://dl.acm.org/doi/abs/10.1145/3072959.3073659 代码:https://github.com/otenim/GLCIC-PyTorc ...

  8. CVPR 2021 论文大盘点-图像修复篇

    本篇文章继续总结CVPR 2021 中底层图像处理相关论文,包含图像恢复.图像修补.图像质量评价.去遮挡等.共计 20 篇. 大家可以在: https://openaccess.thecvf.com/ ...

  9. DeepNude已迅速下线,来看看它涉及的图像修复技术

    导读:本文会探讨一些image/text/random-to-image的神经网络模型,仅供学习交流之用,也欢迎分享你的技术解决方案. 作者:yuanxiaosc 来源:Github.大数据文摘 原文 ...

最新文章

  1. Python 初学者的最佳学习资源
  2. 【已解决】IDEA 配置tomcat后,javaweb项目报404
  3. 螺旋矩阵 IIPython解法
  4. apache camel_Apache Camel入门
  5. python web开发 jQuery基础
  6. 耳机不分主从是什么意思_开学必备高性价蓝牙耳机,学生党时尚配件推荐
  7. fatal error C1189: #error : Building MFC application with /MD[d] (CRT dll version) requires MFC sha
  8. 欧洲互联网将“死于”版权法?
  9. 【NOIP 模拟赛】Evensgn 剪树枝 树形dp
  10. TMDB数据导入elasticsearch7
  11. 使用js实现简单的注册验证
  12. 系统的用户分析方法及分析内容
  13. 如何用计算机画函数图像,用Excel绘制函数图像的技巧
  14. set_set_switching_activity
  15. 旅行,写作,编程 :IT文艺青年的生活态度
  16. php+ioncube',PHP安装ioncube扩展
  17. 【Panoramic stitching】并查集(disjoint set)结构及源码
  18. MPLS之LDP协议
  19. 由椭圆一般方程求解椭圆标准方程参数
  20. centos8 挂载ntfs_CentOS系统挂载U盘、NTFS移动硬盘

热门文章

  1. 《程序员》7月刊推荐:社交网数据库技术分析
  2. Vue中图片加载问题总结
  3. 动手学深度学习(三十九)——门控循环单元GRU
  4. Mysql语句计算文本字数_使用SQL确定文本字段的字数统计
  5. [计算机数值分析]牛顿下山法求方程的根
  6. 2022年国庆红旗头像制作微信小程序源码
  7. 删除集合中特定元素的几种情况
  8. 5G+边缘计算 物联网嵌入式边缘计算平台
  9. vue常用的时间、手机号等的格式化方法
  10. 浅谈XPS文件格式。