像素不够,后期修图来凑?

在知乎搜索低像素修图,结果求助帖多到刷不完,而且从ps技巧、插件神器到各类修图App教程多到眼花缭乱,重点是效果不知道会怎么样。

不过,近日杜克大学(Duke University)研究团队开发了一款AI修图黑科技PULSE,可以解决所有低像素烦恼。据说它能够将图像原始分辨率放大64倍,任何渣画质都可以秒变高清、逼真图像,甚至被打了马赛克的人脸图像,毛孔、皱纹,头发也都能被清晰还原。

马赛克秒变高清人像

PULSE是一种新型超分辨率算法,它通过潜在空间探索对照片采样,可以将16x16像素的低分辨率(Low Resolution,简称LR)放大到1024x1024像素的高分辨率(High Resolution,简称HR),在几秒内增加了64倍,而传统方法最多只能放大8倍。

先来看一组示例,修图界最难处理的LR大头照,经过PULSE也可以秒变高清、细腻的图像。

更重要的是,PULSE可以定位面部的关键特征,以更高分辨率生成一组类似的细节。图中尽管头像被打上了马赛克,PULSE也可以自行“想象”出诸如眉毛、睫毛、头发、脸型等面部细节,形成高清、逼真人像。

不过,过度虚化产生的人像只是一种虚拟的新面孔,事实上它并不存在。正因如此,这项技术不能用于身份识别。比如监控摄像头拍摄的失焦、无法辨别的图片,不能通过PULSE还原成真实存在的人像。

去马赛克神器AI修图黑科技PULSE 有码变高清,AI一秒还原马赛克

一位杜克大学研究小组的计算机科学家Cynthia Rudin说“此前从来没有如此超高分辨率的图像被制作出来,它能够产生不存在的新面孔,而且看起来很真实”。

同时,她补充到,这项研究所采取的技术可以广泛应用于医学、显微镜、天文学,以及卫星图像等领域。另外,该研究团队已将论文已经发表至预印论文库arVix,同时被IEEE国际计算机视觉与模式识别会议(CVPR 2020)收录。

“缩减损失”,超越常规修图法

对于一个LR图像,传统将HR分辨率部分匹配给LR图像而获取超高分辨率(SR)的方式,往往会导致HR图像出现感光度差、不平滑,画面失真的情况。

在本次研究中,杜克大学研究团队开拓了一种新思路,提出新型超分辨率算法PULSE,它不是遍历LR图像来慢慢添加细节,而是发现与HR相对应的LR,通过“缩减损失”的方式得到SR图像。

去马赛克神器AI修图黑科技PULSE 有码变高清,AI一秒还原马赛克

PULSE使用了生成对抗网络(GAN),它是一种训练模型,顾名思义,通过对抗博弈的方式来进行目标训练。其主要结构包括一个生成器(Generator)和一个鉴别器(Discriminator),在同一组照片训练中,一个负责训练接收到的图像并输出,一个负责接收该输出,并检验其是否足够逼真。

以下是与原图对比后的试验结果:

去马赛克神器AI修图黑科技PULSE 有码变高清,AI一秒还原马赛克

图中,第一行为原图,第二行为通过“缩减损失”得到的HR所对应的LR,而第三行经过PULSE得到的HR,可以看出,尽管与原图还存在细微的差别,但还原度已经非常高。

论文中表明,为了检验PULSE在SR方面的优势,杜克大学研究团队采用4种不同的图像缩放方法与其进行了比较研究。本次研究利用CelebA HQ数据集中的1440张图像,以x8,x64的比例因子,对LR面部图像,尤其是眼部、唇部以及头发等细节之处进行了试验。去马赛克神器AI修图黑科技PULSE 有码变高清,AI一秒还原马赛克

PULSE呈现出了明显的优势,尤其是在X64分辨率下,模糊头像被完全还原,尤其是在眼唇等细节之处,其他方法几乎达不到这样的效果。

另外,针对测试结果,研究人员采用感知超分辨率常见的MOS测试方式,邀请五位评分者对图像结果进行了1-5的打分,结果显示,HR源高清图像分辨率得分为3.74,而PULSE达到了3.60,仅差0.14,可以说几乎达到了真实的高质量图像的水平。

PULSE呈现出了明显的优势,尤其是在X64分辨率下,模糊头像被完全还原,尤其是在眼唇等细节之处,其他方法几乎达不到这样的效果。

另外,针对测试结果,研究人员采用感知超分辨率常见的MOS测试方式,邀请五位评分者对图像结果进行了1-5的打分,结果显示,HR源高清图像分辨率得分为3.74,而PULSE达到了3.60,仅差0.14,可以说几乎达到了真实的高质量图像的水平。

不过,研究人员也承认PULSE还不是很完美。它产生的高分辨率图像与专业原图像相比还有一定的差别。但随着技术和工具的改进,这项技术会被一点点的完善。

现在研究团队已经将PULSE发布到Github开源平台,而且收割了569科颗星星。有修图烦恼的朋友可以安装体验一下~

有大佬会用的请分析一下 出个教程,谢谢!!!

pulse 去马赛克软件_去马赛克神器AI修图黑科技PULSE 有码变高清,AI一秒还原马赛克...相关推荐

  1. 有码变高清!AI一秒还原马赛克,杜克大学出品

    作者 | 贝爽 转自:雷锋网(leiphone-sz) 论文地址:https://arxiv.org/pdf/2003.03808.pdf 像素不够,后期修图来凑? 在知乎搜索低像素修图,结果求助帖多 ...

  2. 太可怕啦!AI 一秒还原马赛克,有码变高清

    作者 | 贝爽 转自:雷锋网(leiphone-sz) 论文地址:https://arxiv.org/pdf/2003.03808.pdf 像素不够,后期修图来凑? 在知乎搜索低像素修图,结果求助帖多 ...

  3. 太可怕,有码变高清!AI 一秒还原马赛克?

    作者 | 贝爽 转自:雷锋网(leiphone-sz) 论文地址:https://arxiv.org/pdf/2003.03808.pdf 像素不够,后期修图来凑? 在知乎搜索低像素修图,结果求助帖多 ...

  4. 有码变高清!AI一秒还原马赛克

    像素不够,后期修图来凑? 在知乎搜索低像素修图,结果求助帖多到刷不完,而且从PS技巧.插件神器到各类修图App教程多到眼花缭乱,重点是效果不知道会怎么样. 不过,近日杜克大学(Duke Univers ...

  5. python自动修图_有码变高清!AI修图PULSE一秒还原马赛克

    [实例简介]PULSE是一种新型超分辨率算法,它通过潜在空间探索对照片采样,可以将16x16像素的低分辨率(Low Resolution,简称LR)放大到1024x1024像素的高分辨率(High R ...

  6. 图片链接生成器软件_推荐10个小众但是黑科技十足的Windows软件

    推荐10个小众但是黑科技十足的Windows软件,每一个都是十分好用. 1:电脑图像工具箱 电脑图像工具箱是一款拥有70多个图片处理编辑功能的精品软件. 它支持图片微处理,动画制作,图像转换,图像浏览 ...

  7. pulse 去马赛克软件_最新黑科技...马赛克也能去了!!

    来源:最黑科技(ID:zuiheikeji) 不久前,美国杜克大学的大神们开发出了一种逆天的修图黑科技--PULSE.它不但能化低清为高清,甚至还能将马赛克下的图像清晰呈现给你!看到这里的年轻司机们先 ...

  8. 不同分辨率图片匹配_杜克大学开源 AI 算法,让马赛克图片秒变高清!

    公众号关注 "GitHubDaily" 设为 "星标",每天带你逛 GitHub! 大家好,我是小 G.在这个追求高清画质的时代,我们对渣画质的容忍度越来越低. ...

  9. 杜克大学提出 AI 算法,拯救渣画质马赛克秒变高清

    来源:HyperAI超神经 本文约1900字,建议阅读7+分钟 高清无码不是梦. 场景描述:将"马赛克"像素级别的大头照转换成高清照片,是一种怎样的体验?杜克大学提出的 AI 算法 ...

  10. 拯救渣画质,马赛克图秒变高清,杜克大学提出AI新算法

    作者 | 神经小兮 来源 | HyperAI超神经(ID: HyperAI) 导语:将「马赛克」像素级别的大头照转换成高清照片,是一种怎样的体验?杜克大学提出的 AI 算法,不仅可以「去掉马赛克」,还 ...

最新文章

  1. Ubuntu 11.10 Server下搭建Maven私服
  2. org.apache.subversion.javahl.ClientException: Previous operation has not finished
  3. 18款 非常实用 jquery幻灯片图片切换
  4. python 系统时间24小时制_Python 日期和时间
  5. 敏捷开发一千零一问系列之十八:长期受制于强势客户怎么办?(下)
  6. CodeIgniter的伪静态配置
  7. 论文笔记_S2D.44_自监督的从稀疏到稠密:用激光雷达和单目摄像机进行自监督深度补全
  8. Linux下passwd和shadow文件内容详解
  9. amd服务器开启虚拟化技术,在AMD平台上实现KVM虚拟化技术
  10. python 文字生成图片
  11. NodeJS:Express 框架实战解析视频教程
  12. 文件上传 webshell 各类型 一句话木马 图片马 制作 教程
  13. Gradle的概念和理解.
  14. 汇报工作的技巧和要求
  15. 31-三色旗问题(荷兰国旗问题)
  16. Coursera机器学习+deeplearning.ai+斯坦福CS231n
  17. bms中soh计算方式_原创丨BMS算法中关于健康状态(SOH)的模型设计
  18. echart,highcharts,chart.js等chart属性记录
  19. 1.1XAF框架开发视频教程-简单的订单管理实现过程,视频,提纲,及教程源码
  20. 招聘应届毕业生的三阶段

热门文章

  1. linux centos7 apache+mariadb+php 虚拟机vmware workstation lamp环境搭建
  2. matlab方波函数,matlab方波
  3. 计组综合练习(期末复习大题部分适用)
  4. nginx 正反代理(超级玛丽小游戏)
  5. matlab点类型,Matlab中的类(Class)
  6. 【高老师UML软件建模基础】20级云班课习题答案合集
  7. excel转vcf 易语言免费版
  8. VTK实现多个体数据映射到一起进行渲染
  9. Zynga完成对快速增长的超休闲游戏领域的领导者——伊斯坦布尔的Rollic的收购
  10. java.awt.eventdispatchthread_大神们,小弟来了!解决办法