使用 Stable Diffusion 生成的仿旧照片和二次元图片

2024-04-08 17:42:35

这几天在电脑上运行 Stable Diffusion 玩了玩。这是我机器上的测试页面：https://qizhen.xyz/genimg

这个模型比 Dall.E 的小很多，所以才能在配置不高的个人电脑上跑。而且，我的电脑也只能勉强生成小尺寸的照片。虽然效果可能不如专业网站用的大模型，但有些作品已经很逼真了。我主要试试了生成真实人像以及和二次元人像之间的转化。Diffusion 模型不太擅长逼真的人像，程序生成的人像使用 GFPGAN 改善过的。在人像中，个人感觉这个模型最擅长生成白人年轻女性的照片。我也尝试了让它生成一些中国人的照片，但感觉都不是那么美，实际上多数生成的中国人照片都看起来比较别扭。很可能是因为它的训练集中就有比较多的白人年轻女性照片，或者也可能是因为我生长在中国，对中国人的面貌更敏感，更容易发觉异常。

先贴两张 AI 生成的仿旧照片，看起来还真挺像真的：

接下来几组图片，都是首先生成了左边的真实照片风格的图片，再根据照片转换成了右边二次元图片：

下面这两组图片是先生成的左边的二次元风格图片，再根据它生成右侧的真实照片风格图片：

可以明显感觉到，生成真实照片要困难很多。我猜是，人脑对所谓“真实”照片更挑剔。

下面两组是风景图片，感觉两种风格生成出来的图片区别远没有人像的区别那么大

2023年二月更新：

Stable Diffusion 刚发布的时候，对于人像的处理还比较差的，要配合GAN模型才能生成出比较真实的人像图片。这才几个月，各种针对特定目标的模型就纷纷出炉了。人像自然是最重要一方面，现在 Diffusion 模型直接生成的人像就已经可以以假乱真了。而且，各种专业工具也相继发布，比如，controlnet可以让用户画几个直线表示人体姿势，然后生成相应姿势的人像。
图片生成模型几个月前就已经满足我这种纯业余者的需求了，我一般就用它生成文档或者ppt的插图。目前，在各种工具的加持下，专业领域应该也可以用的上了。

贴一些我制作的图片：

原文：https://ruanqizhen.wordpress.com

使用 Stable Diffusion 生成的仿旧照片和二次元图片相关推荐

创建好的提示词来让 Stable Diffusion 生成 AI 艺术作品图像
如何创建好的提示词来让 Stable Diffusion 生成 AI 艺术作品图像? 文章目录 Stable Diffusion 如何使用? 优秀的提示词如何制作? 主题描述 Subject 图片类型 ...
Stable Diffusion 生成高清图片
Stable Diffusion 生成 8K 高清图片 0. 简介 1. 安装 ultimate-upscale-for-automatic1111 插件 2. 安装 4x-UltraSharp 模型 ...
超详细AI二维码制作教程：手把手教你如何用Stable Diffusion 生成一个创意二维码？
AI已来,未来已来! 来势汹汹的人工智能,如同创世纪的洪水,正在全世界的范围内引发一场史无前例的科技革命.AI正在改变世界!而我们正是这场巨变的见证者. 今天我们要介绍的内容就是:如何利用AI工具St ...
AI作画升级！一键帮你用Stable Diffusion 生成无限缩放效果视频
在这一篇文章中,我们介绍了利用OpenVINO™优化和加速Stable Diffusion模型的推理,在英特尔®独立显卡上能够根据我们输入的指令(prompt),快速生成我们喜爱的AI画作.今天,我们 ...
AI 作画《Concept Art概念艺术》| 用stable diffusion生成
前言 "Concept Art"是一个艺术门类,即所谓"概念艺术"."概念设计",也称为"初步设计".一般常见于影视或游 ...
AI生成二维码Stable diffusion生成可识别二维码【附完整教程】【附完整案例】
前言最近的炫酷QR比较火,所以今天给大家分享一下如何实现.首先我们知道QR二维码已经改变了信息的共享和获取方式.但是,QR码的视觉外观可能并不总是符合设计或艺术品的美学要求.为了解决这个问题,Con ...
Stable Diffusion：使用Lora用二十张图片训了一个简易版薇尔莉特头像生成器（不作商用，纯纯个人兴趣，狗头保命）
目录一.系统环境二.数据准备及预处理三.使用Stable Diffusion获取图像信息四.安装训练图形化界面五.参数设置及训练过程六. 效果测试七.常见报错处理一.系统环境同上一篇 ...
使用ChatGPT为Stable Diffusion生成画面的关键词
在使用SD进行绘图的时候常常苦于某个换面想不到关键词,可以通过ChatGPT模板批量生成关键词. 先来看下演示效果. 案例结果这个例子是根据古诗<陋室铭>编写的关键词描述. 仿照例子,并 ...
Stable Diffusion 生成涩图，只需一步关闭安全检查
在使用到的所有pipline前面粘贴一下代码: from diffusers.pipelines.stable_diffusion import safety_checker def sc(self, ...

最新文章

热门文章