前两天,分享了如何用stable diffusion webui的安装教程(mac篇),win篇请看这里。

有人就问:安装是安装好了,可是为什么生成的图片和作者你生成的图片差距那么远呢?

怎么真实感和质感一个天一个地呢?

那么,我画的图,和你画的图,差别在哪里呢?

很关键的因素,就是我用了专门的生成模型model和lora包。

今天我们就来讲一讲如何用lora包生成超真实好看质感超强的人物图片。

一.教程部分

1.你的电脑里面应该安装好了stable diffusion webui,如果还没安装的,请回去安装好再回来,不然看了也用不上。(win安装教程,mac安装教程)

  1. 打开http://civitai.com

Civitai是一个AI绘图爱好者聚集社区,里面有很多个性化的模型,尤其是3D,现实,人物,画风等有针对性训练的模型。因此,当你采用特定模型去生成特定主题的画作时,表现力会极大加强。

(注意这个网站直接访问传输不稳定,可能需要魔法上网。另,里面包含部分nsfw内容,未成年人禁止访问。)

3.找到你想生成的画风图片,查看详细信息并下载相应包和模型。

以韩国美女小姐姐lora包(Korean Doll Likeness)为例。

(1)下载lora包,并放到指定文件夹

右上角点击download下载此Lora包。(一般几十到几百MB),下载好后,放在你电脑的stable-diffusion-webui > models > Lora文件夹下面。

(2)lora包网页,示例图片点击右下角的圈圈感叹号,查看生成信息。

(3)找到model行,了解到这个lora包还需要使用chilloutmix_cilloutmixNi模型

(4)下载模型,并放到指定文件夹

把chilloutmix_cilloutmixNi放在Civitai搜索框上搜索,发现没结果,但是找到一个类似的,也是生成真实人像的模型(checkpoint),叫做OrangeChillMix,接着我们把这个模型下载下来(7.17GB),并放在stable-diffusion-webui>models>Stable-diffusion文件夹下面。

4.启动stable-diffusino-webui,并切换模型

(1)启动stable diffusion webui

如何启动就不重复了,忘了的可以回去看看win安装篇,mac安装篇,里面都有讲如何启动。

(2)切换模型

先点击左上角的刷新按钮,接着点击左上角的向下箭头,找到你刚刚下载的orangechillmix_v70.safetensors模型,点击它。

等待一分钟后,按f5刷新页面,如果左上角已经自动显示了“orangechillmix_v70.safetensors”字样,那么模型就切换成功了。

(注意,切换模型需要先提前完成第三步里面的:下载模型,并放到的指定文件夹)

5.开始生成图像。

(1)浏览器回到刚刚的那个Korean Doll Likeness网页,点开示例图片右下角的感叹号,点击copy generation data 按钮。

(2)在stable diffusion webui的 prompt输入框里面,Ctrl(command)+ V ,粘贴刚刚复制的内容后,接着点击Generate下方的“左下箭头”。

这时候,你会发现,刚刚长长的prompt变短了,其他内容去哪了呢?

原来去了下面的nagative prompt框,和下面的参数配置。

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-2HJGKwIT-1678168834801)(https://p3-juejin.byteimg.com/tos-cn-i-k3u1fbpfcp/8a9ff20b2efd43e68d3f3c4217449817~tplv-k3u1fbpfcp-zoom-1.image)]

(3)点击generate,开始生成图像。

(4)等待图像生成完毕,然后右键点击生成的图像保存,或者点击图像下面的文件夹图标,进入文件夹查看生成的图像。

二.答疑

问题1.按照上面说的步骤,发现生成图像非常慢怎么办?比如你看下面,生成一张图都要20多分钟甚至更长时间?

回答:

这是由于电脑性能不足,导致运算过慢。而示例图片都是默认显卡性能很强,所以他们有的选项对你来说,可能会运算量过大而生成时间超慢。

就像我们看游戏宣传视频,通常都是很流畅,而且画质超精美,但是自己玩的时候由于配置不够,可能会比较卡,还比较模糊,是一样的道理。

那么如果你的电脑性能不足,怎么优化速度呢?(当然绘制质量/效果也会有一定折扣)

(1)取消hire.fix的勾选,这一项作用是扩大分辨率并增强画质,非常耗算力;

(2)分辨率如果是512768可以不用动,如果是7681024或者都是768以上的分辨率,那么按比例调低分辨率。(那要高清图怎么办,生成基础图之后用extra功能放大图片。关注我,后面会讲。)

(3)sampling method取样方式,原作者是两个,dpm++sde karras,可以改成euler a

(4)升级硬件,买一个好点的显卡,比如Nvidia GTX3060以上,12G显存以上的。

(注意,以上方法不一定需要全用上,如果用上一两个能改善作画速度即可,因为改得越多,对绘图结果的质量影响越大。)

问题2.如果我不用korean小姐姐的lora包,要用其他包怎么弄?

回答:同上面教程,先找一个你感兴趣的绘图类型和风格,比如3D,动漫,国风或者之类的,点进去查看对方使用了哪些lora包,哪些模型,下载相关模型和lora包即可。

问题3.lora包是如何在prompt里面体现的?

回答:

我们先来看看一段样例prompt的lora提示:

可以看出,lora包的使用通常形式是<lora:loraname_v1.x: 0.xx>,可以多个lora包一起使用。

最前面lora代表我要使用lora包,后面是lora包的名字和版本,最后0.xx则是要占多少比例,数字越大,lora特性展现越明显。

比如示例的两个lora包,可以是分别0.6和0.4,也可以分别是0.3和0.7,加起来不超过1就行。

问题4.使用lora包,terminal或者cmd报错说找不到Lora名字怎么办?

回答:

报这个错,也能生成图,但是无法应用和展现你想用的lora包特性。

比如上面这个报错,就是没找到你指定的lora包,这时候要么你没有下载这个lora包,要么就是lora包名字错误。

点击gerate按钮下面的图像,再点击lora,下面会列出你拥有的所有lora包,复制名字替换掉prompt区域的lora包名字,把名字改对,就不会报错,并能使用相应lora包特性了。

问题5.生成了好看的小姐姐,还想每次都尽量生成同一个人脸怎么办?

回答:

(1)尽量稳定使用同一个lora包;

(2)保持同一个seed不改动

(3)自己“炼丹”,训练自己想要的脸部模型lora包或者checkpoint模型库。

如何用AI绘图画出超真实细节感超强的小姐姐?(Lora篇)相关推荐

  1. 微软AI 绘图工具+ChatGPT免费用,10秒轻松出图,超详细教程,纯干货分享

    文 / 高扬(微信公众号:量子论) 人嘛,总爱喜新厌旧.很多朋友找我(gaoyang677)建议将"量子论"公众号的教程再做个扩展,比如讲讲如何用AI绘图. 经过内部讨论,认为这个 ...

  2. AI绘图实战(十):制作线稿矢量图之包头巾的女人,画矢量图/生成矢量图/导出矢量图/直出svg/vector studio插件使用 | Stable Diffusion成为设计师生产力工具

    S:AI能取代设计师么? I :至少在设计行业,目前AI扮演的主要角色还是超级工具,要顶替?除非甲方对设计效果无所畏惧~~ 预先学习: 安装及其问题解决参考:<Windows安装Stable D ...

  3. 如何用AI画出可爱的漫画少女插图?

    如何用AI画出可爱的漫画少女插图? 生成方式概述 什么是生成对抗网络(GAN) 现成的网址 将输入的照片变成二次元少女插画 几个很受欢迎的少女插画网站 生成方式概述   要用AI画出可爱的漫画少女插图 ...

  4. AI绘图实战(二):制作一页海洋、沙滩、男孩与狗的绘本画 | Stable Diffusion成为设计师生产力工具

    S:你安装stable diffusion就是为了看小姐姐么? I :当然不是,当然是为了公司的发展谋出路~~ 预先学习: 安装及其问题解决参考:<Windows安装Stable Diffusi ...

  5. 如何用AI画56个民族的女孩!

    大家好,我是菜鸟哥! 目前在带领600多个小伙伴一起玩AI!Chatgpt现在是最火最出圈的产品,而一旦文字和图像,声音,视频结合可以演化出很多很多的需求.前面我们公众号已经分享了很多很多关于chat ...

  6. 要点初见:AI绘图工具的部署资源、攻略整理(下篇)

    关于AI绘图工具的部署资源可参考上篇:https://blog.csdn.net/m0_37857300/article/details/127228680 本篇主要整理AI绘图工具的部署攻略,博主挑 ...

  7. 怎么用ai做出适量插画_平面插画图文教程,如何用AI制作矢量人像插画

    原标题:平面插画图文教程,如何用AI制作矢量人像插画 平面插画图文教程,如何用AI制作矢量人像插画 下面品索教育就分享了一篇关于插画的图文教程,这里应用的软件是AI,教你如何用AI制作矢量人像插画,这 ...

  8. AI绘图实战(一):制作购物车图标icon | Stable Diffusion成为设计师生产力工具

    S:你安装stable diffusion就是为了看小姐姐么? I :当然不是,当然是为了公司的发展谋出路~~ 预先学习: 安装及其问题解决参考:<Windows安装Stable Diffusi ...

  9. AI绘图–Disco Diffusion使用指南+本地化保姆级教程

    文章封面为个人AI绘图训练结果 项目传送门:传送门 (谷歌警告) 该项目为免费使用的AI绘图项目,并且可以在本地搭建部署环境. AI绘图对于人脸处理仍处于较为实现困难的阶段,因此该项目更适合用于各类场 ...

最新文章

  1. Web测试需要了解的知识
  2. Maven3.x 插件开发入门
  3. 一位产品总监打算这样管国家:首先得让大家交得起税。
  4. 复合索引和一般索引的问题
  5. 25 Refs转发机制与在高阶组件中的使用
  6. Java IO: OutputStream
  7. python为什么不会溢出_深入分析python中整型不会溢出问题
  8. numpy中的方差、协方差、相关系数
  9. 算捡漏么?我发现了一个值2万美金的 Facebook DOM XSS 漏洞
  10. 判断某个值是否存在指定枚举类中
  11. TLSF 内存分配算法详解
  12. cisco2911路由器破解密码
  13. 数据分析 第十篇:分类(kNN)
  14. 系统介绍一部手机开发的全流程
  15. 【Idea】人工智能编程他来了,Idea集成一款和ChatGPT一样智能的编码辅助神器
  16. 双月报8.24-10.23
  17. 关于虚拟机中对象访问定位的两种方式的一些思考
  18. python使用mysql实例教程_Python操作Mysql实例代码教程(查询手册)
  19. 阿里巴巴2014年校园招聘试题解答
  20. python idle使用教程_pythonidle中文教程

热门文章

  1. workbench设置单元坐标系_Ansys的六种坐标系及其操作
  2. 【C++】设计算法求1000以内的质数数量
  3. 股票交易接口开发可以查询股票实时行情吗?
  4. Introduction into ISO 27145 WWH-OBD
  5. Java中类和对象的关系
  6. Java中的流与IO
  7. 进程相关概念 读取当前进程getpid 读取父进程id getppid
  8. C#中的函数重载和构造函数
  9. Spring(4)(JDBC)
  10. File类常用的方法以及