AI绘画 新多功能controlnet插件,草图上色,动作骨架提取等功能,安装及下载教程 - 哔哩哔哩

原文:

功能很多,都非常实用,文生图添加人物动作,线稿上色,景深等

个人经验,很菜不懂电脑,只做最基本使用的介绍

webui要比较新版的,大概2月份以后,本人使用2.05,似乎2.01更好点,推荐 秋葉aaaki 的启动器来更新,如果出现出图的时候卡了半天的情况,可能是在下载什么东西,下好了就行了

1.安装

https://github.com/Mikubill/sd-webui-controlnet 先是这个网站,(打开webui)把它

如上图,作者给出了下载方法。

如果没弄清楚,就是说打开webui,把这个网址复制到 扩展栏的install from URL 的第一行,点install即可

如果没梯子或者莫名其妙的原因安装失败(我就是

就在这里

解压,将文件夹放在这个位置

然后重新加载或重新启动webui

2.下载模型

https://huggingface.co/toyxyz/Control_any3

模型界面,各有各的功能不一定都下

模型注释(机翻,大致上介绍功能):
 

ControlNet/models/control_sd15_canny.pth

  • ControlNet+SD1.5 模型,用于使用精明边缘检测来控制 SD。

ControlNet/models/control_sd15_depth.pth

  • ControlNet+SD1.5模型使用Midas深度估计来控制SD。

ControlNet/models/control_sd15_hed.pth

  • ControlNet+SD1.5 型号使用 HED 边缘检测(软边缘)控制 SD。

ControlNet/models/control_sd15_mlsd.pth

  • ControlNet+SD1.5模型使用M-LSD线检测来控制SD(也可以与传统的Hough变换一起使用)。

ControlNet/models/control_sd15_normal.pth

  • ControlNet+SD1.5 模型使用法线贴图控制 SD。最好使用该 Gradio 应用程序生成的法线贴图。只要方向正确,其他法线贴图也可以工作(左边看红色,右边看蓝色,上看绿色,下看紫色)。

ControlNet/models/control_sd15_openpose.pth

  • ControlNet+SD1.5 模型,使用 OpenPose 姿势检测控制 SD。直接操纵姿势骨架也应该有效。

ControlNet/models/control_sd15_scribble.pth

  • ControlNet+SD1.5模型使用人类涂鸦控制SD。该模型使用边界边缘进行训练,具有非常强大的数据增强功能,以模拟类似于人类绘制的边界线。

ControlNet/models/control_sd15_seg.pth

  • ControlNet+SD1.5模型使用语义分割来控制SD。协议是ADE20k。

选择要使用的模型下好,目前最实用的大概为

ControlNet/models/control_sd15_openpose.pth 动作提取(注意真人图片能更有效),也可以自己画线条,可以很方便的定制动作

以及ControlNet/models/control_sd15_canny.pth 线稿上色

将下好的模型放置于此处

3.使用

打开webui

打开这里,没有的话就是没下好

出现这个界面

大致调用下方红圈几项即可使用,【不生效的话,尝试勾选Low VRAM (8GB or below)】

注意,如果出现模型无法读取,Model栏为空白,一般是webui版本跟不上,它读不出来,请更新webui

有的模型(指跑图用的模型)是不受这个插件影响的,请注意。推荐用a3测试是否可用,再换别的模型

这是机翻版本的界面

出图这部分照常使用,输入你想要的东西

如果出现出图的时候卡了半天的情况,可能是版本对不上,在下载什么东西,下好了就行了

完成,下面两张是动作提取的效果

大致就是这样

关于不生效的总结:

1.webui版本跟不上,需要的特殊模型无法读取,更新到大概2月份后版本

2..显存小,勾选Low VRAM (8GB or below)

3.使用的出图模型不受影响,请更换A3尝试,如果还不生效,请查看上两条

4.enable忘记勾了,我玩lora就老是忘勾这个

参考:【AI绘画】controlnet安装/使用教程 动作控制 景深 线稿上色 - 哔哩哔哩

AI绘画 新多功能controlnet插件,草图上色,动作骨架提取等功能,安装及下载教程相关推荐

  1. 最新ChatGPT网站源码V4.7.8+支持Ai绘画+ChatGPT商业运营版+管理后台+支持用户套餐+好友邀请功能+一键在线更新+永久使用!

    最新ChatGPT网站源码V4.7.8+支持Ai绘画+ChatGPT商业运营版+管理后台+支持用户套餐+好友邀请功能+一键在线更新+永久使用! 如果后续程序有新版,直接在后台一键更新即可 程序完美运行 ...

  2. 国内AI绘画新阵地open.ly

    今天为大家分享一个新生的国内AI绘画创作创意分享社区www.openly.top 如果你是AI绘画的狂热爱好者或是想要找精美的高清壁纸,那www.openly.top一定是你的不二之选. 我们先来欣赏 ...

  3. AI绘画指南 stable diffusion webui (SD webui)如何设置与使用

    AI绘画指南 stable diffusion webui (SD webui)如何设置与使用 作者: 去年夏天 分类: AI绘画,Windows,技术文章 发布时间: 2022-11-07 23:0 ...

  4. 集成VueCli5各种功能与插件(一)安装

    系列内容 1.集成VueCli5各种功能与插件(一)安装 2.集成VueCli5各种功能与插件(二)创建新项目 3.集成VueCli5各种功能与插件(三)国际化 4.集成VueCli5各种功能与插件( ...

  5. AI绘画日赚千元?百度、谷歌已入局,流水线画师要被抢单了

    来源: 时代财经 文/李婷 如果告诉你,傍晚的街道.昏黄的路灯.来往的行人,你会想到一幅什么样的画面? 输入上述关键词后生成的画面 图源:盗梦师 如果告诉你,上面这幅画是由AI自动生成的呢? &quo ...

  6. ControlNet精准控制AI绘画教程

    ControlNet精准控制AI绘画教程 AI绘画相信大家都已经不陌生了,虽然AI绘画出图很方便,但是要让其生成一副自己满意的图,还是需要费一番心思,有时候多次调整关键词就是生成不了自己想要的画面,这 ...

  7. AI - AI绘画的精准控图(ControlNet)

    一.介绍 在上一篇 <AI - stable-diffusion(AI 绘画)的搭建与使用> 中, 介绍了 SD 的环境搭建与使用,搭配各种特色模型文件,SD 的文生图功能就可以根据我们输 ...

  8. 四少女火爆外网!ControlNet组合拳效果惊人,颠覆AI绘画游戏规则

    金磊 发自 凹非寺 量子位 | 公众号 QbitAI 四位美少女,带着AI画画在ChatGPT的热浪中杀出了一片天地. 新"魔法"一出,瞬间吸引全场目光: 原本是一张四个闺蜜在沙滩 ...

  9. ControlNet多重控制功能推出,AI绘画进入导演时代!

    目录 一."不会开发游戏的AI工具制作者不是好博士" 二.ControlNet出现的背景 三.什么是ControlNet? 四.「神采 Prome AI」的诞生 五.总结 去年DA ...

最新文章

  1. linux mysql详解,Linux 下mysql安装使用详解
  2. android edittext 限制文本框输入的长度和提示信息
  3. linux 应用层编程之内核链表list的使用
  4. linux中nslookup命令功能,nslookup
  5. python 线程的使用
  6. Visual Studio 2017配置CTP的API文件
  7. SQL Server - 在SQL Server中创建ASSEMBLY
  8. 修改完/etc/fstab后重新挂载方法
  9. C++20 模式下将启用协程支持 CC 11
  10. FutureTask源码分析
  11. 一篇 JPA 总结
  12. MFSK以及MFSK和MPSK的对比
  13. MPQ文档布局分析[转帖]
  14. 火狐浏览器怎么打不开网页
  15. 用 Dev-C++ 编写简单的平均数/中位数/众数/方差/一元线性回归方程计算器(附带控制台颜色设置,选择界面)
  16. 利用重抽样获取mgcv包的广义可加模型函数曲线的可信区间(3)
  17. matlab怎么解非满秩矩阵,在numpy或matlab中由满秩非方矩阵求可逆方阵
  18. python随机画笑脸_如何用python画笑脸
  19. 瑞萨单片机iap串口升级app工程的构建-学习记录
  20. 武汉科技大学java题库答案_武汉科技大学 java实验报告 实验二

热门文章

  1. 中国制造显威,动力电池出货量翻倍增长,已居于绝对领先地位
  2. iTunes无法与iPhone正常连接的解决办法
  3. python自动点赞微信_基于AirTest+Python的ios自动化测试demo(微信朋友圈无限点赞)
  4. 想要快乐陪伴左右吗?多种提高多巴胺的方法送给你
  5. C# Winform实现导入和导出Excel文件
  6. MaxEnt软件的安装
  7. p1468 Party Lamps
  8. Thumbnails生成缩略图透明底图变黑bug修改
  9. Linux更改用户名密码
  10. STM32cubeMX:双通道ADC(DMA)