一、Stable Diffusion 的特点
与 Midjourney 相比,Stable Diffusion(以下简称 SD)的优点有:
① 免费开源
Midjourney 需要开魔法使用,免费额度用完之后付费才能继续,最低 10 美元/月。而 SD 在 B 站上有大神整理好的整合安装包,不用魔法,免费下载一键安装。 安装到本地的 SD 随开随用,生成的图片只有自己能看到,保密性更强。
② 拥有强大的外接模型
由于开源属性,SD 有很多免费高质量的外接预训练模型(fine-tune)和插件,比如可以提取物体轮廓、人体姿势骨架、画面深度信息、进行语义分割的插件 Controlnet,使用它可以让我们在绘画过程中精准控制人物的动作姿势、手势和画面构图等细节;插件 Mov2Mov 可以将真人视频进行风格化转换;SD 还拥有 Inpainting 和 Outpainting 功能,可以对图像进行智能局部修改和外延,这些都是目前 Midjourney 无法做到的。
推特网友@Toyxyz3 通过分别渲染手部网格深度和开放姿势骨骼的方式,在 SD 内实现对人物手指和姿势的精准控制。图片来源: https://twitter.com/toyxyz3/status/1629620938894643200/photo/1
推特网友 @Claude 利用带有 controlnet 和 mov2mov 功能的 SD webUI,将真人视频转换为动画风格。图片来源: https://twitter.com/Claude2021/status/1634952496606236672
③ 训练自己的模型
我们可以用 SD LORA 或者 Dreambooth 将自己喜欢的人物形象或者画风训练生成模型,打造自己的专属 AI 绘画工具,也有画师和设计师用自己的原创作品训练模型,之后有灵感了就之后用文字描述出来,让 SD 帮自己快速出各种概念草图。
利用吴仓石 、郑板桥、八大山人、任颐等大师作品+现代人物训练而成的水墨风 SD LORA 模型—— 墨心 Moxin,图片来源:墨心 MoXin | Stable Diffusion LORA | Civitai
与 Midjourney 相比,Stable Diffusion 的缺点有:
对电脑配置有要求
在本地用 SD 生成图像和训练模型都需要显卡做支撑,所以 SD 对电脑显卡有要求。最好是 Nvidia 的显卡(N 卡),显存至少 4G,不然图像的生成速度非常非常非常慢(不是夸张),也容易出现报错或系统崩溃。如果你想自己训练模型,最好用高配置的台式机,显卡选 40 系列及以上,显存最低 12G,CPU 选 Intel i7 或者以上,内存越大越好。
检查电脑显存的方法(windows):
鼠标放在工具栏,单击右键打开“任务管理器”,选择顶部的“性能”,进入后下拉查看 GPU 的部分,找到“专用 GPU 内存”,下面对应的数字就是电脑的显存。下图显示的电脑显存是 2G,生成一张最低配置的 512*512px 的图像需要 8 分钟,而 32G 显存的生成速度只需几秒,所以显存低的电脑不适合运行 Stable Diffusion。
需要较大的硬盘空间
因为 SD 所有文件都是安装在本地电脑上,而且生成不同的风格图像需要下载不同的模型,一个大模型至少 2G,假设你想要尝试 10 种风格,那 10 个大模型可能就要 30G 的空间。一般要求装 SD 的那个盘要有 100G 的剩余空间,最低不小于 40G,且最好不要安装在 C 盘。
想要生成好看的小姐姐图像,就需要下载文件接近 4 个 G 的 Chilloutmix 大模型,图片来源:ChilloutMix | Stable Diffusion Checkpoint | Civitai
入门学习难度更高
SD WebUI 的各种参数比 Midjourney 要复杂,而且很多功能都需要通过额外安装插件和模型来实现,因此我们需要了解各种参数的含义,不同的模型插件的使用方法,可能还需要了解背后的原理知识,因此入门学习的难度比 Midjourney 高。
一个功能配置较完整的 SD webUI 汉化操作界面。
高质量风格有局限性,不够灵活
SD 目前的高质量的图像生成模型多集中在真人、游戏和二次元插画方面, 而且换一个风格就需要下载一种模型;而 Midjourney V5 可以仅通过文本提示词就快速生成各种类型和风格的高质量图像。
看完上面的内容,想必大家对 Stable Diffusion 适合的使用场景、自己的电脑能否撑起 Stable Diffusion 已经有基本了解。下面为大家推荐 6 个 B 站上的高质量免费 Stable Diffusion 入门教程,包括如何下载 SD 整合安装包,了解 SD 的操作界面和各种参数,不同模型插件的安装和使用以及训练自己的 lora 模型等,教程内容全面、讲解细致,即使是零基础的小伙伴也能无障碍入门 ~
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
👉[[CSDN大礼包:《StableDiffusion安装包&AI绘画入门学习资料》免费分享]](安全链接,放心点击)
对于0基础小白入门:
如果你是零基础小白,想快速入门AI绘画是可以考虑的。
一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案
包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!