AI绘画:快速上手stable diffusion

点击↑上方↑蓝色“编了个程”关注我~

c89da018bb36abf8cc6642cbbb7c9b4e.png

这是Yasin的第 89 篇原创文章

358c34ed1361cef1a4dfae89f2d6dd95.png

mj vs sd

最近随着Chat GPT的大火,AI绘画也火了起来。尤其是midjourney(以下简称mj),能够通过文本关键词生成AI图片,还能指定各种风格,简直是我们这种又菜又爱玩的福音。

下面是我用mj随便画的一些图:

f173d7dd9dcaa35a334137190df1df0f.jpeg

mj上手比较容易,我这里就不详细讲了,感兴趣的同学可以去b站或者抖音搜索,有较多的教程。友情提示:「使用mj需要科学上网」

在了解mj的过程中,我又了解到另一款AI绘画工具,叫stable diffustion(以下简称sd)。发现相比于mj,sd有以下的优势:

  1. 本地运行,不用科学上网:下载完对应的资源后,就不用科学上网了;

  2. 开源免费:sd是开源免费的绘画平台,而mj是收费的,每个账号有免费的额度,可以画几十张图;

  3. 高度定制化:sd有开源的各种模型和插件,也可以自己训练风格、局部修改、细节调整,甚至可以用自己的照片、宠物的照片高度定制化属于自己期望风格的AI绘画。

所以今天整理一下sd上手的基本资料,供大家参考。

安装

sd是一个AI绘画平台,底层是各种AI绘画模型(其中以SD模型为base),上层是UI界面。

首先需要安装sd的web界面。是一个github开源项目,地址是:GitHub – AUTOMATIC1111/stable-diffusion-webui: Stable Diffusion web UI。

对于mac os M系列的芯片而言,有专门的安装文档:Installation on Apple Silicon · AUTOMATIC1111/stable-diffusion-webui Wiki · GitHub

安装过程比较慢,需要下载大量的python资源,可以用这个命令设置python源为国内清华大学的,这样下载速度会快很多:

pip config set global.index-url https://pypi.tuna.tsinghua.edu.cn/simple

安装完web界面后,可以下载对应的sdk模型。应该是内置了sd 1.5的,不过2.0对风景类型的有一些优化,也可以安装一个2.0和2.1的,后面可以随时切换。

05a84804009154aec1c8cd9a4b82e4fd.png

还有一个叫easy diffusion的网站,号称能一键安装,但我自己实操下来中途安装失败了,没有找到解决办法,所以还是自己去上面的github地址安装的。

界面操作

安装好后,运行webui.sh就可以启动了。打开界面一般长这样:

a77d3a782f522f03f39ea3f4008a3820.png

大概解释一下:

  1. 模型选择:可以选择官方的模型,或者自己加载的第三方模型,比如我目前这个就是社区里面基于sd1.5训练的二次元风格模型。点击旁边的刷新按钮可以刷新刚刚安装好的模型。

  2. 操作类型,比较常用的就是文字到图片,图片到图片。后面的有些是训练的插件,不展开讲。

  3. 提示词:生成图片最重要的部分,就是用文字来描述自己的需求,其中又有负面提示词,用来去掉某些元素。提示词有一些特殊的规则,后面单独开文章讲。

  4. 参数设置区,有很多参数。一般画人都会勾选面部修复,然后设置好图片的宽高,自由发挥的程度。越低越自由,越高越贴合你的词,一般推荐7~10。可以设置每批几张、一共跑几批。

  5. 图片操作区,可以把生成好的图片保存,或者发到图生图进行后续处理。

模型和Lora

sd官方的模型就是上面安装页面的1.5, 2.0, 2.1这些,也可以去huggingface.co 这个网站下载。

而社区模型比较推荐的是civitai.com这个网站。里面有大量的别人训练好的模型或者Lora,有各种风格。虽然我不知道为什么基本都是妹子的模型…

1c67baa378eb159bf50ecb7896204d55.jpeg


这里解释一下模型和Lora的大概区别:

  • 模型:基于sd原本的模型,通过大量的图片训练后的模型,可以理解为换了一个画家。

  • Lora:基于sd原本的模型,训练后的插件,可以结合模型使用,可以理解为加了一层ps。

一般模型比较大(几个GB大小),而Lora比较小,通常在MB级别。还有其他的模型类型,但是我自己一般比较常用的就是基础模型和Lora。具体模型的原理和区别这里也不展开讲了。

89e1201acc3dd22ddddf6ec8b5c5ef38.png

文章出处登录后可见!

已经登录?立即刷新

共计人评分,平均

到目前为止还没有投票!成为第一位评论此文章。

(0)
青葱年少的头像青葱年少普通用户
上一篇 2023年5月26日
下一篇 2023年5月26日

相关推荐