自己搭个StableDiffusion来AI搓图吧

简介

①、StableDiffusion是个啥？

利⽤扩散模型进⾏图像⽣成的产品

⽤我不及格的语⽂来说的话，就是使⽤模型，结合你给的咒语，来⽣成⼀张或者多张图⽚。

②、这⾥浏览器端使⽤的是StableDiffusion WebUI

这个就是，官⽅团队开发的⼀套UI操作界⾯，降低其使⽤难度，让⽤户可以不写代码就可以进⾏搓图(念咒语)和炼丹(训练模型)

③、Mac还可以使⽤mochi Diffusion客户端

mochi Diffusion 内置了 Core ML Stable Diffusion框架

macOS 13.1版本就可以运⾏

github.com/apple/ml-st…

开始SD

⽹上有很多⼀键安装，以下步骤可能需要科学上⽹，所以，可以考虑离线安装

⼀、环境与服务

①、安装git。

②、安装python 3.10.6（注意版本）

在 www.python.org/downloads 下载

Mac 可以使⽤brew install python@3.10.6下载

Mac 安装python成功后，可以查看⼀下本地python版本，因为Mac默认会有⼀个python版本(系统版本不同，python版本不同)

使⽤ brew link python @3.10 将Mac⾃身Mac的软链接修改为3.10.6版本

查看python位置 使⽤ which python 或者 whereis python

③、git clone github.com/AUTOMATIC11…

④、命令⾏cd到stable-diffusion-webui

然后 ./webui.sh安装相关依赖（如果遇到安装失败，试⼀试开全局）。安装完成后，在当前⽬录，运⾏ ./webui.sh 看到 http://127.0.0.1:7860 那么你就可以开始玩耍了。

⑤、模型

官⽅模型 huggingface.co/CompVis/sta…

爆改模型 civitai.com/

⑥、所需配置 理论上大部分现在电脑都可以，无就是快慢。我家的GTX960都可以。。不过就是很慢很慢。。。

模型简介

官⽅模型⽐较单⼀，没有整什么活⼉

C站的模型⾮常之跳脱，也很好玩，甚⾄还可以使⽤Lora(鄙⼈认为就是美颜效果)和模型结合⼀起来搓图

注意：C站登录后，会有年龄限制的图⽚，需要开启过滤，来进⾏NSFW

添加过滤之后，可以有效防⽌社死

开搞

1、打开前文提到的 http://127.0.0.1:7860 看到一个 类似于

诶？这都是些啥？

大概玩法

1、比如你看到了人家发出来搓的图，很好看，你也想搓一个类似的，但是你不知道他的咒语 把他的图下载下来，然后丢到搭建的SD的Png Info里

然后，你会得到类似于下面的咒语。然后点击Generate，搓它！！！

Lora

需要选择lora，自己将下载好的lora丢在stable-diffusion-webui/models/Lora目录后， 这里点击refresh就好，不需要重启服务

然后在咒语栏里，以及下面的各项参数中，结合自己的电脑配置，进行随意配置 然后，点击generate 等待结果出现就好

 等待的时间，跟电脑配置，以及咒语和相关参数有关

不单单，可以搓类似于人物的，只要你模型和lora以及你的咒语对应，你可以搓⻛景，二次元，甚至⻋，高达，等等等。 文字生图，图生图，比较常用，我也就摸索了这么多，后面复杂的功能，比如训练lora之类，如有兴趣可以自行摸索~

文字生图之后，这张图也可以继续图生图~

如果你是Mac M1+，你还可以玩个新奇的东西。

Mochi Diffusion

mochi Diffusion 内置了 Core ML Stable Diffusion框架

1、下载

github.com/godly-devot…

2、下载模型

huggingface.co/coreml?sort… 下载好之后，模型放在 /Users/你Mac的名字/Documents/MochiDiffusion/models/

所需配置:

M1及以上 系统macOS 13.1+ Xcode 14.2以上(手动安装就行) 安装Xcode 在命令输入 xcode-select --install

第一次打开 大概这个样子

放模型的位置

注:mochi Diffusion 对于Mac做了很多优化，使得出图速度快，而且吧，反正就是很强大就对了 其余的跟SD差不多，正反咒语，不过简化了很多操作