【NovelAI】浅玩一下AI绘画【或许持续更新】

只想看图的跳过往下拉

写在前面

前两天某公司的训练模型被强行开源

所有人的绘画水平瞬间提高

某种意义上实现了“成熟的数位板自己画画”

这哪能忍，如此成熟的“数位板”必须要整一个

简单介绍

如果你也想自己搞一个
可以参考下面的项目地址及一些相关内容链接

项目地址：
https://github.com/AUTOMATIC1111/stable-diffusion-webui
https://rentry.org/sdmodels#
一些入门教程：
https://stable-diffusion-book.vercel.app/
Tag来源：
https://danbooru.donmai.us/

由于AI绘画主要依赖于显卡性能
因此不推荐4G以下显存卡及核显用户尝试（会遇到各种各样诡异的问题）
此外该模型对AMD显卡的适配似乎也有一些问题，可以去搜索相应解决方案

我在本次尝试中使用的电脑配置如下
Nvidia RTX3070 8G（重点）
AMD 3800X [email protected]（对CPU要求不大）
32G DDR4 3200MHz（也要求不大）
40Step生成512*512的图像大概每张会花费6-7秒

我采取的方案为生成一个较低分辨率的图片
然后采用AI升采样来进一步提高细节及锐化

关于具体的生成流程
由于本身十分玄学且涉及了很多专业知识
所以这里仅作简单讲解

简单来说，
就是首先将成千上万的已经存在的画进行人工特征分类
（例如某张画里面有【大眼睛】【一个女孩子】【海边】这样的特征）
AI通过主动学习这成千上万的图片与相应图片特征的联系（即识图能力）
并自己尝试生成图片使用刚才学习到的识图能力进行自我反省（对抗算法）
来达到生成图片的目的

23/5/31更新：
这里的描述并不是十分准确
此处的对抗算法主要指GAN生成模型的机制
而Diffusion与GAN又有很大不同
详细将会在之后的文章中介绍

23/9/23更新：
Stable Diffuison的详细介绍已发布
请参考以下链接
https://www.cyberwei.com/archives/230608jp
https://www.cyberwei.com/archives/230715-2en

当我想要一个图片的时候
我只需要输入我想要的图片特征（以及不想要的）
AI就可以根据过往的经验迭代生成图像了

举个例子

Positive prompt: {{{masterpiece}}},
home, sitting, looking upward
1girl, femeal child, small breasts,
black hair, short, cat ears, fox ears
mesugaki smile,surprised,

Negative prompt: ugly, fat, obese, chubby, (((deformed))), [blurry], bad anatomy,
disfigured, poorly drawn face, mutation, mutated, (extra_limb),
(ugly), (poorly drawn hands fingers), messy drawing, morbid,
mutilated, tranny, trans, trannsexual, [out of frame], (bad proportions),
(poorly drawn body), (poorly drawn legs), worst quality, low quality,
normal quality, text, censored, gown, latex, pencil