硬核：关于Stable Diffusion 模型

今天聊一下stable diffusion 最关键的几个点。checkpoint; vae; lora; embedding和hypernetwork。以上这几个再大佬的sd启动器，模型管理选项卡都能找到。

所以说他们的属性是模型。

01
checkpoint 模型

checkpoint体现在生成界面的左上角。是sd中最核心的模型。

其控制了整张照片的主题风格，在整个sd软件中最占储存空间的就是它，动辄1gb-2gb，这个模型的训练往往需要大量的图片数据与大量的算力才能实现。如果你想生成独特专一艺术风格的图片，选择一个正确的checkpoint 往往事半功倍。

checkpoint安装在哪儿呢？在我之前第一篇sd的ai绘画的文章中就有介绍。

安装地址：\安装解压软件目录\models\stable-diffusion

如果嫌麻烦也可以在启动器的模型管理直接下载。

02

变分自编码器 (vae)模型

vae在第二章基本原理中也有介绍，类似于一个压缩工具，它会将图片降维到潜空间，在图片生成结束后从潜空间解压出来。与此同时它还会根据模型中的概率参数对图片色彩，白平衡等进行调整。

安装地址：\安装解压软件目录\models\vae

也可以在启动器的模型管理直接下载。一般情况下很少用，有些checkpoint会提示使用，有时候图像生成效果不好也可以尝试使用不同的vae测试一下。

在生成器的这里可以调整vae

03

lora 模型

lora模型是比较小的一些风格模型，一般几百兆，对风格细节的把控非常到位，专注于细节的lora

安装地址：\安装解压软件目录\models\lora

一般lora体现在描述词中，跟描述概率一同出现。

lora:cyberpunkai:1代表lora浓度100%，lora:cyberpunkai:0.5代表lora浓度50%。

04

嵌入式(embedding)模型

最后一个embedding可以说是简化版的lora,一般很小几十k或几百k。在日常使用中，embedding 技术通常用于控制人物的特征。比如经典的坏手embedding模型，加入到反向提示词中，就更不容易生成坏手。

安装地址：\安装解压软件目录\embeddings

05

hypernetworks

安装地址：\安装解压软件目录\models\hypernetworks

hypernetworks是一种fine tune的技术，最开始由 novel ai 开发。hypernetworks是一个附加到stable diffusion model上的小型网络，用于修改扩散模型的风格。

ai绘画sd整合包、各种模型插件、gpt人工智能学习资料都已经打包好放在网盘中了，有需要的小伙伴可以文末扫码获取噢~

写在最后

aigc技术的未来发展前景广阔，随着人工智能技术的不断发展，aigc技术也将不断提高。未来，aigc技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，aigc技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，aigc技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。

感兴趣的小伙伴，赠送全套aigc学习资料和安装工具，包含ai绘画、ai人工智能等前沿科技教程，模型插件，具体看下方。

一、aigc所有方向的学习路线

aigc所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。

二、aigc必备工具

工具都帮大家整理好了，安装就可直接上手！

三、最新aigc学习笔记

当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。

四、aigc视频教程合集

观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

五、实战案例

纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

若有侵权，请联系删除