南京建站平台,seo营销论文,兰州建网站的,域名的申请流程本文收录于《AI绘画从入门到精通》专栏#xff0c;专栏总目录#xff1a;点这里。 大家好#xff0c;我是水滴~~
我们在《Stable Diffusion WebUI 界面介绍》 时#xff0c;第一个就讲到了 Stable Diffusion 模型#xff0c;那么这个模型是什么#xff1f;该从哪儿下载专栏总目录点这里。 大家好我是水滴~~
我们在《Stable Diffusion WebUI 界面介绍》 时第一个就讲到了 Stable Diffusion 模型那么这个模型是什么该从哪儿下载下载后放到哪儿该怎么使用呢本篇文章将围绕着这几个问题来逐一讲述。 文章目录 一、什么是模型二、大模型的类型2.1 基础模型Base Model2.2 文件类型 三、大模型在哪儿下载3.1 CivitaiC站3.2 LiblibAI哩布哩布AI 四、大模型放哪里五、使用大模型生成图片 一、什么是模型 Stable Diffusion 是一种基于扩散过程的图像生成模型由 CompVis、Stability AI 和 LAION 共同开发。该模型通过模拟扩散过程将噪声图像逐渐转化为目标图像可以生成高质量、高分辨率的图像。 Stable Diffusion 模型经过大量的图文模型进行训练具有强大的生成能力可以胜任多种风格如写实、原画、2.5D等并能实现顶级的光影效果和人物风景细节。 简单来理解Stable Diffusion 是经过训练出来的可以生成图片的模型。人们可以针对性的来训练某种风格的模型所以我们会看到有很多种模型。我们想要生成什么风格类型的图片就选择对应的模型。 模型是生成图片的基础我们想要出什么图就选择什么样的模型所以我们一般称它为大模型、底模型、主模型。 在下图中有三种模型每一种模型都有自己的风格 Dark Sushi Mix 大颗寿司Mix动漫风格、2.5DDisney Pixar Cartoon type B3D 风格、迪士尼皮克斯动画片majicMIX realistic 麦橘写实写实风格、亚洲人面孔
二、大模型的类型
2.1 基础模型Base Model
Stable Diffusion 的基础模型有很多版本而使用最广泛的是 SD1.5 和 SDXLStable Diffusion Extra Large绝大部分模型都是基于这两个版本来训练出来的。
下面是这两个版本的差异
图像质量和生成速度SDXL在图像质量方面相对于SD 1.5有了显著的提升。SDXL能够生成更高质量的图像具有更强的细节和更真实的质感。此外SDXL的生成速度也比SD 1.5更快这得益于其更大的模型规模和更高效的计算资源利用。模型规模和训练数据SDXL是一个更大规模的模型其参数数量比SD 1.5更多。这意味着SDXL能够处理更复杂、更精细的图像生成任务。同时SDXL的训练数据量也比SD 1.5更大这有助于提高其生成图像的多样性和准确性。应用场景由于SDXL在图像质量和生成速度方面的优势它更适合用于需要高质量图像生成的应用场景如广告、游戏设计、影视制作等。而SD 1.5则更适合用于一些对图像质量要求不高、更注重生成速度的场景如社交媒体分享、个人创作等。
2.2 文件类型
Stable Diffusion 模型的文件类型主要包括以下几种
.ckpt这是 TensorFlow 和 PyTorch 等深度学习框架常用的模型检查点checkpoint文件扩展名。它通常用于保存和加载模型在训练过程中的权重和状态。.safetensors这是一种特定的文件格式用于保存模型的权重和参数。在某些情况下Stable Diffusion模型可能会使用这种格式来存储其模型文件。.pt这是PyTorch深度学习框架使用的模型文件扩展名。PyTorch是一个流行的深度学习框架因此许多模型包括Stable Diffusion可能会使用这种格式来存储模型文件。 在这几种模型文件中最常用的是 .ckpt 和 .safetensors 两种类型。 .safetensors 是 HuggingFace 推出的新的模型存储格式。与 .ckpt 不同 .safetensors 格式不会包含执行代码因此不需要反序列化。这意味着加载模型时 .safetensors 会更快也更安全。目前.safetensors 已经成为主流的 Stable Diffusion 模型存储格式。。 三、大模型在哪儿下载
那么在哪里可以下载我们想要的模型呢这里给大家推荐两个网站
3.1 CivitaiC站
CivitaiC站是全球最大的 Stable Diffusion 模型的分享网站用户可以免费下载模型。C站的作者来自于全球各地模型种类繁多是 AI 绘画爱好者的首选。 C站是国外网站需要魔法才能打开。也可以关注我的专栏我会定期分享 C站上优秀的模型。 3.2 LiblibAI哩布哩布AI
LiblibAI哩布哩布AI是国内最大的 Stable Diffusion 模型的分享网站上面大部分模型用户可以免费下载。哩布哩布AI 上的模型中国元素居多非常受国内爱好者的青睐。
四、大模型放哪里
模型下载完后通常是这样子的
我们将它放到 Stable Diffusion WebUI 主目录中的 \models\Stable-diffusion 目录下 我们点击模型列表右侧的【刷新】按钮模型就会被加载到列表中 选择模型会有一个加载的过程速度与磁盘有关固态盘加载的会快一些 选择好后我们就可以使用它了 五、使用大模型生成图片
选择好模型后输入提示词我们先来输入一个简单的a girl表示生成一个女孩然后点击【生成】按钮 生成需要一个过程显卡越好越快右下角可以看到生成的过程和进度 生成结束后就可以看到完整图片了点击后可以放大 这样该模型的第一张图就生成好了。
我们再来一张这次提示词增加了绿色头发a girl, green hair表示生成一个绿头发的女孩 生成的结果