影楼公共网站,学历提升,动漫设计与制作就业前景怎么样,移动互联网公司常用采样器、目前有20个采样步骤越多每个步之间的降噪越小#xff0c;减少采样过程中的截断误差#xff0c;结果越好
学微分方程求解器
Euler#xff08;最简单的采样器#xff0c;采样过程中不加随机噪声#xff0c;根据采样计划来执行每个步骤中的噪声#xff0c;并使…常用采样器、目前有20个采样步骤越多每个步之间的降噪越小减少采样过程中的截断误差结果越好
学微分方程求解器
Euler最简单的采样器采样过程中不加随机噪声根据采样计划来执行每个步骤中的噪声并使用欧拉方法减少适当数量的噪声以适应噪声计划到最后一步为 0、Heun是对 Euler 的更精确的改进但需要在每个步骤中预算两次噪声处理速度相对会更慢一些、LMS解决学微分方程的标准方法采样速度与 Euler 相同
祖先采样器.
随机采样采样过程具一定的随机性缺点是图像不收敛
Euler a在每个步骤中减去比『应该』更多的噪声并添加一些随机的噪声以接近于噪声计划去噪图像取决于前面步骤添加的特定噪声、DPM2 a、DPM2s a、DPM2 a Karras、DPM 2S a Karras
官方采样器,最早的采样器算法
DDIM、使用去噪后的图像来近似最终图像并使用噪声预测估计的噪声来近似图像方向PLMS 是 DDIM 的新版且更快速的替代品DPM 和 DPMDPM2是 katherine Crowson 在 k-diffusion 项目中自创的灵感来源 DPM-Solever-2 和算法 2受采样器设置中的 sigma 参数影响 、DPM2 a祖先采样器的一种受采样器的 ETA 参数影响、DPM 2s a祖先采样器的一种受采样器的 ETA 参数影响 、DPM SDE受采样器的 ETA 参数影响、DPM fast 用于 steps 小于 20 的情况受采样器的 ETA 参数影响 、DPM 2M在速度和质量的平衡最好代表 m 的多步比上面的 s 单步在采样时会参考更多步而非当前步所以能有更好的质量、DPM adaptive 2022 年发布的扩散模型的新采样器DPM2 比 DPM 更准确但速度较慢DPM是对 DPM 的改进可以自适应的调整步长但会很慢不能保证在规定的采样步骤内完成.
带有 Karras 字样的采样器
使用了噪声时间表控制每个步骤的噪声水平随着采样步骤的增加减少了截断误差
UNiPC
是 2023 年发布的目前最快速的最新的采样方法 UNiPC sampling steps 10、UNiPC sampling steps 20、UNiPC sampling steps 30受 ODE 求解器中预测校正方法启发 可以在很少的步骤就可以实现高质量图像生成
常用的采样器
DPM 2M karras(20-30 步)、unpic15-25 步、如果想要高质量的图不收敛可以选择 DPM SED Karras,DDIM (10-15 步较快) 如果要简单的图可以选 Euler,heun 可以减少步骤以节省时间如果想要稳定可复线的图Euler a、DPM2 a、DPM 2s a、DPM2 a karras、DPM2 2s a karras,避免采用任何祖先采样器
常用模型
二次元代表Anything v5、Counterfeit v2.5、Dreamlike Diffusion、
标签与风格关键词
illustration,painting,sketch,drawing,painting,comic,anime,catoon
可以使用这些词语为关键词搜索对应的风格模型也可以使用它们在 Prompt 中激活模型风格特性。
写实代表Deliberate、Realistic Vision、LOFI(L.O.F.I)
标签与风格关键词
photography,photo,realistic,photorealistic,RAW photo
可以使用这些词语为关键词搜索对应的风格模型也可以使用它们在 Prompt 中激活模型风格特性。
2.5D 风代表NeverEnding Dream(NED)、Protogen (Realistic) 、国风 V3(GuoFeng3) 、lora 卡通证件照底模DreamShaper06-0.9
风格关键词
3D、render、chibi、digital art、concept art、{realistic}
可以使用这些词语为关键词搜索对应的风格模型也可以使用它们在 Prompt 中激活模型风格特性。
模型扩展名的区分
模型的类型是装着各种图片的容器官方模型网站https://huggingface.co
Stable Diffusion 大模型*.ckpt) 文件是用 pickle 序例化的。这意味着它有可能会包含恶意代码。加载这类型的模型应该确认可靠的来源。
*.safetensors 文件是用 numpy 保存的这意味着它们只是包含张量数据。没有任何代码。加载*.safetensors 文件更安全快捷。
emb 模型 嵌入式模型是一种用于生成图片语言理解组件它可以接受文本提示并产生 token embeddings模型有多种不同的训练方法例如 Textual InversionHypernetwork,Dreambooth 和 LoRA,这几种各有优劣势和应用场景。
VAE 模型具有颜色的校正功能可以让生成的图像更加鲜艳或者柔和初化的图像可能在这个图像的基础上进行细化和改进。低维的隐空间可以在这个空间中控制图像的风格和特征。
超网络模型hypernetworks) 可以用来对 Stable-diffusion 的模型进行风格迁移style transfer)。
LoRA 模型 体积小适合性能不足的电脑使用可以用少量的图片训练训练时间较短一般用于固定的人物服装动作。
模型的安装
官方模型网站 https://huggingface.co
将下载的模型文件放入 stable-diffusion-webui/models/下对应模型类型的文件目录中在 web UI 的模型选择后面重载即可看到新加入的模型models 目录下包含模型算法采样器。
