如何给网站做引流,深圳品牌蛋糕店有哪些品牌排行,画册设计流程,乐清市宏杉网络科技有限公司文章标题一、Flux Kontext Dev1.关于 FLUX.1 Kontext Dev1.1 版本说明1.2 工作流说明1.3 模型下载2.Flux.1 Kontext Dev 工作流2.1 工作流及输入图片下载2.2 按步骤完成工作流的运行3.Flux Kontext 提示词技巧3.1 基础修改3.2 风格转换3.3 角色一致性3.4 文本编辑4.常见问题解决…
文章标题一、Flux Kontext Dev1.关于 FLUX.1 Kontext Dev1.1 版本说明1.2 工作流说明1.3 模型下载2.Flux.1 Kontext Dev 工作流2.1 工作流及输入图片下载2.2 按步骤完成工作流的运行3.Flux Kontext 提示词技巧3.1 基础修改3.2 风格转换3.3 角色一致性3.4 文本编辑4.常见问题解决4.1 角色变化过大4.2 构图位置改变4.3 风格应用不准确5.核心原则6.最佳实践模板二、字节跳动 USO1.字节跳动 USO ComfyUI 原生工作流1.1 工作流和输入1.2 模型链接1.3 工作流说明1.4 补充说明一、Flux Kontext Dev ComfyUI Flux Kontext Dev 原生工作流示例。 1.关于 FLUX.1 Kontext Dev
FLUX.1 Kontext 是 Black Forest Labs 推出的突破性多模态图像编辑模型支持文本和图像同时输入能够智能理解图像上下文并执行精确编辑。其开发版是一个拥有 120 亿参数的开源扩散变压器模型具有出色的上下文理解能力和角色一致性保持即使经过多次迭代编辑也能确保人物特征、构图布局等关键元素保持稳定。
与 FLUX.1 Kontext 套件具备相同的核心能力 角色一致性在多个场景和环境中保留图像的独特元素例如图片中的参考角色或物体。 局部编辑对图像中的特定元素进行有针对性的修改而不影响其他部分。 风格参考根据文本提示在保留参考图像独特风格的同时生成新颖场景。 交互速度图像生成和编辑的延迟极小。
虽然之前发布的 API 版本提供了最高的保真度和速度但 FLUX.1 Kontext [Dev] 完全在本地机器上运行为希望进行实验的开发者、研究人员和高级用户提供了无与伦比的灵活性。
1.1 版本说明
[FLUX.1 Kontext [pro] - 商业版本专注快速迭代编辑FLUX.1 Kontext [max] - 实验版本更强的提示遵循能力FLUX.1 Kontext [dev] - 开源版本本教程使用12B参数主要用于研究
目前在 ComfyUI 中你可以使用所有的这些版本其中 Pro 及 Max 版本 可以通过 API 节点来进行调用而 Dev 版本开源版本请参考本篇指南中的说明。
1.2 工作流说明
目前在本篇教程中我们涉及了两类工作流本质上他们其实是相同的
使用了组节点 FLUX.1 Kontext Image Edit 的工作流使得整个界面和工作流复用起来变得简单而另一个工作流没有使用组节点是完整的原始工作流。
使用组节点的主要优点是工作流简洁你可以复用组节点来实现复杂的工作流快速复用节点组另外在新版本的前端中我们也为 Flux.1 Kontext Dev 增加了一个快速添加组节点的功能 这个功能目前只是一个实验性的新功能可能在未来版本中进行调整。 请确保你的 ComfyUI 已经更新。
ComfyUI 下载ComfyUI 更新教程
本指南里的工作流可以在 ComfyUI 的工作流模板中找到。如果找不到可能是 ComfyUI 没有更新。
如果加载工作流时有节点缺失可能原因有
你用的不是最新开发版nightly。你用的是稳定版或桌面版没有包含最新的更新。启动时有些节点导入失败。
1.3 模型下载
为了使本篇指南的工作流能够顺利运行你先需要下载下面的模型文件,你也可以直接加载对应工作流下直接获取模型的下载链接对应的工作流已经包含了模型文件的下载信息。
Diffusion Model
flux1-dev-kontext_fp8_scaled.safetensors 如果你想要使用原始权重可以访问 Black Forest Labs 的相关仓库获取原始模型权重进行使用。
VAE
ae.safetensors
Text Encoder
clip_l.safetensorst5xxl_fp16.safetensors 或 t5xxl_fp8_e4m3fn_scaled.safetensors 安装aria2快速下载模型几乎能将我家1000M的宽带跑满每秒8090M,接下来的介绍模型都会给出安装命令。
apt install aria2aria2c https://huggingface.co/comfyanonymous/flux_text_encoders/resolve/main/t5xxl_fp8_e4m3fn_scaled.safetensors -o SourceCode/ComfyUI/models/text_encoders/t5xxl_fp8_e4m3fn_scaled.safetensors auto-file-renamingfalse --allow-overwritefalsearia2c https://huggingface.co/Comfy-Org/flux1-kontext-dev_ComfyUI/resolve/main/split_files/diffusion_models/flux1-dev-kontext_fp8_scaled.safetensors -o SourceCode/ComfyUI/models/diffusion_models/flux1-dev-kontext_fp8_scaled.safetensors auto-file-renamingfalse --allow-overwritefalse小技巧你要是打不开https://huggingface.co可以将其换成为https://hf-mirror.com/试一试 模型保存位置 ComfyUI/
├── models/
│ ├── diffusion_models/
│ │ └── flux1-dev-kontext_fp8_scaled.safetensors
│ ├── vae/
│ │ └── ae.safetensor
│ └── text_encoders/
│ ├── clip_l.safetensors
│ └── t5xxl_fp16.safetensors 或者 t5xxl_fp8_e4m3fn_scaled.safetensors2.Flux.1 Kontext Dev 工作流
这个工作流是正常的工作流不过使用了 Load Image(from output) 节点来加载需要编辑的图像可以让你更方便地获取到编辑后的图像从而进行多轮次编辑
2.1 工作流及输入图片下载
下载下面的文件并拖入 ComfyUI 中加载对应工作流
输入图片 2.2 按步骤完成工作流的运行 你可参考图片中的序号来完成图工作流的运行
在 Load Diffusion Model 节点中加载 flux1-dev-kontext_fp8_scaled.safetensors 模型在 DualCLIP Load 节点中确保 clip_l.safetensors 及 t5xxl_fp16.safetensors 或 t5xxl_fp8_e4m3fn_scaled.safetensors 已经加载在 Load VAE 节点中确保加载 ae.safetensors 模型在 Load Image(from output) 节点中加载提供的输入图像在 CLIP Text Encode 节点中修改提示词仅支持英文点击 Queue 按钮或者使用快捷键 Ctrl(cmd) Enter(回车) 来运行工作流
3.Flux Kontext 提示词技巧
3.1 基础修改
简单直接Change the car color to red保持风格Change to daytime while maintaining the same style of the painting
3.2 风格转换
原则
明确命名风格Transform to Bauhaus art style描述特征Transform to oil painting with visible brushstrokes, thick paint texture保留构图Change to Bauhaus style while maintaining the original composition
3.3 角色一致性
框架
具体描述The woman with short black hair而非she保留特征while maintaining the same facial features, hairstyle, and expression分步修改先改背景再改动作
3.4 文本编辑
使用引号Replace joy with BFL保持格式Replace text while maintaining the same font style
4.常见问题解决
4.1 角色变化过大
❌ 错误Transform the person into a Viking ✅ 正确Change the clothes to be a viking warrior while preserving facial features
4.2 构图位置改变
❌ 错误Put him on a beach ✅ 正确Change the background to a beach while keeping the person in the exact same position, scale, and pose
4.3 风格应用不准确
❌ 错误Make it a sketch ✅ 正确Convert to pencil sketch with natural graphite lines, cross-hatching, and visible paper texture
5.核心原则
具体明确 - 使用精确描述避免模糊词汇分步编辑 - 复杂修改分为多个简单步骤明确保留 - 说明哪些要保持不变动词选择 - 用change、“replace而非transform”
6.最佳实践模板
对象修改 Change [object] to [new state], keep [content to preserve] unchanged
风格转换 Transform to [specific style], while maintaining [composition/character/other] unchanged
背景替换 Change the background to [new background], keep the subject in the exact same position and pose
文本编辑 Replace [original text] with [new text], maintain the same font style 记住 越具体越好Kontext 擅长理解详细指令并保持一致性。 二、字节跳动 USO 使用字节跳动 USO 模型实现统一风格和主体驱动生成 USO (Unified Style-Subject Optimized) 是字节跳动 UXO 团队开发的模型统一了风格驱动和主体驱动生成任务。 基于 FLUX.1-dev 架构构建该模型通过解耦学习和风格奖励学习 (SRL) 实现了风格相似性和主体一致性。
USO 支持三种主要方法
主体驱动将主体放置到新场景中同时保持身份一致性风格驱动基于参考图像将艺术风格应用于新内容组合模式同时使用主体和风格参考
相关链接
项目主页GitHub模型权重
1.字节跳动 USO ComfyUI 原生工作流 请确保你的 ComfyUI 已经更新。
ComfyUI 下载ComfyUI 更新教程
本指南里的工作流可以在 ComfyUI 的工作流模板中找到。如果找不到可能是 ComfyUI 没有更新。
如果加载工作流时有节点缺失可能原因有
你用的不是最新开发版nightly。你用的是稳定版或桌面版没有包含最新的更新。启动时有些节点导入失败。
1.1 工作流和输入
下载下方图像并拖拽到 ComfyUI 中以加载对应的工作流。
使用下面的图片作为输入 1.2 模型链接
checkpoints
flux1-dev-fp8.safetensors
loras
uso-flux1-dit-lora-v1.safetensors
model_patches
uso-flux1-projector-v1.safetensors
clip_visions
sigclip_vision_patch14_384.safetensors
安装aria2快速下载模型几乎能将我家1000M的宽带跑满每秒8090M,接下来的介绍模型都会给出安装命令。
apt install aria2aria2c https://huggingface.co/Comfy-Org/USO_1.0_Repackaged/resolve/main/split_files/loras/uso-flux1-dit-lora-v1.safetensors -o SourceCode/ComfyUI/models/loras/uso-flux1-dit-lora-v1.safetensors --auto-file-renamingfalse --allow-overwritefalsearia2c https://huggingface.co/Comfy-Org/USO_1.0_Repackaged/resolve/main/split_files/model_patches/uso-flux1-projector-v1.safetensors -o SourceCode/ComfyUI/models/model_patches/uso-flux1-projector-v1.safetensors --auto-file-renamingfalse --allow-overwritefalsearia2c https://huggingface.co/Comfy-Org/sigclip_vision_384/resolve/main/sigclip_vision_patch14_384.safetensors -o SourceCode/ComfyUI/models/clip_vision/sigclip_vision_patch14_384.safetensors --auto-file-renamingfalse --allow-overwritefalse小技巧你要是打不开https://huggingface.co可以将其换成为https://hf-mirror.com/试一试 请下载所有模型并将它们放置在以下目录中 ComfyUI/
├── models/
│ ├── checkpoints/
│ │ └── flux1-dev-fp8.safetensors
│ ├── loras/
│ │ └── uso-flux1-dit-lora-v1.safetensors
│ ├── model_patches/
│ │ └── uso-flux1-projector-v1.safetensors
│ ├── clip_visions/
│ │ └── sigclip_vision_patch14_384.safetensors1.3 工作流说明 加载模型 1.1 确保 Load Checkpoint 节点已加载 flux1-dev-fp8.safetensors1.2 确保 LoraLoaderModelOnly 节点已加载 dit_lora.safetensors1.3 确保 ModelPatchLoader 节点已加载 projector.safetensors1.4 确保 Load CLIP Vision 节点已加载 sigclip_vision_patch14_384.safetensors 上传图像 2.1 点击 Upload 上传我们提供的输入图像2.2 ImageScaleToMaxDimension 节点将会缩放你的输入图像用于内容参考512px 会保留更多的角色特征但如果你仅使用角色头部作为输入最终输出图像往往会有角色占据太多空间的问题(或者结果很糟)。设置为 1024px 会得到更好的结果。 在示例中我们只使用 content reference 图像输入。如果你想使用 style reference 图像输入可以使用 CtrlB 绕过标记的节点组。 编写你的提示词或保持默认设置 如果需要调整输出图像尺寸 EasyCache 节点用于推理加速但也会牺牲一些质量和细节。如果不需要使用可以用 CtrlB 绕过它。 点击 Run 按钮或使用快捷键 Ctrl(Cmd) Enter 运行工作流
1.4 补充说明
仅使用风格参考
我们在同一个工作流中也提供了仅使用风格参考的版本
唯一的区别是我们替换了 content reference 节点仅使用 Empty Latent Image 节点来创建一个我们需要的图像大小
你也可以 绕过CtrlB 整个 Style Reference 组将工作流用作文本到图像的工作流也就是这个文本存在 4 个变体
仅使用内容主体参考仅使用风格参考混合内容及风格参考作为文生图工作流
