ComfyUI 添加了对 Stable Diffusion 3.5 Large 新 ControlNet 模型(Blur、Canny 和 Depth)的支持,这些模型各有 80 亿参数,可免费用于商业和非商业用途。
- 模型特点
- Blur:可实现超高保真放大,适合将低分辨率图像拼接成大而详细的视觉效果,支持 8K 和 16K 分辨率。
- Canny:利用 Canny 边缘图构建生成图像,对插画很有用且适用于所有风格。
- Depth:使用 DepthFM 生成的深度图引导图像生成,适用于建筑渲染、3D 资产纹理处理等对图像构图有精确控制需求的场景。
- 使用方法
- 更新 ComfyUI 到最新版本,确保 all-in-one SD3.5 large checkpoints 在 models\checkpoints 文件夹中。
- 分别下载对应模型文件(sd3.5_large_controlnet_blur.safetensors、sd3.5_large_controlnet_canny.safetensors、sd3.5_large_controlnet_depth.safetensors)并放入 models\controlnet 文件夹。
- 将示例图像拖放到 ComfyUI 中加载工作流程(Blur、Canny、Depth 各有其工作流程,Depth 工作流程包含一个深度图处理自定义节点)。此外,包括 SD3.5 Medium(2B)变体和新控制类型的其他 ControlNet 模型也即将推出。