(待完成)通过 ComfyUI 部署 Z-Image 本地模型

通过 Windows 电脑部署本地文生图 AI 工具,本地已经跑起来了,看看有什么疑难杂症,总结一些操作经验。

知识点:
Z-Image 是由阿里巴巴通义实验室开源的 AI 图像生成模型;
ComfyUI 一款基于节点流程的 AI 绘图工具,完善的图形化界面。

配置说明:
电脑内存最低16G,显卡最低8G显存,硬盘空间最低40G,NVIDIA 显卡。
N卡,如果开启CPU Offload只需要 12GB 空闲内存和 4GB 显存即可部署模型。

扩散模型显存需求质量速度适用场景
BF16 (原始版)~16GB100%基准RTX 4080/4090,专业工作
FP8 Scaled~6GB95-98%1.2倍RTX 3060/4060,最佳平衡
SVDQ int4 (r256)~4-5GB90-93%2-3倍RTX 2060/3050,入门显卡
SVDQ fp4 (r128)~3-4GB85-90%3倍RTX 5xxx 系列,实验性

本文配置环境:
Windows11、i7 CPU、32G内存、6G显存,开启 CPU Offload,CPU占用99% GPU占用99%,选取模型FP8 生图片尺寸:768768 和bf16 生图片尺寸:10241024,流畅运行,bf16 生图约 200 秒,FP8生图约 60 秒,使用 2套 LoRA 生图。

相关链接

ComfyUI:
https://www.comfy.org/zh-cn/download

Z-Image:
https://huggingface.co/Comfy-Org/z_image

Z-Image-Turbo
https://huggingface.co/Comfy-Org/z_image_turbo

Z-Image-Turbo (FP8)
https://civitai.com/models/2169712

C站(模型、提示词):
https://civitai.com/

Z-Image版本对比:

Z-Image-Turbo:面向部署与生产优化的蒸馏版本,强调速度与低显存
Z-Image(Base/完整版):未蒸馏基础检查点,强调质量与可训练性
Z-Image-Edit:图像编辑专用
Z-Image-Omni-Base:兼具生成与编辑能力,多样化起点

简易教程

下载并安装 ComfyUI 桌面版,它会自动检测系统环境,图形化界面会告知你缺少什么,安装Python3.11以及Git,打开程序后选择模板,加载 Z-Image 工作流,如果你的模型位置放好了,模板会自动选择模型,也可以手动切换模型。

ComfyUI 部署 Z-Image-Turbo 文档
模型位置 qwen_3_4b.safetensors,放在 ComfyUI/models/text_encoders/
模型位置 z_image_turbo_bf16.safetensors,放在 ComfyUI/models/diffusion_models/
模型位置 ae.safetensors,放在 ComfyUI/models/vae/

模型位置 z_image_turbo_FP8.safetensors,放在ComfyUI/models/checkpoints/

经验说明

  • 模型大多数在海外需要依赖国内镜像站点下载,或者下载网友们发布在各国内网盘的模型。
  • BF16、FP8 模型底子很好,打中文名字能直接出图,如:周杰伦喝汽水
  • 只要 LoRA 选的好,你想的它都能出。文生图的提示词非常重要,要发挥高考写作文的水平。

相关链接

huggingface.co 镜像站
https://hf-mirror.com/
https://modelscope.cn/models/Tongyi-MAI/Z-Image-Turbo

CPU Offload
https://developer.nvidia.com/cuda-downloads

部署教程
https://linux.do/t/topic/1274043/
https://blog.csdn.net/m0_52537869/article/details/156565438
https://www.bilibili.com/read/cv44774694

还没有评论,来抢沙发吧

发表评论