跳到正文
原文
Hugging Face Blog·· 2026-07-23精选AI 评分62

Diffusers 原生支持 Nunchaku 4-bit 扩散推理

Bringing Nunchaku 4-bit Diffusion Inference to Diffusers

AI 导读

Diffusers 现已原生支持 Nunchaku 的 SVDQuant 4-bit 推理,加载量化 checkpoint 只需调用 from_pretrained(),无需自定义 pipeline 或本地编译 CUDA。

推荐理由

Diffusers 原生接入 Nunchaku 4-bit 推理,给出显存与延迟对比数据,可据此判断消费级 GPU 跑扩散模型的门槛变化。

来源:Hugging Face Blog · huggingface.co