跳到正文
原文
X:Unsloth (@UnslothAI)· @UnslothAI·· 11 天前精选AI 评分70

Unsloth 发布 Qwen-Image-2.1 GGUF,12GB 显存可本地运行

Qwen-Image-2.1 can now run locally on 12GB VRAM with Unsloth GGUFs! 🖼️ The 7B model performs on par with Nano Banana 2.0. For higher quality, you can also run Dynamic FP8 on just 6GB of VRAM via offloading. GGUF: https://huggingface.co/unsloth/Qwen-Image-2.1-GGUF Guide: https://unsloth.ai/docs/models/qwen-image-2.1

AI 导读

Unsloth 发布 Qwen-Image-2.1 的 GGUF 量化版本,可在 12GB 显存下本地运行,7B 模型表现与 Nano Banana 2.0 相当。

推荐理由

Unsloth 给出 Qwen-Image-2.1 的本地量化运行方案与显存门槛,可据此判断本地部署成本。

来源:X:Unsloth (@UnslothAI) · x.lingyaoai.com