Gemma 4 12B(Unified,GGUF Q4_0 官方 QAT 量化)
候選情境測試尚未完成- 量化
- GGUF Q4_0(QAT,官方量化) (官方資料 · 原始連結 · Apache-2.0 · 取得於 2026-09-30)
- 最少記憶體
- 16 GB (估算 · 原始連結 · Apache-2.0 · 取得於 2026-09-30 · 假設:以權重檔 6.98 GB + 2 GB(執行環境與約 8K 上下文)估算,並假設 macOS 預設約 70% 統一記憶體可給 GPU 使用;更長上下文需要更多記憶體。)
為什麼列入
原廠模型卡說明 Gemma 4 12B 共 11.95B 參數,脈絡長度 256K token,採 Apache-2.0 授權;家族模型卡明確列出「強化的程式與代理能力」與原生 function calling。
技術與取捨
官方 QAT Q4_0 版本相較 BF16 全精度有量化損失,本站尚未實測品質差異。多模態輸入需另下載約 0.18 GB mmproj 檔;授權為 Apache-2.0 但附加 Google 的 Prohibited Use Policy。