跳到正文
原文
Reddit · r/LocalLLaMA· /u/Ok_Warning2146·· 2 小时前AI 评分14

如何让 Gemma 4 兼容 SWE-bench 评测

How to make gemma 4 works with SWEBench?

AI 导读

用户在本地用 llama-server 运行 google 发布的 gemma 4 31b QAT q4 量化版跑 SWE-bench verified 时,全部用例都报 LimitExceeded 错误;同样的配置下 Qwen3.8 27b iq4_nl 能提交 388/500、解决 333/388。

来源:Reddit · r/LocalLLaMA · reddit.com