跳到正文
原文
Reddit · r/LocalLLaMA· /u/Bayliner1980·· 4 小时前AI 评分33

Qwen3-0.6B 转换为 MoE 模型

Qwen3-0.6B model converted into MoE

AI 导读

bayliner1980 将 Qwen3-0.6B 转换为聊天式 MoE 模型,发布 Qwen3-0.6B-MoE-A0.5B 及其 GGUF 版本。该模型各项质量指标均低于原版,代码生成会出错,且思维模式未在转换后训练;在 0.6B 参数规模下,GPU 生成速度也未获得提升。

来源:Reddit · r/LocalLLaMA · reddit.com