量子位 QbitAI· 鹭羽·· 14 小时前AI 评分72
MemT 1.0 将记忆写入 Transformer 内部状态
RSI三块关键拼图,MemT 1.0从模型层补上「记忆」
AI 导读
MemT 1.0 将经验编码为可更新的内部状态,并通过记忆分支参与后续计算,探索模型原生的记忆读写与持续学习路径。系列包含36B参数的 Nano 和288B参数的 Flash,前者基于 Qwen3.6-35B-A3B,后者基于 DeepSeek-V4-Flash。
来源:量子位 QbitAI · qbitai.com