跳到正文
热点事件持续更新

探讨大模型记忆的遗忘与更新

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

关于大模型记忆是否需要学会遗忘与更新的讨论,聚焦长上下文和RAG虽可保留新旧信息,却可能在冲突证据下继续采用过时结论的问题。Transformer、DeltaNet、BDH(Dragon Hatchling)等记忆架构尝试通过状态更新或突触可塑性改善这一问题,但何时保留或覆盖信息、如何避免破坏无关记忆,目前仍待明确。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月24日
  1. Reddit · r/MachineLearning
    LLM 记忆是否真正需要学会遗忘与更新?

    长上下文与 RAG 虽能保留新旧信息,却可能让模型在冲突证据中继续采用过时结论。Transformer、DeltaNet、BDH(Dragon Hatchling)等记忆架构尝试通过状态更新或突触可塑性解决更新问题,但何时保留、覆盖及避免破坏无关记忆仍待明确。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。