人工智能★ 评分 7.8

ActMem: Bridging the Gap Between Memory Retrieval and Reasoning in LLM Agents

Xiaohui Zhang, Zequn Sun, Chengyuan Yang, Yaqin Jin, Yazhong Zhang, Wei Hu
2026年3月3日
关键词
LLM代理记忆管理因果推理知识图谱反事实推理

核心发现

  1. 问题识别与范式转变:现有LLM代理记忆系统主要关注记忆的“召回能力”,将其视为被动记录器,导致在需要冲突检测和复杂决策的场景中表现不佳;论文提出应转向关注“记忆对行动的效用”。
  2. ActMem框架:通过将非结构化对话历史转化为结构化的因果和语义知识图谱(Memory KG),并结合反事实推理和常识补全,使代理能够推断隐含约束并解决过去状态与当前意图之间的潜在冲突。
  3. 新型评估基准ActMemEval:构建了一个专注于逻辑驱动场景和因果推理的综合数据集,其答案与原始对话历史的语义相似度远低于现有基准,有效评估代理的推理能力而非简单的事实检索。
  4. 显著性能提升:ActMem在ActMemEval数据集上显著优于现有SOTA基线,在检索准确率和问答准确率上均有大幅提升,并在传统基准LongMemEval上也取得了SOTA性能,证明了其泛化能力。
  5. 模块贡献明确:消融实验证明了反事实推理模块在发现“隐藏”证据方面的关键作用,因果边提供了逻辑骨干,语义边确保了上下文的完整性,三者协同作用才能实现最佳性能。

实验规模

实验评估在自建的ActMemEval数据集(包含246个经过人工验证的复杂逻辑驱动场景样本)和传统基准LongMemEval上进行。LLM骨干模型采用DeepSeek-V3(高性能开源模型)和GPT-4o-mini(高效轻量级模型)进行推理和生成。记忆表示使用Qwen3-Embedding-8B生成语义向量。PMI验证采用GPT2-Large。基线模型包括NaiveRAG、Mem0、A-Mem、MemoryOS和LightMem。超参数设置包括事件聚类距离阈值0.2,语义边过滤阈值0.3,PMI验证阈值0.8,初始检索20个记忆事实,反事实检索10个事实。

局限性

ActMem框架中反事实推理的质量和PMI过滤的有效性高度依赖于底层LLM的能力和经验性阈值设置,这可能引入不稳定性或限制其在更复杂、开放域场景中的泛化能力。尽管ActMem在效率上优于其他图谱基线,但相比纯粹的RAG方法仍存在额外的计算开销,且其知识图谱构建过程可能难以扩展到极大规模的长期记忆。ActMemEval数据集虽然设计精巧,但其合成性质可能无法完全捕捉真实世界对话中所有细微的逻辑和语义复杂性。

Paper ID: 2603.00026v1