ActionRAG 如何在 LLM 智能体的记忆图扩散过程中重新审视证据

3 十一月 20265 视图

提出了一种图式记忆架构,在索引阶段谨慎协调实体,并在查询时依据局部结构重新评估关联。在 MemoryAgentBench 上,该方法的平均准确率达到 55.1,比最强检索基线高 5.4 个百分点,且每次查询的合成成本很低。

ActionRAG 如何在 LLM 智能体的记忆图扩散过程中重新审视证据

代理记忆在哪里会失效

作者指出了两类记忆故障。第一类与索引有关,第二类则发生在在线检索时。

  • 索引错误可能会拆分重复实体。
  • 同样的错误也可能会合并不同实体。
  • 在线检索可能会将初始相似度评分视为最终结果。
  • 周围的图结构可能提供重新评估这些评分的依据。

实践标准:记忆能否在查询阶段重新评估初始评分。

索引:类型对齐与实体消歧

ActionRAG 的索引流水线分为两步。

  • 对齐类型标签。
  • 应用多层实体消歧。

这些步骤旨在实现审慎索引。索引错误仍然是一项独立风险。实践标准:是否具备类型对齐和多层实体消歧。

查询时检索:双通道与局部图

对于查询,ActionRAG 通过两个通道提取实体和三元组。这些数据构成初始证据集和受限局部图。

  • 两个检索通道提取实体和三元组。
  • 根据这些数据构建初始证据集。
  • 根据这些数据构建受限局部图。

实践标准:围绕查询构建局部图,而非重新审视整个记忆。

带有直接关联保护的证据扩散

按接收方归一化、由查询条件引导的扩散过程会细化三元组评分,并考虑局部路径结构。重新评估依靠对直接证据的保护和对缺失关联的恢复。

三种机制支持这一重新评估:

  • 初始节点保护有助于保留直接证据;
  • 对枢纽节点流量施加惩罚;
  • 三元组物化有助于恢复缺失的关联。

实践标准:在扩散过程中保留直接证据。

MemoryAgentBench 评测结果说明了什么

MemoryAgentBench (MAB) 检验四个方面:

  • 检索准确率;
  • 冲突消解;
  • 远距离关联理解;
  • 测试时学习。

ActionRAG 在 MAB 上的结果:

指标结果
八个采用确定性评估的列中的平均准确率55.1
高于最强检索式记忆基线方法的幅度5.4 个百分点
计入查询时间后的平均合成成本四个展示的成本列中均很低
单独测量的检索侧各组件 p99 之和在消费级 Apple Silicon 系统上为 440.7 毫秒

实践标准:分别报告准确率、合成成本和检索组件的 p99。

常问问题

ActionRAG 如何在 LLM 智能体的记忆图扩散过程中重新审视证据