Skip to main content
CenXiv.org
此网站处于试运行阶段,支持我们!
我们衷心感谢所有贡献者的支持。
贡献
赞助
cenxiv logo > cs > arXiv:2506.20963

帮助 | 高级搜索

计算机科学 > 信息检索

arXiv:2506.20963 (cs)
[提交于 2025年6月26日 (v1) ,最后修订 2025年7月4日 (此版本, v2)]

标题: EraRAG:适用于不断增长语料库的高效和增量检索增强生成

标题: EraRAG: Efficient and Incremental Retrieval Augmented Generation for Growing Corpora

Authors:Fangyuan Zhang, Zhengjun Huang, Yingli Zhou, Qintian Guo, Zhixun Li, Wensheng Luo, Di Jiang, Yixiang Fang, Xiaofang Zhou
摘要: 基于图的检索增强生成(Graph-RAG)通过在外部语料库上进行结构化检索来增强大型语言模型(LLMs)。 然而,现有方法通常假设语料库是静态的,每当新文档到达时需要昂贵的全图重建,这限制了它们在动态、演进环境中的可扩展性。 为解决这些限制,我们引入EraRAG,一种支持高效和可扩展动态更新的新型多层Graph-RAG框架。 我们的方法利用基于超平面的局部敏感哈希(LSH)将原始语料库划分为分层图结构,从而实现无需破坏现有拓扑结构的高效和局部新数据插入。 该设计消除了重新训练或昂贵重新计算的需要,同时保持高检索准确性和低延迟。 在大规模基准测试中的实验表明,与现有的Graph-RAG系统相比,EraRag在更新时间和令牌消耗方面实现了数量级的减少,同时提供了更优的准确性表现。 这项工作为必须在持续增长的语料库上运行的RAG系统提供了一条实用的前进路径,弥合了检索效率和适应性之间的差距。 我们的代码和数据可在https://github.com/EverM0re/EraRAG-Official获取。
摘要: Graph-based Retrieval-Augmented Generation (Graph-RAG) enhances large language models (LLMs) by structuring retrieval over an external corpus. However, existing approaches typically assume a static corpus, requiring expensive full-graph reconstruction whenever new documents arrive, limiting their scalability in dynamic, evolving environments. To address these limitations, we introduce EraRAG, a novel multi-layered Graph-RAG framework that supports efficient and scalable dynamic updates. Our method leverages hyperplane-based Locality-Sensitive Hashing (LSH) to partition and organize the original corpus into hierarchical graph structures, enabling efficient and localized insertions of new data without disrupting the existing topology. The design eliminates the need for retraining or costly recomputation while preserving high retrieval accuracy and low latency. Experiments on large-scale benchmarks demonstrate that EraRag achieves up to an order of magnitude reduction in update time and token consumption compared to existing Graph-RAG systems, while providing superior accuracy performance. This work offers a practical path forward for RAG systems that must operate over continually growing corpora, bridging the gap between retrieval efficiency and adaptability. Our code and data are available at https://github.com/EverM0re/EraRAG-Official.
评论: 正在审核中
主题: 信息检索 (cs.IR) ; 机器学习 (cs.LG)
引用方式: arXiv:2506.20963 [cs.IR]
  (或者 arXiv:2506.20963v2 [cs.IR] 对于此版本)
  https://doi.org/10.48550/arXiv.2506.20963
通过 DataCite 发表的 arXiv DOI

提交历史

来自: Zhengjun Huang [查看电子邮件]
[v1] 星期四, 2025 年 6 月 26 日 03:01:33 UTC (1,189 KB)
[v2] 星期五, 2025 年 7 月 4 日 01:31:36 UTC (1,189 KB)
全文链接:

获取论文:

    查看标题为《》的 PDF
  • 查看中文 PDF
  • 查看 PDF
  • HTML(实验性)
  • TeX 源代码
  • 其他格式
查看许可
当前浏览上下文:
cs.IR
< 上一篇   |   下一篇 >
新的 | 最近的 | 2025-06
切换浏览方式为:
cs
cs.LG

参考文献与引用

  • NASA ADS
  • 谷歌学术搜索
  • 语义学者
a 导出 BibTeX 引用 加载中...

BibTeX 格式的引用

×
数据由提供:

收藏

BibSonomy logo Reddit logo

文献和引用工具

文献资源探索 (什么是资源探索?)
连接的论文 (什么是连接的论文?)
Litmaps (什么是 Litmaps?)
scite 智能引用 (什么是智能引用?)

与本文相关的代码,数据和媒体

alphaXiv (什么是 alphaXiv?)
CatalyzeX 代码查找器 (什么是 CatalyzeX?)
DagsHub (什么是 DagsHub?)
Gotit.pub (什么是 GotitPub?)
Hugging Face (什么是 Huggingface?)
带有代码的论文 (什么是带有代码的论文?)
ScienceCast (什么是 ScienceCast?)

演示

复制 (什么是复制?)
Hugging Face Spaces (什么是 Spaces?)
TXYZ.AI (什么是 TXYZ.AI?)

推荐器和搜索工具

影响之花 (什么是影响之花?)
核心推荐器 (什么是核心?)
IArxiv 推荐器 (什么是 IArxiv?)
  • 作者
  • 地点
  • 机构
  • 主题

arXivLabs:与社区合作伙伴的实验项目

arXivLabs 是一个框架,允许合作伙伴直接在我们的网站上开发和分享新的 arXiv 特性。

与 arXivLabs 合作的个人和组织都接受了我们的价值观,即开放、社区、卓越和用户数据隐私。arXiv 承诺这些价值观,并且只与遵守这些价值观的合作伙伴合作。

有一个为 arXiv 社区增加价值的项目想法吗? 了解更多关于 arXivLabs 的信息.

这篇论文的哪些作者是支持者? | 禁用 MathJax (什么是 MathJax?)
  • 关于
  • 帮助
  • contact arXivClick here to contact arXiv 联系
  • 订阅 arXiv 邮件列表点击这里订阅 订阅
  • 版权
  • 隐私政策
  • 网络无障碍帮助
  • arXiv 运营状态
    通过...获取状态通知 email 或者 slack

京ICP备2025123034号