RAG系统组件协同效应研究:解析器、分块策略与嵌入模型的交互影响
该研究针对检索增强生成(RAG)流水线中解析器、分块策略与嵌入模型通常被割裂评估的问题,开展了一项控制因子实验。研究结合了3种文档解析器、3种分块策略以及5种稠密嵌入模型(并以BM25为基准),在印度政府监管文档数据集上,通过800个带证据链验证的问答实例,系统评测了不同组件组合对检索效果的综合交互影响。
推荐理由系统化评测了RAG中解析、分块与Embedding的组合交互效应,对企业级复杂文档知识库构建有一定工程参考价值。
原标题:Parser, Chunking, and Embedding Interactions in Retrieval-Augmented Generation over Indian Government Regulatory Documents
阅读 arXiv 自然语言处理 原文 ↗