arXiv 人工智能· Hira Naveed, Scott Barnett, Stefanus Kurniawan, John Grundy, Chetan Arora, Hourieh Khalajzadeh, Omar Haggag·· 18 時間前AI スコア46
RAGLog:面向 RAG 流水线的无参考故障定位方法
From Logs to Faults: Reference-Free Fault Localization for Retrieval-Augmented Generation Pipelines
未翻訳のため中国語で表示しています。
AI ガイド
开源工具 RAGLog 可直接利用执行日志在 RAG 各阶段检测并定位故障,无需依赖参考答案或代码插桩。搭配 Claude Haiku 5.5 时,其在自然故障测试中取得 0.73 的综合 F1 分数,优于 Claude Code(0.58)和 Codex(0.52)。该工具单次分析耗时约 5 秒且成本仅 0.005 美元,具备更低的延迟与开销。
出典:arXiv 人工智能 · arxiv.org