arXiv 自然语言处理· Mincheol Daniel Song, Joshua Ward, Jake Jung, Guang Cheng·· 3 小时前AI 评分35
Sentinel:面向临床 Text-to-SQL 智能体的轨迹置信度层
Trajectory-Derived Confidence for Reliable, Resource-Aware Clinical Text-to-SQL Agents
AI 导读
研究人员提出置信度层 Sentinel,通过分析推理轨迹并在运行前、运行中及交付时动态终止执行,提升临床 Text-to-SQL 智能体的可靠性与资源效率。在 EHRSQL 基准上,Sentinel 将可靠性得分从 +0.08 提升至 +0.24,交付答案准确率从 54% 升至 69%。此外,该机制在高风险场景下主动弃答规避严重错误,并削减了 13-28% 的智能体执行步骤。
来源:arXiv 自然语言处理 · arxiv.org