arXiv 自然语言处理· Defne Circi, Krystelle Lionti, Sarathkrishna Swaminathan, Daniel P. Sanders, L. Catherine Brinson, Bhuwan Dhingra, Basel Shbita, Mohab Elkaref, Sara Capponi, Tim Erdmann, Brandi Ransom·· 6 小时前AI 评分30
RegExtract:基于 LLM 的全氟和多氟烷基物质(PFAS)法规信息提取评测基准
RegExtract: A Benchmark for PFAS Regulatory Information Extraction with LLMs
AI 导读
研究人员推出针对全氟和多氟烷基物质(PFAS)法规文档的结构化信息提取基准 RegExtract,涵盖 20 个美国州级文档、46 项法规中的 488 个标注字段实例及 976 条条目。该基准针对材料定义、允许用途和产品豁免等要素定义了多字段架构,并提出溯源感知评估指标。评测表明针对具体字段的少样本(few-shot)示例可改善提取效果,相关代码与数据已开源。
来源:arXiv 自然语言处理 · arxiv.org