跳到正文
原文
arXiv 自然语言处理· Zhiheng Qian, Junhao Du, Jing Peng, Hanqi Li, Kunyang Peng, Feng Xue, Kai Yu·· 6 小时前AI 评分33

ETC-Bench:面向评估端转录规范化的多语言评测基准

ETC-Bench: A Multilingual Benchmark for Evaluation-Side Transcript Canonicalization

AI 导读

ETC-Bench 是首个多语言评估端转录规范化评测基准,涵盖 12 种语言与 181 种现象类型,用于将无语音差异的不同表层文本映射为规范形式。研究提出了兼顾精确匹配与 BERTScore 语义约束的评估指标 SENA,并构建智能体规范化技能 TACS。实验显示,3 种基于 TACS 的 LLM 智能体在共享语言上的表现优于 5 种基线系统。

来源:arXiv 自然语言处理 · arxiv.org