arXiv 自然语言处理· Chen Zhang, Seth Aycock, Yusuke Miyao·· 16 hours agoAI score33
类型学特征归纳（TFI）：归纳式元语言推理评测基准
Typological Feature Induction as a Benchmark for Inductive Metalinguistic Reasoning
Not yet translated; shown in Chinese.
AI guide
研究人员提出用于归纳式元语言推理的基准 TFI，基于 Grambank 构建了覆盖 195 种语言的类型学特征预测任务。评测显示大语言模型仅凭 16 对句子即可识别 59%–80% 的语言，且错位翻译几乎不影响准确率，表明其主要依赖先验知识。加密消除识别后，受测开源模型在未知语言上均未超过多数值基线，尚难胜任田野语言学归纳。
Source:arXiv 自然语言处理 · arxiv.org