arXiv 自然语言处理· Michael Christlambert Sinanta (Independent Researcher), Muhammad Dehan Al Kautsar (Mohamed bin Zayed University of Artificial Intelligence), Amanda Nurul Izzah (Independent Researcher), Thanh-Nhi Nguyen (Independent Researcher), Phan Phuong Mai Chau (Mohamed bin Zayed University of Artificial Intelligence), Zheng Wei Lim (University of Amsterdam), Fajri Koto (Mohamed bin Zayed University of Artificial Intelligence)·· 4 小时前AI 评分36
利用人工整理词表进行低资源语言文本生成
Text Generation in Low-Resource Languages Using Human-Curated Vocabularies
AI 导读
研究提出一种结合人工整理词表与少量范例在低资源语言中生成文本的框架,并按 Zipfian 分布采样候选词。实验评估显示,具备推理能力的 LLM 能在极低资源甚至未见过的语言中生成流畅文本,在句子级别表现尤为突出。该研究为低资源语言的合成数据冷启动提供了实用路径,相关源代码已开源。
来源:arXiv 自然语言处理 · arxiv.org