研究团队提出多语言事实评测基准NaijaFacts
Start here
2026年11月5日，研究团队推出用于评测尼日利亚事实与统计问题的基准NaijaFacts，涵盖英语、尼日利亚皮钦语、约鲁巴语、伊博语和豪萨语。对8款前沿及本土适配模型的测试表明，知识缺失是模型表现不佳的主因：英美相关问题的英语查询准确率为49%至50%，而尼日利亚相关问题仅为20%。此外，最强模型在尼日利亚统计题上的准确率均未超过31%，当评测范围扩展至非洲54国后，统计知识的准确率同样仅为26%。
AI-generated from reports · Updated 3 hours ago
Report timeline
Follow the reports to see different sides of the story.
- arXiv 自然语言处理NaijaFacts：解耦尼日利亚事实中语言与知识的评估框架
研究团队推出评测尼日利亚事实与统计问题的基准 NaijaFacts，涵盖英语、尼日利亚皮钦语、约鲁巴语、伊博语和豪萨语。对 8 款前沿及本土适配模型的测试表明知识缺失是主因，英美问题的英语查询准确率为 49-50%，而尼日利亚仅 20%。最强模型在尼日利亚统计题上准确率均未超 31%，扩展至非洲 54 国后统计知识准确率同样仅 26%。
Story heat trend
Current heat 9·Comparable peak 10（Nov 5 14:00）·Comparable change, last 24 hours–
Trends compare only the same parties observed continuously, so the scope can be narrower than current heat counts. Move the pointer or tap the chart to see hourly heat; use the left and right arrow keys on a keyboard.