研究者发布NaijaFacts尼日利亚多语言事实基准
热点事件持续更新
研究者发布NaijaFacts尼日利亚多语言事实基准
1 篇报道1 个报道来源19 小时前更新
先了解这件事
AI 综述
研究者推出 NaijaFacts 基准,由母语者编写关于尼日利亚的事实与统计问答,覆盖英语、尼日利亚皮钦语、约鲁巴语、伊博语和豪萨语,旨在将语言能力与事实知识解耦。 在八个前沿及尼日利亚适配模型上的测试显示知识效应占主导:美英问题英语查询准确率为 49–50%,尼日利亚问题仅 20%;最强模型在英美问题上达 66–79%,尼日利亚统计问题无一超过 31%。扩展至 54 个非洲国家的同类格局:文化类 96%、政治类 98%,统计类仅 26%。
AI 根据报道生成 · 48 分钟前更新
最新进展11月4日 21:34
NaijaFacts:将语言能力与事实知识解耦的尼日利亚事实问答基准框架报道时间线
沿着报道,了解事件的不同侧面。
11月4日
- arXiv · cs.CLNaijaFacts:将语言能力与事实知识解耦的尼日利亚事实问答基准框架
研究者推出 NaijaFacts(\naija)基准,由母语者编写关于尼日利亚的事实与统计问题,覆盖英语、尼日利亚皮钦语、约鲁巴语、伊博语和豪萨语,用于区分语言效应与知识效应。在八个前沿及尼日利亚适配模型上,知识效应占主导:美英问题英语查询准确率为 49–50%,尼日利亚仅 20%;最强模型在英美达 66–79%,尼日利亚统计问题无一超过 31%。扩展至 54 个非洲国家显示同样格局:文化类 96%、政治类 98%,统计类仅 26%。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。