arXiv cs.AI / cs.LG 最新· Noor Abo Mokh·· 14 小时前AI 评分45
DAR-MGSM:面向方言阿拉伯语的数学推理基准
Benchmarking Arabic Dialects for Math Problems
AI 导读
DAR-MGSM 是首个方言阿拉伯语数学推理人工精编基准,覆盖五种主要阿拉伯方言及 MSA,含仅翻译与翻译+文化本地化两个平行版本。在 11 个阿拉伯语及多语言大语言模型上的评测显示,本地化版本性能普遍下降,降幅因模型而异。机制可解释性分析发现,同一题的两个版本常引发不同的内部推理轨迹,即便总体准确率相近。
标题与摘要由 AI 辅助生成,事实与观点以原文为准。
来源:arXiv cs.AI / cs.LG 最新 · arxiv.org
本站标题、摘要与推荐理由由 AI 辅助生成;原文版权归来源所有。