双语圣训召回基准：五款开源模型无一同时达标

Dayam Nadeem 等作者发布英语/阿拉伯语双语圣训召回幻觉基准，并公布对 Mistral-7B、Gemma3-4B、Jais-7B、ALLaM-7B 和 Phi4-mini-3.8B 的评测：模型仅凭书目引用复述六部逊尼派正典圣训集原文，不使用检索增强；3 万条回答中 0% 同时达到高词汇保真度（BLEU）和高语义保真度。 评测将拒绝回答单独标记，词汇与语义保真度分别用 BLEU 和多语言余弦相似度衡量；完整代码、提示、评测流程和评分输出已公开。

AI 根据报道生成 · 3 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。