阿拉伯语大模型评测榜单 QIMMA 发布:主打质量优先验证
今日,阿拉伯语大模型评测榜单 QIMMA 正式发布。与传统直接聚合现有基准不同,QIMMA 采用“质量优先”理念,在评估模型前先对基准数据进行严格质量验证。该榜单整合了 14 个源基准的 109 个子集,包含超 52,000 个样本,覆盖文化、STEM、法律、医疗、安全、诗歌与编程等 7 个领域,其中 99% 为原生阿拉伯语内容,并首次引入阿拉伯语代码评测。 QIMMA 的核心是多阶段质量验证流程。第一阶段使用 Qwen3 235B A22B Instruct 和 DeepS...