阿拉伯语语种与方言识别 F1

阿拉伯语文字的语种与方言识别评测：逐个地区/语种标签算 F1，官方评测集共 84,870 条阿拉伯语样本，来源含 NADI、MADAR、QADI、Casablanca、FLEURS、SMOL、Omnilingual ASR 与 Hassaniya

基本信息

30 秒看懂

越高越好（F1，百分比）。这是「闭集」分类任务：模型只能在官方支持的 51 个类别里选一个，所以读分前先确认标签粒度是否对齐。同一个「Morocco」标签下，Mistral LIDstral Arabic 官方自报 F1 88.67%，同一页对照的 LahjatBERT ALDi CL 为 72.65%、GlotLID v3 为 71.28%。逐标签差异很大——官方热力图里 Saudi Arabia 档只有 28.61、Kuwait 50.15、Bahrain 39.67，而 Morocco 88.67、Chad 97.39、MSA 93.63，拿单个标签的分数代表整体能力会失真。

评分协议

这个评测的官方统一评分协议还没收录到本页；各厂商实际使用的执行框架（harness）与推理档位（effort）已逐条写在下方引用卡里。

模型发布采用时间轴

共收录 1 场模型发布（收录 4 项分值） · 按发布时间倒序排列 · 数据更新于 2026-10-23

2026

2026-10-08 Mistral AI·国际

LIDstral Arabic

模态文本

Mistral 面向阿拉伯语文字发布的语种与方言识别模型：可区分标准阿拉伯语（MSA）、各阿拉伯语方言，以及使用同一文字系统的非阿拉伯语，模型卡定位为把语种判定做成区域化产品组件的能力。收录评测以方言识别 F1 为主，摩洛哥 Darija F1 88.67%。

语种与方言识别51 类闭集分类CPU 可推理开放权重

查看模型变体与证据

Moroccan Darija 88.67%Moroccan Darija 72.65%Moroccan Darija 71.28%按地区与语种逐标签 F1（21 个标签行） 图表尚无可读数值

数据缺口（本页暂未收录）

• 评测版本与子集（例如部分评测有 Diamond、Verified 等官方变体）以及数据集规模
• 各厂商使用的执行框架（harness / scaffold）与 Agent 工具配置
• 推理档位（reasoning effort）、采样参数（temperature / top-p）、运行次数与分数聚合方式
• 指标对应的随机猜测基线（chance baseline）与人类基线的实验条件
• 测试集污染检测结论，以及是否已饱和的结构化标注

以上字段暂缺时，本页不虚构数字；后续会依据每一次发布的证据逐条补齐并标注来源。

复现入口

相关评测（同类别）

引用

本页数据更新于 2026-10-23，依据厂商发布材料真实抓取；发现数据问题欢迎在 GitHub 提 Issue。