GLUE — General Language Understanding Evaluation，通用语言理解评估基准

事实

一套评测自然语言理解能力的基准任务。

人话

它像给 AI 办驾校路考：判断、匹配、推理都上路，少一项就扣分。

常比较语言理解力，也推动 BERT 刷榜。

相关概念

• 自然语言理解
• Bidirectional Encoder Representations from Transformers（双向编码器表征）
• Massive Multitask Language Understanding，大规模多任务语言理解
• 模型排行榜

NLU
GLUE 用多项任务测试模型的语言理解能力。

BERT
BERT 通过 GLUE 刷分，让预训练模型出圈。

MMLU
MMLU 是后来的综合评测接力棒。

Leaderboard
GLUE 分数常被榜单用来横向比较模型。