AI Rookies

AI Leaderboard Manipulation — AI 排行榜操纵

事实

通过选择性测试或报告误导 AI 排名的行为。

人话

AI 排行榜操纵像网店 P 图刷单:只挑最好看的晒单,硬把普通货顶成爆款。

它会误导模型选型和投资,也让基准测试失去公信力。

相关概念

Leaderboard
它通过刷分或挑选结果等方式,误导榜单名次。

Benchmark Contamination
测试集泄露可制造虚高成绩,是常见操纵手段。

Benchmark Validity
操纵行为会让排名无法代表模型的真实能力。