AgentBench · 主观榜单评议
市面上有一堆“AI 排行榜”在比谁的模型更强。这个站做的是另一件事:请一位专家逐个点评这些榜本身值不值得信,以及看榜时最容易踩的坑。
一分钟看懂(不需要 AI 背景)
AI 排行榜(leaderboard)有点像手机跑分:让很多 AI 模型做同一套题,按得分排名次。 麻烦在于,分高不等于真好用——题目可能早被模型“背”过,有的榜还是某家公司自己办、给自家产品打广告。
所以这里不排“谁第几名”,而是请专家回答三件事:这个榜可不可信、高分到底换来了什么真本事、 要不要照着它挑模型用。每条都标了专家的信心(高 / 中 / 低),你可以只信你愿意信的那部分。
先认识几个词
- 榜单 / leaderboard:给 AI 模型打分排名的网页或论文。
- 判语:专家看完一个榜后写下的主观结论。它是本站的核心,由真人署名,不是 AI 代写。
- 聚合器 / aggregator:把很多榜的结果汇到一起的“榜中榜”。它告诉你谁在榜上,但不替你判断该不该信。
- MoA:把好几个 AI 模型像团队一样搭着用,各管自己擅长的一块。要决定让谁进这个团队,就用得上这些榜做参考。
已收录 24 条 · 医疗 9 / 非医疗 15 · 只显示专家已署名的条目。
| 榜单 | 类型 | 领域 | 能处理什么 | 专家信心 | 一句话判语 |
|---|---|---|---|---|---|
| Artificial Analysis 2024 | 榜中榜(聚合器) | 非医疗 | textimageaudiovideotool-use | medium | 透明的独立第三方:质量当粗筛、速度×价格最有用;综合分必下钻,别当能力定论。 |
| BFCL (Berkeley Function-Calling Leaderboard) 2024 | 在线排行榜 | 非医疗 | text | medium | |
| BRIDGE 2025 | 在线排行榜 | 医疗 | text | high | Harvard, MGH等权威机构,且榜单比较新 |
| DocVQA 2020 | 数据集 | 非医疗 | imagetext | low | |
| EQ-Bench 2023 | 在线排行榜 | 非医疗 | text | medium | |
| GPQA 2023 | 数据集 | 非医疗 | text | medium | |
| HealthBench 2025 | 随论文发布 | 医疗 | text | high | |
| Leaderboard of Leaderboards (HF aggregators) 2025 | 榜中榜(聚合器) | 非医疗 | text | low | 榜单的榜单,所以要深入一层挖掘一下 |
| LMArena (Chatbot Arena) 2023 | 在线排行榜 | 非医疗 | textimage | medium | |
| MedBench 2024 | 在线排行榜 | 医疗 | textimage | high | |
| MedHELM 2025 | 在线排行榜 | 医疗 | text | medium | 子榜单很经典很全面。然而,模型不太全、更新不太频繁 |
| MEDIQA-Chat 2023 2023 | 公开评测任务 | 医疗 | text | low | |
| MEDIQA Shared Tasks(2024–2025 系列) 2024 | 公开评测任务 | 医疗 | textimage | medium | |
| MedQA (USMLE) 2020 | 数据集 | 医疗 | text | low | 太旧、很多模型在此过拟合 |
| MLE-bench 2024 | 随论文发布 | 非医疗 | text | low | |
| MMMU 2023 | 在线排行榜 | 非医疗 | imagetext | low | |
| MTEB 2022 | 在线排行榜 | 非医疗 | text | medium | |
| OmniBench 2024 | 在线排行榜 | 非医疗 | imageaudiotext | low | |
| Open Medical-LLM Leaderboard 2024 | 在线排行榜 | 医疗 | text | low | |
| RCQ (Real Clinical Queries) 2026 | 随论文发布 | 医疗 | text | high | |
| SWE-Bench Pro 2025 | 在线排行榜 | 非医疗 | text | medium | |
| SWE-bench 2024 | 在线排行榜 | 非医疗 | text | medium | |
| Video-MME 2024 | 在线排行榜 | 非医疗 | videotext | medium | |
| VoiceBench 2024 | 在线排行榜 | 非医疗 | audiotext | low |