CMMLU vs 虾345：怎么选？
下面把两款工具的关键信息逐项放在一起对照。 两者同属「AI 聊天」分类，属于直接竞品。
📊 参数逐项对照
| 对比项 | CMMLU | 虾345 |
|---|---|---|
| 价格模式 | 免费 | 免费 |
| 来源地区 | 🌍 国外 | 🇨🇳 国内 |
| 所属分类 | AI 聊天 | AI 聊天 |
| 用户评分 | 暂无评分 | ⭐ 5.0 |
| 热度（浏览量） | 50 | 103 |
| 付费说明 | — | — |
| 替代品 | CMMLU 的替代品 → | 虾345 的替代品 → |
📖 详细介绍
CMMLU 是什么？
关于 CMMLU
CMMLU是一个综合性的中文评估基准，专门用于评估语言模型在中文语境下的知识和推理能力。CMMLU涵盖了从基础学科到高级专业水平的67个主题。它包括：需要计算和推理的自然科学，需要知识的人文科学和社会科学,以及需要生活常识的中国驾驶规则等。此外，CMMLU中的许多任务具有中国特定的答案，可能在其他地区或语言中并不普遍适用。因此是一个完全中国化的中文测试基准。
CMMLU数据集采用Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International License.
Note：自2023-12-16日起，对于未开放公测的API模型，我们将验证 1.模型是否有基本的指令跟随能力；2.是否存在数据污染，通过验证的模型会被更新在榜单。
虾345 是什么？
关于 虾345
xia345（虾345）是全球最完整的 AI Agent 生态导航平台，也是养虾人的第一站。收录 OpenClaw 等 20+ Agent 客户端、PinchBench LLM 评测排行、7000+ 技能资产，以及全球养虾社区地图。
基于 PinchBench（OpenClaw 工具调用基准）评测排行，S 级：Claude 3.7 Sonnet、GPT-4o；A 级：Gemini 1.5 Pro、DeepSeek-V3；B 级：Qwen2.5、Kimi。