CMMLU vs ChatGPT:怎么选?

下面把两款工具的关键信息逐项放在一起对照。 两者同属「AI 聊天」分类,属于直接竞品。

A

CMMLU

一个综合性的大模型中文评估基准

免费 🌍 国外 AI 聊天
B

ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

免费 🌍 国外 AI 聊天

📊 参数逐项对照

对比项 CMMLU ChatGPT
价格模式 免费 免费
来源地区 🌍 国外 🌍 国外
所属分类 AI 聊天 AI 聊天
用户评分 暂无评分 暂无评分
热度(浏览量) 50 122
付费说明
替代品 CMMLU 的替代品 → ChatGPT 的替代品 →

📖 详细介绍

CMMLU 是什么?

关于 CMMLU

CMMLU是一个综合性的中文评估基准,专门用于评估语言模型在中文语境下的知识和推理能力。CMMLU涵盖了从基础学科到高级专业水平的67个主题。它包括:需要计算和推理的自然科学,需要知识的人文科学和社会科学,以及需要生活常识的中国驾驶规则等。此外,CMMLU中的许多任务具有中国特定的答案,可能在其他地区或语言中并不普遍适用。因此是一个完全中国化的中文测试基准。

CMMLU数据集采用Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International License.

Note:自2023-12-16日起,对于未开放公测的API模型,我们将验证 1.模型是否有基本的指令跟随能力;2.是否存在数据污染,通过验证的模型会被更新在榜单。

ChatGPT 是什么?

关于 ChatGPT

ChatGPT is your AI chatbot for everyday use. Chat with the most advanced AI to explore ideas, solve problems, and learn faster.

🔗 也可以看看这些