工具介绍
CMMLU是综合性的中文评估基准,专门用在评估语言模型在中文语境下的知识和推理能力,涵盖从基础学科到高级专业水平的67个主题。包括需要计算和推理的自然科学,需要知识的人文科学和社会
主要功能
- 排行榜
- 数据集
- 预处理代码
- 评估工具
适用场景与人群
待编辑核验
- 语言模型性能评估
- 教育领域的智能辅导
- 智能客服优化
- 文化知识传播
输入待编辑核验
→输出待编辑核验
如何使用
- 01
获取数据集
- 02
从GitHub下载
- 03
通过Hugging Face获取
- 04
准备测试环境
官网介绍摘录
CMMLU: Measuring massive multitask language understanding in Chinese - haonan-li/CMMLU查看官网原文 ↗资料来源
GitHub - haonan-li/CMMLU: CMMLU: Measuring massive multitask language understanding in Chinese · GitHubCMMLU - 一个综合性的大模型中文评估基准 | AI工具集资料更新于 2026-10-17开始使用前,了解这些
先打开官方页面查看当前开放范围、注册要求、额度与套餐,用一份小样本验证它是否适合你的任务。
此档案依据官网公开资料整理,未做完整实测。商用授权、隐私条款、地区访问状态及功能限制尚待逐项核验。
基础档案 · 待进一步核验
核验范围:名称、官方入口和基本用途。
查看原始来源
