我的收藏提交工具
模型与基础设施
TOOL PROFILE

CMMLU

一个综合性的大模型中文评估基准

对应语言译文排队中,完成后自动更新。

工具介绍

CMMLU是综合性的中文评估基准,专门用在评估语言模型在中文语境下的知识和推理能力,涵盖从基础学科到高级专业水平的67个主题。包括需要计算和推理的自然科学,需要知识的人文科学和社会

主要功能

  • 排行榜
  • 数据集
  • 预处理代码
  • 评估工具

适用场景与人群

待编辑核验

  • 语言模型性能评估
  • 教育领域的智能辅导
  • 智能客服优化
  • 文化知识传播
输入待编辑核验
→
输出待编辑核验

如何使用

  1. 01

    获取数据集

  2. 02

    从GitHub下载

  3. 03

    通过Hugging Face获取

  4. 04

    准备测试环境

官网介绍摘录

CMMLU: Measuring massive multitask language understanding in Chinese - haonan-li/CMMLU
查看官网原文 ↗

资料来源

GitHub - haonan-li/CMMLU: CMMLU: Measuring massive multitask language understanding in Chinese · GitHubCMMLU - 一个综合性的大模型中文评估基准 | AI工具集资料更新于 2026-10-17

开始使用前,了解这些

先打开官方页面查看当前开放范围、注册要求、额度与套餐,用一份小样本验证它是否适合你的任务。

此档案依据官网公开资料整理,未做完整实测。商用授权、隐私条款、地区访问状态及功能限制尚待逐项核验。

基础档案 · 待进一步核验

核验范围:名称、官方入口和基本用途。

查看原始来源

也可以看看

查看全部