发布时间：2026.08.15
CMMLU是一个综合性的大语言模型中文评估基准。
CMMLU是什么
CMMLU是一个综合性的大语言模型中文评估基准。
它更适合用来查看模型排名、能力对比和评测结果，为模型研究、技术选型或报告撰写提供参考。 用户可通过 github.com 访问官方入口。
CMMLU功能
模型排行：围绕大模型能力、任务成绩或综合表现提供榜单参考，方便快速比较不同模型。
评测维度：覆盖知识、推理、语言理解、多模态或行业任务等维度，帮助用户判断模型适配度。
结果对比：将模型测试结果以表格、排名或报告形式呈现，便于研究和选型时横向比较。
研究参考：适合在模型调研、技术报告和产品选型中作为公开评测依据。
CMMLU适用场景
适合模型研究人员、AI产品经理、算法团队、开发者和选型负责人使用，可用于大模型横向评测、能力对比、技术调研、模型选型和研究报告撰写。
官网地址
CMMLU官网地址：https://github.com/haonan-li/CMMLU/
相关文章
热门下载
相关下载
相关AI
PubMedQA
PubMedQA是一个专为生物医学研究问题回答任务构建的数据集。
LLMEval3
LLMEval3是由复旦大学 NLP 实验室推出的大型语言模型评测基准。
H2O EvalGPT
H2O EvalGPT是一款AI模型评测工具，H2O.ai 推出的基于 Elo 评级方法的大语言模型评估系统。
