CMMLU是一个综合性的中文评估基准,专门用于评估语言模型在中文语境下的知识和推理能力,涵盖了从基础学科到高级专业水平的67个主题。2024年9月20日
CMMLU是一个综合性的中文评估基准,专门用于评估语言模型在中文语境下的知识和推理能力,涵盖了从基础学科到高级专业水平的67个主题。它包括:需要计算和推理的自然科学,需要知识的人文科学和社会科学,以及需要生活常识的中国驾驶规则等。此外,CMMLU中的许多任务具有中国特定的答案,可能在其他地区或语言中并不普遍适用。因此是一个完全中国化的中文测试基准。
【CMMLU,AI工具集导航,】快文档KuaiGPT是一款基于大语言模型(LLM)的在线使用的AI办公工具。能完成撰写邮件、视频脚本、文案、翻译、代码、写论文、起名字,保险产品查询等任务。
扫码加微信咨询