CMMLU是一个综合性的中文评估标准，主要用于评价语言模型在中文环境下的知识和推理能力。该标准涵盖了从基础学科到高级专业水平的67个主题，包括自然科学中需要计算和推理的内容、人文科学和社会科学领域的知识，以及中国驾驶规则等需要生活常识的内容。另外，CMMLU中的许多任务都具有中国特有的答案，可能并不适用于其他地区或语言。因此，这是一个完全针对中国市场的中文测试标准。
CMMLU
来源：特智能圈子：AI模型测评
2024-05-28 18:48:12
484阅读
举报
合作联络微：vapehome
链接：https://www.aiddithome.com/p/c98ff939779a.html
版权归原作者所有，未经允许请勿转载。若此文章存在违规行为，您可以点击 “举报”。
响应快