小米64亿大语言模型亮相C-Eval、CMMLU评测
发布日期: 2023-08-12 10:51:58 来源: 中关村在线


(资料图)

近日,小米的大语言模型MiLM-6B首次亮相C-Eval、CMMLU两大AI模型评测榜单。据悉,MiLM-6B在C-Eval总榜单中排名第10,同参数量级排名第1,而在CMMLU中文向大模型中则位列第1。C-Eval公布的数据显示,MiLM-6B模型在各个测试科目中的平均成绩表现良好。在STEM(科学、技术、工程和数学教育)的20个科目中,包括计量师、物理、化学、生物等多个项目都取得了较高的准确率。在10个社会科学科目中,除教育学和地理外,该模型在所有科目中都获得了较为理想的准确率。在人文科学的11个科目中,MiLM-6B在历史与法律基础上也有着不错的准确率表现。然而,尽管MiLM-6B模型在大多数科目中表现出了相对良好的准确度,但在法学、数学、编程、概率论、离散数学等科目上的表现仍有待提升。据了解,MiLM-6B是小米开发的一个大规模预训练语言模型,参数规模为64亿。

关键词:

相关文章

  • 小米64亿大语言模型亮相C-Eval、CMMLU评测

  • 张幼仪回忆录:我痛恨徐志摩让我变得如此呆板无趣

  • 网商贷还不上有什么后果

  • 上海银行战略支持2023全球“未来产业之星”大赛复赛即将揭幕

  • @曹杨人,做任务拿返利,群里全是“托”,看清楚刷单诈骗的把戏

  • 高铁票越来越难买?国铁详解:长途列车票额优先满足长途旅客

  • A股上市房企超六成预亏,下半年市场分化或会更加剧烈

  • 甘源食品:截止8月10日,公司的股东总户数为6262名

  • 京山轻机:设备尚在验证中。厂房建设相关的工作基本完成,随后公

  • 北向资金净卖出超70亿元

  • 妻子举报老公每年药品回扣十几万内幕曝光令人大跌眼镜 具体是啥

  • iPhone 14 Pro电池衰减严重:不到一年只剩86%容量!大批用户截图吐槽

  • 辅助工具管理器怎么关闭(辅助工具管理器)

  • 联合国成功转移也门“萨菲尔”号上的原油

  • 科技为帆 金融做港 逐梦启航 浦写华章

  • 全国首个格型地连墙闸墙主体结构顺利完工

  • 硕世生物:8月11日融资买入180.94万元,融资融券余额1.5亿元

  • 黑龙江省万山村村支书孙庆波冒着生命危险,在洪水中救下五名村民

  • 撸起袖子加油干 风雨无阻向前行|70家省级企业技术中心助力沧州

  • 我国科研人员发布完整的水稻参考基因组

热点图集