小米的大语言模型MiLM-6B首次现身C-Eval、CMMLU两大AI模型评测榜单
发布时间:2023-08-11 19:12:45|来源:搜狐新闻|作者:

  毫无疑问,大模型是今年上半年最大的风口。

  在这阵风刚开始的时候,比尔盖茨说,ChatGPT与互联网的发明一样重要;黄仁勋盛赞其为“AI的iPhone时刻”,阿里的张勇说“所有产品都值得用AI重做一遍。”没有人吝啬对AI大模型的赞美和期望。

  近日,小米的大语言模型MiLM-6B首次现身C-Eval、CMMLU两大AI模型评测榜单。

  截至本文成稿,MiLM-6B在C-Eval总榜单排名第10、同参数量级排名第1,在CMMLU中文向大模型排名第1。

  根据C-Eval给出的信息,MiLM-6B模型在各个测试科目中的平均成绩如下:

  具体各科目成绩上,在STEM(科学、技术、工程和数学教育)全部20个科目中,计量师、物理、化学、生物等多个项目获得了较高的准确率。

  而在10个社会科学科目中,该模型在教育学和地理外的所有科目,都获得了较为理想的准确率。

  人文科学的11个科目中,MiLM-6B则在历史与法律基础上有着不错的准确率表现。

  可以看出,MiLM-6B模型目前已经在大多数科目中表现出了相对良好的准确度,但在诸如法学、数学、编程、概率论、离散数学等科目上的表现依旧有明显进步空间。

快科技延展阅读:

  根据GitHub项目页给出的信息,MiLM-6B是由小米开发的一个大规模预训练语言模型,参数规模为64亿。

编辑:菲菲
免责声明:文章转载自网络。文章内容不代表本站观点,本站不对其内容的真实性、完整性、准确性给予任何担保、暗示和承诺,仅供读者参考,风险自己甄别并承担后果;如有侵权请及时联系本站,我们会及时删除处理!

图文推荐

相关阅读

资讯

产业

新闻排行