小米总部园区
在小米公司CEO雷军演讲前夕,其研发的人工智能(AI)大模型产品悄然现身。
【资料图】
钛媒体App获悉,8月11日,小米公司开发的大规模预训练语言模型MiLM-6B/1.3B登陆代码托管平台GitHub,参数规模最高达64亿,而且现身在C-Eval、CMMLU基准评测榜单。
截至当前,小米大模型MiLM-6B在C-Eval总榜单排名第10、同参数量级排名第1,平均分为60.2分,超过了阿里云Qwen-7B、OpenAI研发的ChatGPT(今年5月数据)等,而MiLM-1.3B排行第30名,平均分45.8分,接近谷歌投资的Anthropic公司的Claude 1.0版本大模型。
这是小米大模型产品的首次曝光,也是小米史上首个GPT大模型产品亮相。
事实上,随着ChatGPT风靡全球,今年4月14日,小米公司宣布成立小米 AI 实验室大模型团队,由栾剑带队向王斌汇报。据悉,AI实验室是小米AI战略的核心部门,而大模型负责人王斌曾在中科院从事了20多年NLP(自然语言处理)相关的研究和开发工作,2018年加入小米,2019年起负责AI实验室。
小米CEO雷军当时表示,公司正在研发一些技术和产品,等打磨好了再给大家演示。小米集团总裁卢伟冰称,小米目前拥有超过1200人的AI团队,会积极拥抱大模型,与业务深度结合,但不会像OpenAI一样。
今年6月,王斌对外透露,小米会去自研通用语言大模型,但不会单独发布一款类ChatGPT产品。他表示,小米第一步的目标基座模型参数在几百亿,而且小米大模型将会落地小爱同学、loT、自动驾驶、机器人等现有场景中,并利用丰富的应用场景反哺大模型能力。
成立仅仅四个月后的今天,小米公布了大模型产品——MiLM-6B,并在C-Eval和CMMLU基准评测上均取得同尺寸较好效果。
其中,在C-Eval评估中,MiLM-6B的平均得分为60.2,在不同学科和难度级别(如STEM、社会科学、人文学科等)得分从42分到71.7分不等。在CMMLU评估中,MiLM-6B在零样本和五样本测试中的平均得分分别为60.37分和57.17分,表现出良好的知识和推理能力。
据悉,C-Eval榜单是清华大学、上海交通大学和爱丁堡大学共同构建的综合汉语模型评估套件,而CMMLU则是综合汉语模型基准。
预计小米将会于8月14日举行2023雷军年度演讲,但目前雷军暂未透露是否会发布MiLM-6B大模型技术。
钛媒体App向团队询问关于MiLM-6B/1.3B是否开源、产品是否已经落地内测等问题,截至发稿前暂未得到小米官方回复。(本文首发钛媒体App,作者|林志佳)
[责任编辑:linlin]
标签:
小米AI大模型MiLM-6B首次曝光:64亿参数量,此前称不单独做ChatG
必易微(688045.SH):公司产品性能处于模拟芯片行业较为领先的水
华测导航(300627.SZ):积极布局车规级芯片、全球SWAS广域增强系统
航宇微(300053.SZ):玉龙(YULONG)是公司推出的新一代嵌入式人工
紫光集团确认正在商谈法国芯片商Linxens出售事宜
净利大降94% 模拟芯片厂商思瑞浦上半年业绩表现不佳 去库存压
博众精工(688097.SH):高速高精度固晶机和新一代芯片外观检测AOI
数千名黑客齐聚拉斯维加斯 共同“围剿”ChatGPT等AI应用
大增74%!4000亿芯片巨头业绩来了
【经纬晚班车】美国芯片法案生效一年了,大量公司仍在等待美国政
“元宇宙第一股”暴跌 “木头姐”大举抄底买入2550万美元
绩后暴跌22% “元宇宙第一股”Roblox值得抄底吗?