8月3日,阿里云开源通义千问70亿参数模型,包括通用模型Qwen-7B和对话模型Qwen-7B-Chat,两款模型均已上线魔搭社区,开源、免费、可商用。此举让阿里云成为国内首个加入大模型开源行列的大型科技企业。
(资料图)
通义千问开源!8月3日,AI模型社区魔搭ModelScope上架两款开源模型Qwen-7B和Qwen-7B-Chat,阿里云确认其为通义千问70亿参数通用模型和对话模型,两款模型均开源、免费、可商用。在多个权威测评中,通义千问7B模型取得了远超国内外同等尺寸模型的效果,成为当下业界最强的中英文7B开源模型。
今年4月,阿里云推出自研大模型通义千问,引发井喷式的市场需求。此次小型化模型版本开源,有望抹平模型使用门槛,让海量中小企业和AI开发者更早、更快地用上通义千问。这一举动也让阿里云成为国内首个加入大模型开源行列的大型科技企业。
Qwen-7B是支持中、英等多种语言的基座模型,在超过2万亿token数据集上训练,上下文窗口长度达到8k。Qwen-7B-Chat是基于基座模型的中英文对话模型,已实现与人类认知对齐。开源代码支持对Qwen-7B和Qwen-7B-Chat的量化,支持用户在消费级显卡上部署和运行模型。
用户既可从魔搭社区直接下载模型,也可通过阿里云灵积平台访问和调用Qwen-7B和Qwen-7B-Chat,阿里云为用户提供包括模型训练、推理、部署、精调等在内的全方位服务。
通义千问7B预训练模型在多个权威基准测评中表现出色,中英文能力远超国内外同等规模开源模型,部分能力甚至“跃级”赶超12B、13B尺寸开源模型。
在英文能力测评基准MMLU上,通义千问7B模型得分超过一众7B、12B、13B主流开源模型。该基准包含57个学科的英文题目,考验人文、社科、理工等领域的综合知识和问题解决能力。
在中文常识能力测评基准C-Eval上,通义千问在验证集和测试集中都是得分最高的7B开源模型,展现了扎实的中文能力。相比英文世界热闹的AI开源生态,中文社区缺少优秀的基座模型。通义千问的加入有望为开源社区提供更多选择,推动中国AI开源生态建设。
在数学解题能力评测GSM8K、代码能力评测HumanEval等基准上,通义千问7B模型也有不俗表现,胜过所有同等尺寸开源模型和和部分大尺寸开源模型。
阿里云表示,开源大模型可以帮助用户简化模型训练和部署的过程,用户不必从头训练模型,只需下载预训练好的模型并进行微调,就可快速构建高质量的模型。
附:开源地址
魔搭ModelScope:
/models/qwen/Qwen-7B/summary
/models/qwen/Qwen-7B-Chat/summary
Hugging Face:/Qwen
GitHub:/QwenLM/Qwen-7B
开源生态对促进中国大模型的技术进步与应用落地至关重要。今年7月,阿里云宣布将促进中国大模型生态的繁荣作为首要目标,向大模型创业公司提供智能算力、开发工具等全方位服务。2022年阿里云牵头发起AI模型社区魔搭,以AI模型为核心服务AI开发者。目前,魔搭聚集了20多家顶尖人工智能机构贡献的1000多款开源模型,已经成为中国大模型开源第一门户。(完/供图)
注:请在转载文章内容时务必注明出处!
编辑:达利敏
关键词:
相关文章
-
阿里云通义千问开源!70亿参数模型上线魔搭社区,免费可商用
-
沈晓明在桃江调研县域经济发展
-
广西首个标准化无人值守收费站投入使用
-
自贡荣县:老人独自在家重度中暑 民警及时救助—中国新闻网·四
-
近250亿元税费红利 助渝企“轻装疾行”
-
五常受灾农户:如果水退得快,稻苗可能还有救
-
甘肃平凉:擦亮体育名片 增添城市活力
-
新疆墨玉:总投资2亿元商业街项目开工
-
【第413期】你想象不到:47万同时在线的游戏,曾濒临破产几次?
-
三一工程车辆纯电动产品多地完美交付
-
人参天麻茶~防老年痴呆~增强记忆力
-
新华社高质量发展调研行走进三一
-
探馆:徐悲鸿纪念馆
-
所有人都用一个血压计,你知道误差有多大吗?超乎你的想象!
-
全国公路网“体检”进行时
-
青岛食品董秘张松涛曾是银行的客户经理 是啥硕士学历?
-
锴威特公布网上发行中签率
-
上半年国有企业利润总额同比增长5%
-
塞那Z51耳机私人助手体验
-
「AI 大神」回归学术界:“祝贺 MIT 拥有何恺明!”