阿里云宣布Qwen2开源
科技IT 2024-06-08 user3242
阿里云宣布,Qwen2今日开源,免费下载。
阿里云表示,历经数月努力,很高兴迎来了Qwen系列模型从Qwen1.5到Qwen2的重大升级。
这次升级包括:
5个尺寸的预训练和指令微调模型, 包括Qwen2-0.5B、Qwen2-1.5B、Qwen2-7B、Qwen2-57B-A14B以及Qwen2-72B;
在中文英语的基础上,训练数据中增加了27种语言相关的高质量数据;
多个评测基准上的领先表现;
代码和数学能力显著提升;
增大了上下文长度支持,最高达到128K tokens(Qwen2-72B-Instruct)。
据悉,Qwen2-72B-Instruct能够完美处理128k上下文长度内的信息抽取任务;Qwen2-7B-Instruct几乎完美地处理长达128k的上下文;Qwen2-57B-A14B-Instruct则能处理64k的上下文长度;而该系列中的两个较小模型则支持32k的上下文长度。
目前,上述Qwen2系列模型已在Hugging Face和ModelScope上同步开源。
阿里云强调,此次采用不同的模型许可。除了Qwen2-72B依旧使用此前的Qianwen License外,其余模型,包括Qwen2-0.5B、Qwen2-1.5B、Qwen2-7B以及Qwen2-57B-A14B在内,均采用Apache 2.0的许可。
阿里云希望本次开放程度的提升能够加速Qwen2在全球各地的落地及商业应用。
The End
相关阅读
- GenAI繁花,终将发芽!
- 软通动力出席百度云智大会,分享行业大模型的思考与实践
- OpenAI计划下周推出GPT商店
- 比特早报:苹果将公布AI战略,商汤2023年生成式AI收入达12亿元
- 贸泽授权代理Phoenix Contact新近推出的各种产品与解决方案
- Molex与3D打印领军企业Prusa Research携手合作, 支持其在3D打印领域的快速发展
- 国产 scaleX 万卡超集群真机首次亮相,中科曙光打造
- TDK通过科学碳目标倡议的净零目标验证
- 比特网早报:AI大模型拒绝听从人类指令,英伟达第一财季净利润187.8亿美元
- 比特网早报:OpenAI正研发用于音乐创作的AI,Grok推出名为Mika的新AI伴侣