阿里云宣布Qwen2开源
科技IT 2024-06-08 user3242
阿里云宣布,Qwen2今日开源,免费下载。
阿里云表示,历经数月努力,很高兴迎来了Qwen系列模型从Qwen1.5到Qwen2的重大升级。
这次升级包括:
5个尺寸的预训练和指令微调模型, 包括Qwen2-0.5B、Qwen2-1.5B、Qwen2-7B、Qwen2-57B-A14B以及Qwen2-72B;
在中文英语的基础上,训练数据中增加了27种语言相关的高质量数据;
多个评测基准上的领先表现;
代码和数学能力显著提升;
增大了上下文长度支持,最高达到128K tokens(Qwen2-72B-Instruct)。
据悉,Qwen2-72B-Instruct能够完美处理128k上下文长度内的信息抽取任务;Qwen2-7B-Instruct几乎完美地处理长达128k的上下文;Qwen2-57B-A14B-Instruct则能处理64k的上下文长度;而该系列中的两个较小模型则支持32k的上下文长度。
目前,上述Qwen2系列模型已在Hugging Face和ModelScope上同步开源。
阿里云强调,此次采用不同的模型许可。除了Qwen2-72B依旧使用此前的Qianwen License外,其余模型,包括Qwen2-0.5B、Qwen2-1.5B、Qwen2-7B以及Qwen2-57B-A14B在内,均采用Apache 2.0的许可。
阿里云希望本次开放程度的提升能够加速Qwen2在全球各地的落地及商业应用。
The End
相关阅读
- 信号完整性设计 Samtec的理解:创新技术和卓越服务的整合
- 云深处科技完成超 5 亿元 C 轮融资,助力公司加速具身智能核心技术攻关与行业落地
- 亿铸科技荣获硬核中国芯2023年度卓越成长表现企业奖
- 古文明的绿意焕新 一道新能82MW希腊项目顺利交付
- 【数智石油一线行】① 破壁:“磨刀石”上磨出智慧刃
- Mobileum 被选为 NTT Communications 全球联网汽车项目的技术平台
- 研究机构认为到2030年全球储能系统装机容量预计将超1.6TWh以上
- 科技集市培养数字创造力,高通公司支持乡村科技教育发展
- 比特早报:5G+AI打造新增长点,SK海力士、台积电、英伟达或将合作开发下一代HBM
- Ceva蜂窝物联网平台集成到意法半导体NB-IoT工业模块中