比中国闭源模型们更强的开源模型来了!6月7日,阿里云更新技术博客:重磅发布全球性能最强的开源模型Qwen2-72B,性能超过美国最强的开源模型Llama3-70B,也超过文心4.0、豆包pro、混元pro等众多中国闭源大模型。所有人均可在魔搭社区和Hugging Face免费下载通义千问最新开源模型。
相比2月推出的通义千问Qwen1.5,Qwen2实现了整体性能的代际飞跃。在权威模型测评榜单OpenCompass中,此前开源的Qwen1.5-110B已领先于文心4.0等一众中国闭源模型。刚刚开源的Qwen2-72B,整体性能相比Qwen1.5-110B又取得了大幅提升。
(图说:在上海人工智能实验室推出的OpenCompass大模型测评榜单上,此前开源的Qwen1.5-110B已领先于文心4.0等一众中国闭源模型)
通义千问Qwen2系列模型大幅提升了代码、数学、推理、指令遵循、多语言理解等能力。在MMLU、GPQA、HumanEval、GSM8K、BBH、MT-Bench、Arena Hard、LiveCodeBench等国际权威测评中,Qwen2-72B一举斩获十几项世界冠军,超过美国的Llama3。
(图说:Qwen2-72B在十多个权威测评中获得冠军,超过美国的Llama3-70B模型)
通义千问团队在技术博客中披露,Qwen2系列包含5个尺寸的预训练和指令微调模型,Qwen2-0.5B、Qwen2-1.5B、Qwen2-7B、Qwen2-57B-A14B和Qwen2-72B,其中Qwen2-57B-A14B为混合专家模型(MoE)。Qwen2所有尺寸模型都使用了GQA(分组查询注意力)机制,以便让用户体验到GQA带来的推理加速和显存占用降低的优势。
(图说:Qwen2系列包含5个尺寸的预训练和指令微调模型)
在中英文之外,模型训练数据中增加了27种语言相关的高质量数据,提升了模型的多语言能力。Qwen2还增大了上下文长度支持,Qwen2-72B-Instruct能够完美处理128k上下文长度内的信息抽取任务。
魔搭社区模型下载地址:
Qwen2-72B https://modelscope.cn/models/qwen/Qwen2-72B
Qwen2-72B-Instruct https://modelscope.cn/models/qwen/Qwen2-72B-Instruct
据悉,通义千问Qwen系列模型正在全球爆火,总下载量一个月内翻了一倍,已突破1600万次。全球开源社区已经出现了超过1500款基于Qwen二次开发的模型。Qwen系列的72B、110B模型多次登顶HuggingFace 的Open LLM Leaderboard开源模型榜单。
阿里云CTO周靖人表示,“坚持开源开放是阿里云的重要策略,我们希望打造一朵AI时代最开放的云,让算力更普惠、让AI更普及。”
(图说:众多开源平台和工具第一时间支持Qwen2)
自2023年8月开源以来,通义千问在全球开源社区生态中已形成重要影响力。6月7日,Qwen2系列模型的API第一时间登陆阿里云百炼平台。TensorRT-LLM、OpenVINO、OpenCompass、XTuner、LLaMA-Factory、Firefly、OpenBuddy、vLLM、Ollama等众多全球开源平台和工具,也第一时间宣布支持Qwen2最新款模型。除了美国Llama开源生态之外,通义千问已成为全球开发者的另一主流选项。
![阿里云全面升级GPU云服务,AI大模型推理性能可提升100%](https://m.2news.cn/res/2024/07-19/19/bfe6cd083b700f25169f1581b300c902.jpg)
![市场份额第一!阿里云WAAP安全产品能力获IDC评测七项满分](https://m.2news.cn/res/2024/07-11/22/2ce0f3412030f0ca56abea59fdca3d71.jpg)
![探索AI人才培养新范式,合合信息与同济大学软件学院签署产教融合人才培养协议](https://m.2news.cn/res/2024/07-10/16/e455dd5cf2e0711e8a34c61c6dfd4ff5.png)
![阿里云CTO周靖人:阿里云百炼服务客户数从9万增长至23万,涨幅超150%](https://m.2news.cn/res/2024/07-05/21/dbb774e3bee9a576302322fb9b48142a.png)
![亮相2024世界人工智能大会,扫描全能王AIGC“黑科技”助力敦煌遗书数字化修复](https://m.2news.cn/res/2024/07-04/23/d1715abd076be16a40f5f12b294d4109.jpg)
![一键处理阴影、脏污等十余个图像问题,扫描全能王智能高清滤镜升级版上线](https://m.2news.cn/res/2024/06-27/20/cbb3049f096a885005df3c3a61be7cd5.jpg)