阿里发布最强开源模型Qwen 3,参数量仅为DeepSeek-R1的1/3

阿里发布最强开源模型Qwen 3,参数量仅为DeepSeek-R1的1/3

蓝鲸新闻4月30日讯(记者 武静静)赶在了五一节前,阿里巴巴开源新一代通义千问模型 Qwen3。据介绍,其参数量仅为 DeepSeek-R1 的 1/3,成本大幅下降,但性能表现不错。

报告显示,Qwen3-235B-A22B在代码、数学、通用能力等基准测试中,超过了与DeepSeek-R1、o1、o3-mini、Grok-3 和 Gemini-2.5-Pro 等全球顶尖模型。成为了全球最强的开源模型。

阿里发布最强开源模型Qwen 3,参数量仅为DeepSeek-R1的1/3

阿里发布最强开源模型Qwen 3,参数量仅为DeepSeek-R1的1/3

通过模型架构的改进、训练数据的增加以及更有效的训练方法,Qwen3实现了模型体积更小情况下,性能表现也比更大参数规模的Qwen2.5基础模型要好。特别是在 STEM、编码和推理等领域,Qwen3 Dense 基础模型的表现甚至超过了更大规模的 Qwen2.5 模型。

博客中,阿里称,Qwen3 Dense 基础模型的整体性能与参数更多的Qwen2.5基础模型相当。例如,Qwen3-1.7B/4B/8B/14B/32B-Base 分别与 Qwen2.5-3B/7B/14B/32B/72B-Base 表现相当。

阿里发布最强开源模型Qwen 3,参数量仅为DeepSeek-R1的1/3

有意思的是,除了拥有235B参数的MoE模型外,Qwen 3还配备了一个小型MoE模型,即Qwen3-30B-A3B。该模型的激活参数量为3B,不及QwQ-32B模型的10%,然而其性能却更为出色。

我们可以把MoE架构理解为一个大型的客服中心,其中有许多专门处理不同问题的专家——有的专家专门处理技术问题,有的专家处理账单查询,还有的专家负责解答产品使用问题。在大模型训练过程中,当数据进入模型中后,大模型会像"客服中心"一样,根据问题的性质被分配给最合适的专家来解决,可以提高查询的计算效率。

此次,阿里开的源模型有Dense模型,也有MoE模型。其中,开源了两个 MoE 模型的权重:Qwen3-235B-A22B,一个拥有 2350 多亿总参数和 220 多亿激活参数的大模型,以及Qwen3-30B-A3B,一个拥有约 300 亿总参数和 30 亿激活参数的小型 MoE 模型。

六个 Dense 模型也已开源,包括 Qwen3-32B、Qwen3-14B、Qwen3-8B、Qwen3-4B、Qwen3-1.7B和 Qwen3-0.6B,均在 Apache 2.0 许可下开源。可以直接商用。

Qwen 3系列的其中一个创新点在于其"混合型"模型设计,可以在深度思考这种慢思考模式(用于复杂的逻辑推理、数学和编码)和快思考模式(用于高效、通用的聊天) 之间的无缝切换 ,确保在各种场景下实现最佳性能。

这意味着,用户终于不需要手动操作开启并关闭"深度思考"功能,且担心模型过度思考的问题了,此前,很多大模型用户反馈称,大模型动不动就深度思考输出长篇大论,很多小问题也如此完全没必要。

关键在于,这种快慢思考灵活切换的模式能有效的降低成本,阿里在博客中称:这两种模式的结合大大增强了模型实现稳定且高效的"思考预算"控制能力。这样的设计让用户能够更轻松地为不同任务配置特定的预算,在成本效益和推理质量之间实现更优的平衡。

阿里发布最强开源模型Qwen 3,参数量仅为DeepSeek-R1的1/3

在部署方面,阿里称仅需4张H20即可部署千问3满血版,显存占用仅为性能相近模型的三分之一。这意味着相比相比满血版deepseek R1,部署成本大降75%~65%。

阿里发布最强开源模型Qwen 3,参数量仅为DeepSeek-R1的1/3

阿里介绍称,Qwen3经过了四阶段的训练流程,相当于,先教基础→再练深度思考→混合快慢模式→最后全面优化。阿里表示,Qwen3在工具调用、指令执行和数据格式处理方面表现优秀。建议搭配Qwen-Agent使用,它能简化工具调用的代码实现。

此次,阿里还专门优化了Qwen3 模型的 Agent 和 代码能力,同时也加强了对 MCP 的支持。在示例中看到, Qwen3 可以丝滑的调用工具。

开源正在成为阿里核心的AI战略,从2023年起,阿里通义团队就陆续开发了覆盖0.5B、1.5B、3B、7B、14B、32B、72B、110B等参数的200多款「全尺寸」大模型。

在此前的一次采访中,通义相关负责人曾告诉蓝鲸新闻,"开源不是目的而是结果。只有做出真正有竞争力的产品,开源才有意义。这倒逼我们必须做到两点:一是模型性能要达到全球SOTA水平,二是要能媲美甚至超越闭源模型。"

平台声明:该文观点仅代表作者本人,联合网系信息发布平台。发布者:蓝鲸新闻,转转请注明出处:https://www.anesthesia.org.cn/7474.html

(0)
蓝鲸新闻的头像蓝鲸新闻
上一篇 2025年4月30日 下午3:00
下一篇 2025年4月30日 下午3:01

相关推荐

  • 巴总理:印度战机被我们打成渣了,印度的阵风战斗机在此次冲突中表现不佳

      2025年5月7日,巴基斯坦与印度之间的军事冲突进一步升级。巴基斯坦总理夏巴兹谢里夫在当天的全国电视讲话中透露,巴基斯坦空军在短短几个小时内成功击落了多架印度战机,并将其打成碎片渣渣。这一消息迅速引发了国际社会的广泛关注。   据报道,此次空战持续了约1小时,巴基斯坦飞行员展现了卓越的战斗能力,将印度战机彻底击毁。巴基斯坦总理强调,此次行动不仅展示了巴基…

    2025年5月9日
    4500
  • 夫妻卖卡牌、年入100亿,揭秘比泡泡玛特更暴利的生意

    作者 | 定焦One 苏琦 2025年最火的年轻消费公司,你以为是泡泡玛特?实际上,有一家公司赚得比泡泡玛特还多,而且正在准备上市,它就是卡游。 泡泡玛特上市时,就是靠着其盈利能力名声大噪。上市前一年(2019年),泡泡玛特的营收增幅为227%,净利润增幅为351%。而卡游2024年营收增幅达277.76%,经调整净利润同比暴增378.67%,均高于泡泡玛特…

    2025年5月6日
    9700
  • 新造车4月再洗牌:零跑超小鹏理想,小米问界各有烦恼

    作者 | 定焦One 金玙璠 5月第一天,当电动车车主在高速服务区"抢"充电桩的时候,造车新势力4月交付量榜单如期揭晓,固有格局继续被打破:前三名依次是零跑、小鹏、理想。 零跑一早就甩出一张交付41039辆、同比增长173%的成绩单,超过小鹏(35045辆)、理想(33939辆),连续两个月登顶新势力销冠。 小鹏交付量同比涨了2.7倍,在头部新势力中涨幅最大…

    2025年5月6日
    10800
  • 局地伴有雷电、短时强降水、7-9级雷雨大风!刚刚,青岛两区发布雷电黄色预警

    刚刚, 青岛西海岸新区气象台 和城阳区气象台 接连发布 雷电黄色预警信号 部分区域已出现强对流天气, 预计今天下午, 部分区域将有雷雨, 局地伴有雷电、短时强降水 和7-9级雷雨大风, 请注意防范! 来源 | @青岛气象

    2025年7月6日
    1000
  • 快手CEO程一笑:一季度可灵AI收入规模达1.5亿元

    蓝鲸新闻5月27日电,在今日的业绩电话会上,快手CEO程一笑在回答可灵AI商业化变现进展时透露,今年一季度,可灵AI的收入规模已达人民币1.5亿元。“从收入构成来看,目前P(Prosumer)端付费订阅会员贡献了可灵AI将近70%的营业收入,P端付费订阅会员指自媒体视频创作者和广告营销从业者等专业用户,他们兼具C端用户的传播属性和B端用户的付费能力,是目前视…

    2025年5月28日
    3000

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信