首页 小说推荐 实时讯息 百科知识 范文大全 经典语录
您的位置: 首页 > 实时讯息 >

比DeepSeek R2先发!阿里巴巴Qwen3上新8款,登顶全球最强开源模型

0次浏览     发布时间:2025-04-29 07:14:00    

Qwen3千呼万唤始出来,直接登顶全球最强开源模型。

4月29日凌晨,阿里巴巴开源新一代通义千问模型Qwen3(简称千问3),旗舰模型Qwen3-235B-A22B参数量仅为DeepSeek-R1的1/3,总参数量235B,激活仅需22B,成本大幅下降,性能全面超越R1、OpenAI-o1等全球顶尖模型,登顶全球最强开源模型。

千问3预训练数据量达36T ,并在后训练阶段多轮强化学习,将快思考模式和慢思考模式无缝整合,同时在推理、指令遵循、工具调用、多语言能力等方面均大幅增强,创下所有国产模型及全球开源模型的性能新高。

千问3共计八款模型,包含2款30B、235B的MoE模型,以及0.6B、1.7B、4B、8B、14B、32B等6款密集模型,每款模型均斩获同尺寸开源模型SOTA(最佳性能)。

其中,千问3的30B参数MoE模型实现了10倍以上的模型性能杠杆提升,仅激活3B就能媲美上代Qwen2.5-32B模型性能;千问3的稠密模型性能继续突破,一半的参数量可实现同样的高性能,如32B版本的千问3模型可跨级超越Qwen2.5-72B性能。

4月是大模型集中发布的一月,OpenAI发布了GPT-4.1 o3、o4 mini系列模型,谷歌Gemini 2.5 Flash Preview混合推理模型上新,豆包也公布了1.5·深度思考模型,其他大模型厂商也开源或者更新了不少模型,业内也传出DeepSeek R2模型即将发布的消息,但目前大部分消息都是捕风捉影。

不论DeepSeek R2发布与否,“先发制人”的千问3,先一步站在大模型“平民化”的真正起点上。

国内首个混合推理思考模型,增强 Agent 能力且支持MCP

千问3模型支持两种思考模式:

  • 慢思考模式:在这种模式下,模型会逐步推理,经过深思熟虑后给出最终答案。这种方法非常适合需要深入思考的复杂问题。
  • 快思考模式:在此模式中,模型提供快速、近乎即时的响应,适用于那些对速度要求高于深度的简单问题。

所有千问3模型都是混合推理模型,这也使其成为国内首个“混合推理模型”,“快思考”与“慢思考”集成进同一个模型,对简单需求可低算力“秒回”答案,对复杂问题可多步骤“深度思考”,大大节省算力消耗。

API可按需设置“思考预算”(即预期最大深度思考的tokens数量),进行不同程度的思考,灵活满足AI应用和不同场景对性能和成本的多样需求。比如,4B模型是手机端的绝佳尺寸;8B可在电脑和汽车端侧丝滑部署应用;32B最受企业大规模部署欢迎,有条件的开发者也可轻松上手。

在奥数水平的AIME25测评中,千问3斩获81.5分,刷新开源纪录;在考察代码能力的LiveCodeBench评测中,千问3突破70分大关,表现甚至超过Grok3;在评估模型人类偏好对齐的ArenaHard测评中,千问3以95.6分超越OpenAI-o1及DeepSeek-R1。

性能大幅提升的同时,千问3的部署成本还大幅下降,仅需4张H20即可部署千问3满血版,显存占用仅为性能相近模型的三分之一。

千问3模型还支持 119 种语言和方言。目前这些模型均在 Apache 2.0 许可下开源,现已在 Hugging Face、ModelScope 和 Kaggle 等平台上开放使用。

阿里巴巴也推荐使用 SGLang 和 vLLM 等框架部署,而对于本地使用,Ollama、LMStudio、MLX、llama.cpp 和KTransformers 等工具也支持。

千问3也考虑了智能体Agent和大模型应用落地。在评估模型Agent能力的BFCL评测中,千问3创下70.8的新高,超越Gemini2.5-Pro、OpenAI-o1等顶尖模型,将大幅降低Agent调用工具的门槛。

同时,千问3原生支持MCP协议,并具备强大的工具调用(function calling)能力,结合封装了工具调用模板和工具调用解析器的Qwen-Agent 框架,将大大降低编码复杂性,实现高效的手机及电脑Agent操作等任务。

36万亿token预训练,四阶段后训练

在预训练方面,Qwen3 的数据集相比 Qwen2.5 有了显著扩展。Qwen2.5是在 18 万亿个 token 上进行预训练的,而Qwen3 使用的数据量几乎是其两倍,达到了约 36 万亿个 token。

为了构建这个庞大的数据集,千问团队不仅从网络上收集数据,还从 PDF 文档中提取信息。例如使用 Qwen2.5-VL 从这些文档中提取文本,并用 Qwen2.5 改进提取内容的质量。

为了增加数学和代码数据的数量,千问团队利用 Qwen2.5-Math 和 Qwen2.5-Coder 这两个数学和代码领域的专家模型合成数据,合成了包括教科书、问答对以及代码片段等多种形式的数据。

预训练过程分为三个阶段。在第一阶段(S1),模型在超过 30 万亿个 token 上进行了预训练,上下文长度为 4K token。这一阶段为模型提供了基本的语言技能和通用知识。

在第二阶段(S2),千问团队通过增加知识密集型数据(如 STEM、编程和推理任务)的比例来改进数据集,随后模型又在额外的 5 万亿个 token 上进行了预训练。

在最后阶段,千问团队使用高质量的长上下文数据将上下文长度扩展到 32K token,确保模型能够有效地处理更长的输入。

由于模型架构的改进、训练数据的增加以及更有效的训练方法,Qwen3 Dense 基础模型的整体性能与参数更多的Qwen2.5基础模型相当。

例如,
Qwen3-1.7B/4B/8B/14B/32B-Base 分别与
Qwen2.5-3B/7B/14B/32B/72B-Base 表现相当。特别是在 STEM、编码和推理等领域,Qwen3 Dense 基础模型的表现甚至超过了更大规模的 Qwen2.5 模型。

对于 Qwen3 MoE 基础模型,它们在仅使用 10% 激活参数的情况下达到了与 Qwen2.5 Dense 基础模型相似的性能。这带来了训练和推理成本的显著节省。

后训练方面,为了开发能够同时具备思考推理和快速响应能力的混合模型,千问团队实施了一个四阶段的训练流程。该流程包括:(1)长思维链冷启动,(2)长思维链强化学习,(3)思维模式融合,以及(4)通用强化学习。

在第一阶段,先使用多样的的长思维链数据对模型进行了微调,涵盖了数学、代码、逻辑推理和 STEM 问题等多种任务和领域。这一过程旨在为模型配备基本的推理能力。

第二阶段的重点是大规模强化学习,利用基于规则的奖励来增强模型的探索和钻研能力。

在第三阶段,在一份包括长思维链数据和常用的指令微调数据的组合数据上对模型进行微调,将非思考模式整合到思考模型中,确保了推理和快速响应能力的无缝结合。

在第四阶段,在包括指令遵循、格式遵循和 Agent 能力等在内的 20 多个通用领域的任务上应用了强化学习,以进一步增强模型的通用能力并纠正不良行为。

目前个人用户可立即通过通义APP直接体验千问3,夸克也即将全线接入千问3。阿里通义已开源200余个模型,全球下载量超3亿次,千问衍生模型数超10万个,已超越美国Llama,成为全球第一开源模型。(本文首发于钛媒体APP,作者 | 张帅,编辑 | 盖虹达)

相关文章

2025-04-29 12:45:00 苏能股份:“数智”融新 “链”接未来

巨幕之上,柱状图、饼状图、曲线图错落有致,实时数据流奔腾不息,算法模型精准解析,轻点鼠标即可实现数据“穿透”溯源,从宏观态势到微观交易明细都能尽收眼底……这正是苏能股份物资供销分公司供应链大数据中心呈现的数字化图景。多维度、多层级、细颗粒度的可视化供应链业务巨幕带来的视觉冲击令人震撼。该公司是如何以

2025-04-29 12:45:00
2025-04-29 07:14:00 比DeepSeek R2先发!阿里巴巴Qwen3上新8款,登顶全球最强开源模型

Qwen3千呼万唤始出来,直接登顶全球最强开源模型。4月29日凌晨,阿里巴巴开源新一代通义千问模型Qwen3(简称千问3),旗舰模型Qwen3-235B-A22B参数量仅为DeepSeek-R1的1/3,总参数量235B,激活仅需22B,成本大幅下降,性能全面超越R1、OpenAI-o1等全球顶尖模

2025-04-29 07:14:00
2025-04-27 17:16:00 胖东来不是永辉的解药

文|新品略财经 吴文武正在全面学习胖东来的永辉超市,还在持续亏损,市场再次为这家胖东来门徒捏了一把汗。《新品略财经》关注到,4月25日,永辉超市公布的2024年年度及2025年第一季度财报显示,2024年,公司营业收入675.74亿元,同比减少14.07%,归属上市公司股东净利润-14.65亿元,

2025-04-27 17:16:00
2025-04-26 17:02:00 康方生物抗体药新适应症在中国获批,美国合作方股价为何暴跌

国家药品监督管理局官网显示,康方生物全球首创双特异性抗体新药依沃西新适应症获批上市,单药用于PD-L1表达阳性的局部晚期或转移性非小细胞肺癌(NSCLC)的一线治疗。依沃西的数据是今年医药行业最受关注的数据之一。康方生物称,依沃西一线治疗PD-L1阳性NSCLC新适应症的获批上市,是基于依沃西“头对

2025-04-26 17:02:00
2025-04-25 17:22:00 深江高铁建设进入盾构机组装与始发关键阶段

据深江高铁项目部25日消息,深江高铁建设现已进入盾构机组装与始发关键阶段,为全线贯通奠定坚实基础。作为粤港澳大湾区“轨道上的大湾区”核心工程,深江高铁设计时速250公里,建成后将实现深圳前海与江门主城区30分钟直达,串联起珠江口两岸城市群,推动“广深港澳科创走廊”与粤西经济带深度联动。更多精彩资讯请

2025-04-25 17:22:00
2025-04-24 17:15:00 ​【坚定信心 勇挑大梁】河北:钢铁大省如何“变身”算力大省

算力,是数字经济时代支撑新质生产力发展的战略资源。习近平总书记强调,要加快建设高速泛在、天地一体、云网融合、智能敏捷、绿色低碳、安全可控的智能化综合性数字信息基础设施,打通经济社会发展的信息"大动脉"。近年来,河北省持续推出新政策、引进新技术、打造新基建,从曾经的钢铁大省变身算力大省,在数字化的创新

2025-04-24 17:15:00
2025-04-24 15:35:00 湖北智慧交管绘制美好出行新图景

第十五届中国国际道路交通安全产品博览会“湖北交警”展厅4月23日,第十五届中国国际道路交通安全产品博览会开幕,来自车路云协同、智慧车驾管、交通安全防控等领域的3000余件展品让人目不暇接。其中湖北交警的主旨报告和特色展厅受到关注。“近年来,我们坚持以改革创新为源动力,以智慧交管建设为主牵引,以科技赋

2025-04-24 15:35:00
2025-04-22 16:36:00 《哪吒2》第三次延长,放映到5月底!距全球票房第三仅差11亿,光线传媒赚翻了

本文来源:时代财经 来源:图虫4月22日,灯塔专业版显示,电影《哪吒之魔童闹海》(下称“哪吒2”)密钥再次延期,从4月30日延长上映至5月31日。这是《哪吒2》第三次宣布延长上映时间。2月19日,该影片片方首次宣布公映秘钥延期,延长上映至3月30日;随后又延期至4月30日。截至4月22日15:25,

2025-04-22 16:36:00