阿里发布 Qwen4-Max:2.4 万亿参数 MoE 架构,对标 Opus 5.5、GPT-6 与 Kimi K3.1 Pro 且价格更低
自动整理 · 基于采集摘要,未逐条核验
本站整理于
事件要点
阿里巴巴发布旗舰模型 Qwen4-Max,采用 Qwen4 系列新混合注意力架构,2.4 万亿参数中每 token 仅激活 710 亿,原生处理图像并支持一百万 token 上下文窗口。
相关背景
上下文窗口是什么?模型一次能处理的内容与遗忘边界
上下文窗口是模型一次处理所能容纳的词元范围,涉及当前请求使用的内容。系统指令与历史消息也可能占用预算,不同模型对输入、输出及思考词元的限制方式需要分别核对。窗口大不等于模型永久记住资料,也不保证能准确找出长文中的所有细节;超过限制可能报错或触发截断等处理。
词元是什么?Token 与字数、用量和上下文预算的关系
词元Token是语言模型处理文本时使用的离散单位,可以对应一个字、一个词的一部分或标点等片段,取决于分词器。它不等于固定数量的中文字或英文单词。输入预算与生成用量常以词元计量,但模型和接口口径可能不同,核算时应使用目标模型的计数方式,并检查实际返回的用量信息。
阅读说明
事件要点来自采集摘要;相关背景引用本站已有资料,帮助理解术语,不作为本次事件的新事实。产品效果、适用条件及后续变化请查看原始资料。
原文来源
来源与采集进展
| 来源 | 报道标题 | 原文发布时间 | 本站收录时间 |
|---|---|---|---|
| The Decoder | 阿里发布 Qwen4-Max:2.4 万亿参数 MoE 架构,对标 Opus 5.5、GPT-6 与 Kimi K3.1 Pro 且价格更低 | 2026-11-17 00:56 | 2026-11-17 01:07 |