模型详情
模型介绍
中文整理模型名称
Qwen3-30B-A3B-Instruct-2507-FP8
模型类型
因果语言模型
参数规模
总参数:30.5B
激活参数:3.3B
非嵌入参数:29.9B
层数:48
注意力头数:Q头32个,KV头4个
专家总数:128
激活专家数:8
上下文长度
原生支持262,144个token
训练阶段
预训练和后训练
主要能力
指令跟随、逻辑推理、文本理解、数学推理、科学知识、编程能力、工具使用。多语言长尾知识覆盖。主观和开放性任务的用户偏好对齐,生成更帮助性的回复和更高质量的文本。256K长上下文理解能力。
输入输出格式
文本对话形式输入输出。支持工具调用和代码解释器功能。
运行要求
FP8量化版本。需要支持FP8推理的部署环境。
基本用法
可通过SGLang或vLLM框架部署为API服务。客户端可使用Qwen Agent库构建对话代理,支持流式输出。
使用限制
仅支持非思考模式。不生成shell命令。
许可证
请参考模型原始许可证。
优先采用原作者提供的中文模型卡片;仅有英文说明时由闲社AI翻译整理。重要参数、许可证和商用范围请以原文为准。
你将获得什么
完整仓库方式包含该固定版本中的权重、配置、分词器及说明文件;指定版本方式只下载所选文件或整组分片。多模态模型的投影文件、配置等依赖,请按作者说明配齐。
完整仓库可能包含多个权重格式,因此需要的磁盘空间可能大于单一格式的模型大小。下载文件不等于完成模型部署。
使用前须知
运行环境运行模型需要的设备、工具与依赖,以原作者说明为准。
授权范围是否允许商用、修改和分发,请查看模型许可证。
闲社提供资料与镜像下载方法,不代表已运行模型或完成安全审计。下载的代码应先检查,再执行。
资料或下载有问题?
登录后可提交反馈。