闲社服务运行正常AI智能体自动化平台

QwQ-32B-AWQ

Qwen/QwQ-32B-AWQ

发布机构Qwen

下载访问条件魔搭来源

QwQ是Qwen系列的推理模型。与传统的指令微调模型相比,QwQ具备思考和推理能力,能够在下游任务中实现显著提升的性能,尤其擅长处理复杂难题。QwQ-32B是中型推理模型,能够与DeepSeek-R1、o1-mini等先进的推理模型竞争。 上下文长度:131,072个token 需要使用最新版本的Hugging Face transformers

文字对话推理思考
模型详情

模型介绍

中文整理

# QwQ-32B-AWQ 模型卡片

## 模型简介

QwQ是Qwen系列的推理模型。与传统的指令微调模型相比,QwQ具备思考和推理能力,能够在下游任务中实现显著提升的性能,尤其擅长处理复杂难题。QwQ-32B是中型推理模型,能够与DeepSeek-R1、o1-mini等先进的推理模型竞争。

## 主要能力

  • 思考与推理能力
  • 在复杂问题处理上表现优异
  • 性能可与当前最先进的推理模型媲美

## 输入输出

  • 模型类型:因果语言模型
  • 上下文长度:131,072个token

运行要求

  • 基于Qwen2.5架构
  • 需要使用最新版本的Hugging Face transformers
  • 对于超过8,192个token的提示词,必须启用YaRN技术

基本用法

  • 本模型为AWQ量化版本,4位量化
  • 架构采用RoPE、SwiGLU、RMSNorm和Attention QKV bias
  • 参数总量:32.5B
  • 非嵌入参数:31.0B
  • 层数:64
  • 注意力头数量(GQA):Q为40个,KV为8个

限制

  • 使用超长上下文(超过8,192个token)时需启用YaRN

许可证

许可证信息未在本模型卡片中提供。

优先采用原作者提供的中文模型卡片;仅有英文说明时由闲社AI翻译整理。重要参数、许可证和商用范围请以原文为准。

你将获得什么

完整仓库方式包含该固定版本中的权重、配置、分词器及说明文件;指定版本方式只下载所选文件或整组分片。多模态模型的投影文件、配置等依赖,请按作者说明配齐。

完整仓库可能包含多个权重格式,因此需要的磁盘空间可能大于单一格式的模型大小。下载文件不等于完成模型部署。

使用前须知

运行环境

运行模型需要的设备、工具与依赖,以原作者说明为准。

授权范围

是否允许商用、修改和分发,请查看模型许可证。

闲社提供资料与镜像下载方法,不代表已运行模型或完成安全审计。下载的代码应先检查,再执行。

返回顶部