Qwen3-1.7B

Qwen3-1.7B

模型概述

Qwen3是Qwen系列的新一代大语言模型，提供密集模型和混合专家模型。Qwen3基于大规模训练，在推理、指令遵循、代理能力和多语言支持方面实现了突破性进展。

主要能力

支持在单一模型内无缝切换思考模式和非思考模式。思考模式适用于复杂逻辑推理、数学和编码任务；非思考模式适用于高效通用对话。推理能力显著提升，在数学、代码生成和常识逻辑推理方面超越前代模型。具备出色的人类偏好对齐能力，在创意写作、角色扮演、多轮对话和指令遵循方面表现优异。支持精确集成外部工具，在复杂代理任务中达到开源模型领先性能。支持100多种语言和方言，具备强大的多语言指令遵循和翻译能力。

输入输出

输入：文本形式的用户指令或对话，可包含系统消息和历史对话记录。支持通过/think和/no think标签在对话中动态切换思考模式。输出：文本形式的回复。在思考模式下，回复包含think标签包裹的推理过程和最终回答；在非思考模式下，直接输出最终回答。

运行要求

参数数量：17亿。非嵌入参数数量：14亿。层数：28。注意力头数量：Q为16，KV为8。上下文长度：32768个token。建议使用transformers 0.4.6.post1或更高版本，或vllm 0.8.5及以上版本。也支持SGLang、Ollama、LMStudio、MLX-LM、llama.cpp和KTransformers等框架。

基本用法

默认启用思考模式，模型会使用推理能力提升回复质量。思考模式推荐参数：Temperature=0.6、TopP=0.95、TopK=20、MinP=0。非思考模式推荐参数：Temperature=0.7、TopP=0.8、TopK=20、MinP=0。建议输出长度设置为32768个token；复杂数学和编程竞赛题目建议设置为38912个token。数学问题建议在提示词中加入“请逐步推理，并将最终答案放在\boxed{}中”。多选题建议使用JSON格式指定答案字段。推荐使用Qwen-Agent框架以充分发挥模型的工具调用能力。

限制

不要使用贪婪解码，会导致性能下降和无限重复。如遇到严重重复，可将presence penalty参数调整至0到2之间，但较高值可能导致语言混用和性能轻微下降。多轮对话中，历史记录只需包含最终输出部分，无需包含思考内容。

许可证

如需引用本模型，请参考原始发布信息。