模型介绍
中文整理Qwen2-1.5B-Instruct-GPTQ-Int4
模型简介
Qwen2是Qwen大语言模型的新系列,包含从0.5亿到720亿参数的多种基础语言模型和指令微调语言模型,其中包括混合专家模型。本模型是指令微调的1.5B参数Qwen2模型。
主要能力
语言理解与生成、多语言能力、编程、数学和推理。与此前的Qwen1.5及同类开源模型相比,Qwen2在多项基准测试中表现更优,并具备与闭源模型竞争的能力。模型基于Transformer架构,采用SwiGLU激活函数、注意力QKV偏置、组查询注意力等技术,并配备支持多种自然语言和代码的改进分词器。
输入输出
该模型为指令微调模型,支持使用聊天模板进行内容生成。
运行要求
需要安装transformers>=4.37.0版本的Hugging Face Transformers库。部署时需注意可能出现的RuntimeError兼容性问题。
训练方式
模型经过大规模数据预训练,并结合监督微调和直接偏好优化进行后训练。
许可证
如需引用本模型,请参考相关引用格式。
优先采用原作者提供的中文模型卡片;仅有英文说明时由闲社AI翻译整理。重要参数、许可证和商用范围请以原文为准。
你将获得什么
完整仓库方式包含该固定版本中的权重、配置、分词器及说明文件;指定版本方式只下载所选文件或整组分片。多模态模型的投影文件、配置等依赖,请按作者说明配齐。
完整仓库可能包含多个权重格式,因此需要的磁盘空间可能大于单一格式的模型大小。下载文件不等于完成模型部署。
使用前须知
运行模型需要的设备、工具与依赖,以原作者说明为准。
是否允许商用、修改和分发,请查看模型许可证。
闲社提供资料与镜像下载方法,不代表已运行模型或完成安全审计。下载的代码应先检查,再执行。
资料或下载有问题?
登录后可提交反馈。
