模型介绍
中文整理DeepSeek-Coder-V2:突破闭源模型在代码智能领域的壁垒
模型简介
DeepSeek-Coder-V2是一个开源的专家混合(MoE)代码语言模型,在代码特定任务上的表现与GPT4-Turbo相当。该模型基于DeepSeek-V2的中间检查点进行进一步预训练,增加了6万亿个标记。通过持续预训练,DeepSeek-Coder-V2显著提升了编码和数学推理能力,同时在通用语言任务上保持相当的表现。与DeepSeek-Coder-33B相比,DeepSeek-Coder-V2在代码相关任务、推理和通用能力方面都有显著提升。
主要能力
在标准基准评估中,DeepSeek-Coder-V2在编码和数学基准测试中优于GPT4-Turbo、Claude 3 Opus和Gemini 1.5 Pro等闭源模型。支持338种编程语言(从86种扩展),上下文长度支持128K(从16K扩展)。
模型版本
DeepSeek-Coder-V2-Lite-Base:总参数16B,活跃参数2.4B,上下文128K
DeepSeek-Coder-V2-Lite-Instruct:总参数16B,活跃参数2.4B,上下文128K
DeepSeek-Coder-V2-Base:总参数236B,活跃参数21B,上下文128K
DeepSeek-Coder-V2-Instruct:总参数236B,活跃参数21B,上下文128K
输入输出
支持代码补全、代码插入和聊天完成功能。完整聊天模板位于tokenizer config.json中。
运行要求
如需使用BF16格式进行推理,需要80GB*8 GPUs。建议使用vLLM进行模型推理以获得更好的性能。
基本用法
可使用Huggingface的Transformers库进行模型推理。聊天模板支持添加可选的系统消息。
许可证
该代码仓库采用MIT许可证。DeepSeek-Coder-V2 Base/Instruct模型的使用受模型许可证约束。DeepSeek-Coder-V2系列(包括Base和Instruct)支持商业使用。
优先采用原作者提供的中文模型卡片;仅有英文说明时由闲社AI翻译整理。重要参数、许可证和商用范围请以原文为准。
你将获得什么
完整仓库方式包含该固定版本中的权重、配置、分词器及说明文件;指定版本方式只下载所选文件或整组分片。多模态模型的投影文件、配置等依赖,请按作者说明配齐。
完整仓库可能包含多个权重格式,因此需要的磁盘空间可能大于单一格式的模型大小。下载文件不等于完成模型部署。
使用前须知
运行模型需要的设备、工具与依赖,以原作者说明为准。
是否允许商用、修改和分发,请查看模型许可证。
闲社提供资料与镜像下载方法,不代表已运行模型或完成安全审计。下载的代码应先检查,再执行。
资料或下载有问题?
登录后可提交反馈。
