闲社服务运行正常AI智能体自动化平台

Devstral-Small-2507_gguf

mistralai/Devstral-Small-2507_gguf

发布机构Mistral AI已核实

下载访问条件国内镜像可用

Devstral 是专为软件工程任务设计的智能体大语言模型,由 Mistral AI 与 All Hands AI 合作开发。该模型擅长使用工具探索代码库、编辑多个文件,可为软件工程智能体提供强大支持。 Devstral 在 SWE-bench 基准测试中表现优异,是该基准上排名第一的开源模型。模型支持智能体编程任务,能够调用函数,采用 Tekken 分词器,词表大小为 131k。 Devstral 为纯文本模型,不支持图像输入。输入为代码或文本提示,输出为文本和代码。

文字对话编程开发
模型详情

模型介绍

中文整理

模型用途

Devstral 是专为软件工程任务设计的智能体大语言模型,由 Mistral AI 与 All Hands AI 合作开发。该模型擅长使用工具探索代码库、编辑多个文件,可为软件工程智能体提供强大支持。

主要能力

Devstral 在 SWE-bench 基准测试中表现优异,是该基准上排名第一的开源模型。模型支持智能体编程任务,能够调用函数,采用 Tekken 分词器,词表大小为 131k。

输入输出

Devstral 为纯文本模型,不支持图像输入。输入为代码或文本提示,输出为文本和代码。

运行要求

Devstral Small 拥有 240 亿参数,体积紧凑,可在单张 RTX 4090 显卡或配备 32GB 内存的 Mac 电脑上运行。上下文窗口最高支持 128k tokens。提供 Q8_0、Q5_K_M、Q4_K_M 三种量化格式。

基本用法

建议将 Devstral 与 OpenHands 框架配合使用。也可使用 llama.cpp 或 LM Studio 进行本地推理。使用 LM Studio 时,模型服务地址标识为 devstral-small-2507。

限制

该模型为纯文本模型,微调前已移除视觉编码器,不具备图像理解能力。

许可证

Apache 2.0 许可证,允许商业和非商业用途的免费使用与修改。

优先采用原作者提供的中文模型卡片;仅有英文说明时由闲社AI翻译整理。重要参数、许可证和商用范围请以原文为准。

你将获得什么

完整仓库方式包含该固定版本中的权重、配置、分词器及说明文件;指定版本方式只下载所选文件或整组分片。多模态模型的投影文件、配置等依赖,请按作者说明配齐。

完整仓库可能包含多个权重格式,因此需要的磁盘空间可能大于单一格式的模型大小。下载文件不等于完成模型部署。

使用前须知

运行环境

运行模型需要的设备、工具与依赖,以原作者说明为准。

授权范围

是否允许商用、修改和分发,请查看模型许可证。

闲社提供资料与镜像下载方法,不代表已运行模型或完成安全审计。下载的代码应先检查,再执行。

返回顶部