闲社服务运行正常AI智能体自动化平台

gemma-4-31B-it-qat-w4a16-ct

google/gemma-4-31B-it-qat-w4a16-ct

发布机构谷歌(Google)已核实

下载访问条件国内镜像可用

Gemma 是由 Google DeepMind 构建的开源模型系列。Gemma 4 是多模态模型,支持文本和图像输入(E2B、E4B 和 12B 还支持音频),生成文本输出。该版本包含预训练模型和指令微调模型。Gemma 4 上下文窗口最高支持 256K tokens,支持超过 140 种语言。适用于文本生成、编程和推理任务。 推理能力:全系列模型均具备强大的推理能力,支持可配置的思考模式。 多模态支持:支持文本、图像(支持可变宽高比和分辨率)、视频,以及 E2B、E4B、

文字对话图文理解语音音频推理思考编程开发
模型详情

模型介绍

中文整理

Gemma 4 模型卡片

许可证

Apache 2.0

作者

Google DeepMind

模型用途

Gemma 是由 Google DeepMind 构建的开源模型系列。Gemma 4 是多模态模型,支持文本和图像输入(E2B、E4B 和 12B 还支持音频),生成文本输出。该版本包含预训练模型和指令微调模型。Gemma 4 上下文窗口最高支持 256K tokens,支持超过 140 种语言。适用于文本生成、编程和推理任务。

主要能力

推理能力:全系列模型均具备强大的推理能力,支持可配置的思考模式。

多模态支持:支持文本、图像(支持可变宽高比和分辨率)、视频,以及 E2B、E4B、12B 的音频处理。

架构多样性:提供 Dense 和混合专家(MoE)两种架构,涵盖 E2B、E4B、12B、26B A4B、31B 五种规模。

设备端优化:小型模型专为笔记本电脑和移动设备的高效本地运行而设计。

长上下文:小型模型支持 128K 上下文,中型模型支持 256K。

编程与代理能力:编程基准测试表现显著提升,支持原生函数调用,可驱动自主代理。

原生系统提示支持:支持系统角色,实现更结构化、可控的对话。

输入输出

输入:文本、图像、视频、音频(仅 E2B、E4B、12B)

输出:文本

运行要求

模型规模:E2B(有效参数 2.3B)、E4B(有效参数 4.5B)、12B(11.95B)、26B A4B(活跃参数 3.8B)、31B(30.7B)

部署环境:从高端手机到笔记本电脑再到服务器均可部署

量化版本:提供 QAT 量化检查点,显著降低内存需求,包括未量化版本、GGUF 格式、移动端优化版本和压缩张量格式

基本用法

使用 Transformers 库加载模型。建议采样配置:temperature=1.0,top_p=0.95,top_k=64。启用思考模式需在系统提示开头添加相应控制 token。图像内容应放在文本之前,音频内容应放在文本之后。音频最长支持 30 秒,视频最长支持 60 秒。

限制

音频输入最长 30 秒

视频输入最长 60 秒

多模态输入需按推荐顺序排列以获得最佳性能

优先采用原作者提供的中文模型卡片;仅有英文说明时由闲社AI翻译整理。重要参数、许可证和商用范围请以原文为准。

你将获得什么

完整仓库方式包含该固定版本中的权重、配置、分词器及说明文件;指定版本方式只下载所选文件或整组分片。多模态模型的投影文件、配置等依赖,请按作者说明配齐。

完整仓库可能包含多个权重格式,因此需要的磁盘空间可能大于单一格式的模型大小。下载文件不等于完成模型部署。

使用前须知

运行环境

运行模型需要的设备、工具与依赖,以原作者说明为准。

授权范围

是否允许商用、修改和分发,请查看模型许可证。

闲社提供资料与镜像下载方法,不代表已运行模型或完成安全审计。下载的代码应先检查,再执行。

返回顶部