Model details
模型介绍
中文整理轻语-0.5B
一个基于 Qwen2.5-0.5B-Instruct 的轻量级中文聊天适配器，面向日常轻松对话场景优化。说话风格自然口语化，像朋友聊天一样简洁直接，不端着、不说教。
Model Details
Model Description
- *Developed by:** 宋梓铭
- *Model type:** 因果语言模型（对话适配器）
- *Language(s):** 中文
- *License:** Apache License 2.0
- *Finetuned from model:** Qwen/Qwen2.5-0.5B-Instruct
Uses
Direct Use
适合直接用于日常闲聊、轻量对话场景：
日常聊天、打发时间
简单问答、快速响应
群聊搭子、轻松互动
低资源设备上的本地对话部署
Out-of-Scope Use
专业领域知识问答（医疗、法律、金融等）
长篇内容生成、写作
需要严格事实准确性的场景
高风险决策辅助
Bias, Risks, and Limitations
作为0.5B参数的小模型，本模型存在以下局限：
知识覆盖范围有限，可能产生事实错误或幻觉
长对话上下文理解能力有限
复杂逻辑推理能力较弱
可能存在训练数据中的偏见
使用时请保持批判性思维，重要内容请自行核实。
Recommendations
适合轻松娱乐的日常对话，不适合严肃用途
建议在单轮或短多轮对话中使用
输出内容仅供参考，请自行判断真伪
How to Get Started with the Model
Training Details
Training Data
基于 BelleGroup/train 0.5M CN 中文指令数据集，选取约2万条多样化对话样本，涵盖日常问候、兴趣爱好、生活闲聊、简单知识问答等场景。
Training Procedure
- *Training regime:** bf16 mixed precision + 4bit QLoRA
- *LoRA rank:** 8
- *Target modules:** q proj, k proj, v proj, o proj, gate proj, up proj, down proj
- *Epochs:** 3
- *Learning rate:** 2e-4
- *Optimizer:** AdamW
Framework versions
PEFT 0.19.1+
Transformers 4.x
PyTorch 2.x
BitsAndBytes 0.4x
优先采用原作者提供的中文模型卡片；仅有英文说明时由闲社AI翻译整理。重要参数、许可证和商用范围请以原文为准。
你将获得什么
完整仓库方式包含该固定版本中的权重、配置、分词器及说明文件；指定版本方式只下载所选文件或整组分片。多模态模型的投影文件、配置等依赖，请按作者说明配齐。
完整仓库可能包含多个权重格式，因此需要的磁盘空间可能大于单一格式的模型大小。下载文件不等于完成模型部署。
使用前须知
运行环境运行模型需要的设备、工具与依赖，以原作者说明为准。
授权范围是否允许商用、修改和分发，请查看模型许可证。
闲社提供资料与镜像下载方法，不代表已运行模型或完成安全审计。下载的代码应先检查，再执行。
Problem with the information or download?
Sign in to submit feedback.
