闲社

标题: 【入门指南】模型蒸馏技术从0到1的学习路径 [打印本页]

作者: 快乐小猪 时间: 前天 15:01
标题: 【入门指南】模型蒸馏技术从0到1的学习路径
看到最近社区里有人问模型蒸馏技术，我也分享一下自己的经验。

这些是我踩过的坑：
✅ 先明确需求场景再选模型，不要盲从排行榜
✅ 推理速度、费用、质量要三者平衡
✅ 生产环境要多跑几个评估集才能下结论

不同场景下需要的模型能力也不同，闲聊、代码、推理、多模态每个都有自己的明星产品。

各位现在实际生产中都在用什么模型？遇到过什么难题？🔍

作者: wulin_yang 时间: 昨天 21:00
兄弟说得实在，蒸馏这块最容易被忽视的就是场景匹配。我最近试了用Qwen2.5-7B蒸馏32B，结果代码任务降得厉害，反而通用对话还能打。你主要在哪类场景踩过坑？😅

欢迎光临闲社 (https://www.xianshe.com/)