模型介绍
中文整理小蓝云 Xiaolanyun — SDXL 潮玩IP角色 LoRA
模型概述
小蓝云(Xiaolanyun)是一个基于 Stable Diffusion XL 训练的潮玩IP角色 LoRA 模型,能够生成以"水滴+云朵"为核心意象的原创角色——头身一体的圆润造型,半透明果冻质感,浅蓝色渐变配色,胸口嵌有深蓝色水滴形能量核心宝石。模型支持通过 prompt 控制 5 种基础表情(Happy / Angry / Cry / Star Eyes / Hi),在不同表情下保持高度一致的造型、配色和材质表现。
模型介绍
角色设定
- *造型**:头身一体的圆润云朵形态,无颈部,四肢短小可爱
- *材质**:半透明果冻质感(translucent, jelly-like, glossy)
- *配色**:浅蓝色渐变,边缘柔和过渡,内部颜色渐变
- *特征**:胸口嵌有深蓝色水滴形能量核心宝石,大眼睛
表情系统
表情 触发词 描述
- ----- -------- ------
Happy happy expression 弯眼微笑,双手自然下垂
Angry angry expression 皱眉鼓腮,双拳握紧
Cry crying expression 泪眼汪汪,嘴角下撇
Star Eyes star eyes expression 星星眼,兴奋张嘴
Hi waving hello 单手/双手挥动打招呼
设计理念
半透明果冻质感在潮玩领域相对少见,大多数潮玩偏向实体感(搪胶、树脂),透明材质能带来差异化视觉冲击。通过 LoRA 固定角色基因,用 prompt 即可批量生成不同表情、姿态、场景,极大缩短从概念到成品的周期。
模型训练
环境
- *平台**:阿里云 DSW (ModelScope),A10 GPU
- *框架**:Diffusers 0.29.2 + PEFT 0.12.0 + Transformers 4.44.2
- *基础模型**:Stable Diffusion XL 1.0
数据准备
原创设计稿为基础,通过多角度、多表情变体扩充至训练集
统一裁剪为 1024×1024,纯色/渐变背景
Caption 采用自然语言描述,包含材质关键词(translucent, jelly-like, glossy)
训练参数
参数 值
- ----- -----
训练轮次 (Epochs) 20
学习率 (Learning Rate) 1e-4
LoRA Rank 128
LoRA Alpha 128
Batch Size 1
分辨率 1024×1024
优化器 AdamW (weight decay=0.01)
学习率调度 Cosine with warmup (10%)
混合精度 bf16
梯度累积 4 步
模型推理
推荐参数
参数 推荐值
- ----- --------
Steps 30
CFG Scale 7.0
Sampler Euler
LoRA Weight 0.8
分辨率 1024×1024
Seed 固定 seed 可复现
使用方式(Diffusers)
使用方式(ComfyUI)
- 将 xiaolanyun v1.safetensors 放入 ComfyUI/models/loras/ 目录
- 在工作流中添加 "Load LoRA" 节点
- 选择模型,设置 strength 为 0.8
- 使用上述 prompt 模板生成
Prompt 模板
表情词替换: happy expression / angry expression / crying expression / star eyes expression / waving hello
模型效果
效果评估
角色一致性** ★★★★☆
5 种表情下造型轮廓、配色方案、材质质感保持统一
不同 seed 下角色核心特征(圆润体型、浅蓝渐变、大眼睛)稳定输出
材质还原度** ★★★★★
半透明果冻质感是本 LoRA 最突出的特点
光泽高光、边缘柔和过渡、内部颜色渐变均表现良好
在不同光照条件的 prompt 下仍能保持材质一致
表情辨识度** ★★★★☆
每种情绪通过眼睛形状和嘴巴变化清晰传达
Star Eyes 的星形瞳孔效果稳定
Cry 表情的泪滴效果自然
可控性** ★★★★☆
LoRA weight 0.7-0.9 区间内风格稳定
CFG 5.5-8.0 均可获得良好效果
支持通过 prompt 添加场景元素(背景、道具)
已知局限
角色为头身一体造型,复杂姿态(坐、跑、转身)的生成稳定性有待提升
手部细节偶尔出现多指/少指,需 inpainting 修复
极端 prompt(写实风格、暗黑风格)会破坏角色的果冻质感
适用场景
潮玩IP概念设计与快速迭代
表情包批量生成
盲盒/手办概念图
周边衍生设计(手机壳、贴纸等)
优先采用原作者提供的中文模型卡片;仅有英文说明时由闲社AI翻译整理。重要参数、许可证和商用范围请以原文为准。
你将获得什么
完整仓库方式包含该固定版本中的权重、配置、分词器及说明文件;指定版本方式只下载所选文件或整组分片。多模态模型的投影文件、配置等依赖,请按作者说明配齐。
完整仓库可能包含多个权重格式,因此需要的磁盘空间可能大于单一格式的模型大小。下载文件不等于完成模型部署。
使用前须知
运行模型需要的设备、工具与依赖,以原作者说明为准。
是否允许商用、修改和分发,请查看模型许可证。
闲社提供资料与镜像下载方法,不代表已运行模型或完成安全审计。下载的代码应先检查,再执行。
资料或下载有问题?
登录后可提交反馈。
