闲社服务运行正常AI智能体自动化平台
中文
语言 / Language简体中文SelectedEnglish

选择显示语言

Llasa-3B-Twilight

SilverLatios/Llasa-3B-Twilight

发布机构SilverLatios

下载访问条件魔搭来源

此模型是一个基于港科大的Llasa-3B,由pony-speech数据集的一个子集,通过Unsloth框架微调的TTS(文字转语音)模型。作为一个全参数微调,此模型在保留了原模型的双语能力的同时,可以生成尽可能像小马宝莉里的紫悦/暮光闪闪的声音。由于用于微调的数据集只有英文,所以此模型的中文能力只能由模型本身的泛化能力处理,所以听起来可能没那么好。因为原模型通过CC BY-NC 4.0协议分发,所以此模型也将受相同的协议限制。

语音音频
模型详情

模型介绍

中文整理

模型信息

此模型是一个基于港科大的Llasa-3B,由pony-speech数据集的一个子集,通过Unsloth框架微调的TTS(文字转语音)模型。作为一个全参数微调,此模型在保留了原模型的双语能力的同时,可以生成尽可能像小马宝莉里的紫悦/暮光闪闪的声音。由于用于微调的数据集只有英文,所以此模型的中文能力只能由模型本身的泛化能力处理,所以听起来可能没那么好。因为原模型通过CC BY-NC 4.0协议分发,所以此模型也将受相同的协议限制。

由于数据集中可能有版权保护的内容,所以请只将此模型用于研究。

免责声明:请参考原模型的免责声明,此模型也一样。

使用方法

请参考原模型的使用方法,但我以后可能会整一个自己的推理代码。本模型以2048个token的context length训练,所以需要注意以下。

根据测试,以下采样器设定貌似比自带的好:

Model Information

This model is a finetuned model based on Llasa-3B from HKUST, using Unsloth framework and a subset of pony-speech by synthbot. As a full-parameter finetune, the model is capable generating both Chinese and English speech that sounded like Twilight Sparkle from My Little Pony. Since the dataset used contains only English data, the Chinese capability is obtained through generalization and may not sound as well. Due to the license of the original Llasa-3B model, this model is also licensed under the CC BY-NC 4.0 license.

Due to the potentially copyright-protected training material, please use this model for research purpose only.

Disclaimer: Please refer to the disclaimer of the original model, this model has the same disclaimer.

How to use

Please refer to the original model for detailed inference code. This model is trained under the context length of 2048 tokens, so be aware of that when generating audio.

From initial tests, the following sampler setting might be better than the provided sampler setting in the original model:

优先采用原作者提供的中文模型卡片;仅有英文说明时由闲社AI翻译整理。重要参数、许可证和商用范围请以原文为准。

你将获得什么

完整仓库方式包含该固定版本中的权重、配置、分词器及说明文件;指定版本方式只下载所选文件或整组分片。多模态模型的投影文件、配置等依赖,请按作者说明配齐。

完整仓库可能包含多个权重格式,因此需要的磁盘空间可能大于单一格式的模型大小。下载文件不等于完成模型部署。

使用前须知

运行环境

运行模型需要的设备、工具与依赖,以原作者说明为准。

授权范围

是否允许商用、修改和分发,请查看模型许可证。

闲社提供资料与镜像下载方法,不代表已运行模型或完成安全审计。下载的代码应先检查,再执行。

返回顶部