模型介绍
中文整理Fine-tuned XLSR-53 large model for speech recognition in Chinese
Fine-tuned facebook/wav2vec2-large-xlsr-53 on Chinese using the train and validation splits of Common Voice 6.1, CSS10 and ST-CMDS.
When using this model, make sure that your speech input is sampled at 16kHz.
This model has been fine-tuned thanks to the GPU credits generously given by the OVHcloud :)
The script used for training can be found here: https://github.com/jonatasgrosman/wav2vec2-sprint
Usage
The model can be used directly (without a language model) as follows...
Using the HuggingSound library:
Writing your own inference script:
Reference Prediction
- ------------ -------------
宋朝末年年间定居粉岭围。 宋朝末年年间定居分定为
渐渐行动不便 建境行动不片
二十一年去世。 二十一年去世
他们自称恰哈拉。 他们自称家哈
局部干涩的例子包括有口干、眼睛干燥、及阴道干燥。 菊物干寺的例子包括有口肝眼睛干照以及阴到干
嘉靖三十八年,登进士第三甲第二名。 嘉靖三十八年登进士第三甲第二名
这一名称一直沿用至今。 这一名称一直沿用是心
同时乔凡尼还得到包税合同和许多明矾矿的经营权。 同时桥凡妮还得到包税合同和许多民繁矿的经营权
为了惩罚西扎城和塞尔柱的结盟,盟军在抵达后将外城烧毁。 为了曾罚西扎城和塞尔素的节盟盟军在抵达后将外曾烧毁
河内盛产黄色无鱼鳞的鳍射鱼。 合类生场环色无鱼林的骑射鱼
Evaluation
The model can be evaluated as follows on the Chinese (zh-CN) test data of Common Voice.
Test Result**:
In the table below I report the Word Error Rate (WER) and the Character Error Rate (CER) of the model. I ran the evaluation script described above on other models as well (on 2021-05-13). Note that the table below may show different results from those already reported, this may have been caused due to some specificity of the other evaluation scripts used.
Model WER CER
- ------------ ------------- -------------
jonatasgrosman/wav2vec2-large-xlsr-53-chinese-zh-cn **82.37%** **19.03%**
ydshieh/wav2vec2-large-xlsr-53-chinese-zh-cn-gpt 84.01% 20.95%
Citation
If you want to cite this model you can use this:
优先采用原作者提供的中文模型卡片;仅有英文说明时由闲社AI翻译整理。重要参数、许可证和商用范围请以原文为准。
你将获得什么
完整仓库方式包含该固定版本中的权重、配置、分词器及说明文件;指定版本方式只下载所选文件或整组分片。多模态模型的投影文件、配置等依赖,请按作者说明配齐。
完整仓库可能包含多个权重格式,因此需要的磁盘空间可能大于单一格式的模型大小。下载文件不等于完成模型部署。
使用前须知
运行模型需要的设备、工具与依赖,以原作者说明为准。
是否允许商用、修改和分发,请查看模型许可证。
闲社提供资料与镜像下载方法,不代表已运行模型或完成安全审计。下载的代码应先检查,再执行。
Problem with the information or download?
Sign in to submit feedback.
