|
|
(简体中文|[English](./README.md))
|
|
|
(简体中文|[English](./README.md))
|
|
|
|
|
|
# 语音识别
|
|
|
## 介绍
|
|
|
语音识别是一项用计算机程序自动转录语音的技术。
|
|
|
|
|
|
这个 demo 是一个从给定音频文件识别文本的实现，它可以通过使用 `PaddleSpeech` 的单个命令或 python 中的几行代码来实现。
|
|
|
## 使用方法
|
|
|
### 1. 安装
|
|
|
请看[安装文档](https://github.com/PaddlePaddle/PaddleSpeech/blob/develop/docs/source/install_cn.md)。
|
|
|
|
|
|
你可以从 easy，medium，hard 三中方式中选择一种方式安装。
|
|
|
|
|
|
### 2. 准备输入
|
|
|
这个 demo 的输入应该是一个 WAV 文件（`.wav`），并且采样率必须与模型的采样率相同。
|
|
|
|
|
|
可以下载此 demo 的示例音频：
|
|
|
```bash
|
|
|
wget -c https://paddlespeech.bj.bcebos.com/PaddleAudio/zh.wav https://paddlespeech.bj.bcebos.com/PaddleAudio/en.wav https://paddlespeech.bj.bcebos.com/PaddleAudio/ch_zh_mix.wav
|
|
|
```
|
|
|
### 3. 使用方法
|
|
|
- 命令行 (推荐使用)
|
|
|
```bash
|
|
|
# 中文
|
|
|
paddlespeech asr --input ./zh.wav -v
|
|
|
# 英文
|
|
|
paddlespeech asr --model transformer_librispeech --lang en --input ./en.wav -v
|
|
|
#中英混合
|
|
|
paddlespeech asr --model conformer_talcs --lang zh_en --codeswitch True --input ./ch_zh_mix.wav -v
|
|
|
# 中文 + 标点恢复
|
|
|
paddlespeech asr --input ./zh.wav -v | paddlespeech text --task punc -v
|
|
|
```
|
|
|
(如果不想显示 log 信息，可以不使用"-v", 另外如果显示 `paddlespeech-ctcdecoders` 这个 python 包没有找到的 Error，没有关系，这个包是非必须的。)
|
|
|
|
|
|
使用方法：
|
|
|
```bash
|
|
|
paddlespeech asr --help
|
|
|
```
|
|
|
参数：
|
|
|
- `input`(必须输入)：用于识别的音频文件。
|
|
|
- `model`：ASR 任务的模型，默认值：`conformer_wenetspeech`。
|
|
|
- `lang`：模型语言，默认值：`zh`。
|
|
|
- `codeswitch`: 是否使用语言转换，默认值：`False`。
|
|
|
- `sample_rate`：音频采样率，默认值：`16000`。
|
|
|
- `config`：ASR 任务的参数文件，若不设置则使用预训练模型中的默认配置，默认值：`None`。
|
|
|
- `ckpt_path`：模型参数文件，若不设置则下载预训练模型使用，默认值：`None`。
|
|
|
- `yes`；不需要设置额外的参数，一旦设置了该参数，说明你默认同意程序的所有请求，其中包括自动转换输入音频的采样率。默认值：`False`。
|
|
|
- `device`：执行预测的设备，默认值：当前系统下 paddlepaddle 的默认 device。
|
|
|
- `verbose`: 如果使用，显示 logger 信息。
|
|
|
|
|
|
输出：
|
|
|
```bash
|
|
|
# 中文
|
|
|
[2021-12-08 13:12:34,063] [ INFO] [utils.py] [L225] - ASR Result: 我认为跑步最重要的就是给我带来了身体健康
|
|
|
# 英文
|
|
|
[2022-01-12 11:51:10,815] [ INFO] - ASR Result: i knocked at the door on the ancient side of the building
|
|
|
```
|
|
|
|
|
|
- Python API
|
|
|
```python
|
|
|
import paddle
|
|
|
from paddlespeech.cli.asr import ASRExecutor
|
|
|
|
|
|
asr_executor = ASRExecutor()
|
|
|
text = asr_executor(
|
|
|
model='conformer_wenetspeech',
|
|
|
lang='zh',
|
|
|
sample_rate=16000,
|
|
|
config=None, # Set `config` and `ckpt_path` to None to use pretrained model.
|
|
|
ckpt_path=None,
|
|
|
audio_file='./zh.wav',
|
|
|
force_yes=False,
|
|
|
device=paddle.get_device())
|
|
|
print('ASR Result: \n{}'.format(text))
|
|
|
```
|
|
|
|
|
|
输出：
|
|
|
```bash
|
|
|
ASR Result:
|
|
|
我认为跑步最重要的就是给我带来了身体健康
|
|
|
```
|
|
|
|
|
|
### 4.预训练模型
|
|
|
以下是 PaddleSpeech 提供的可以被命令行和 python API 使用的预训练模型列表：
|
|
|
|
|
|
| 模型 | 语言转换 | 语言 | 采样率
|
|
|
| :--- | :---: | :---: | :---: |
|
|
|
| conformer_wenetspeech | False | zh | 16k
|
|
|
| conformer_online_multicn | False | zh | 16k
|
|
|
| conformer_aishell | False | zh | 16k
|
|
|
| conformer_online_aishell | False | zh | 16k
|
|
|
| transformer_librispeech | False | en | 16k
|
|
|
| deepspeech2online_wenetspeech | False | zh | 16k
|
|
|
| deepspeech2offline_aishell | False | zh| 16k
|
|
|
| deepspeech2online_aishell | False | zh | 16k
|
|
|
| deepspeech2offline_librispeech | False | en | 16k
|
|
|
| conformer_talcs | True | zh_en | 16k
|
