k2中recipe对应的模型
Reworked Conformer模型代码: https://github.com/k2-fsa/icefall/blob/master/egs/librispeech/ASR/pruned_transducer_stateless2/
Reworked Conformer模型说明 https://mp.weixin.qq.com/s/2WrEh3wHzYE6TCKuw_laLw
新一代 Kaldi 中模型平均:https://github.com/k2-fsa/icefall/tree/master/egs/librispeech/ASR/pruned_transducer_stateless4
流式模型:
k2中几种基于rnn-t的流式模型:Emformer-based、ConvEmformer-based、Conformer-based
目前 Icefall 中 Conformer 类 Transducer 模型,只有 LibriSpeech 数据集中的 pruned_transducer_stateless{,2, 3, 4, 5}
和 WenetSpeech 中的 pruned_transducer_stateless5
支持流式训练,跟训练非流式模型相比,只需要增加几个训练参数就可以做到。dynamic-chunk-training=True
, 训练流式或非流式模型的开关
Emformer 模型本身就是为流式而设计的,所以训练时没有流式和非流式不同的困扰。
Emformer 类模型,也只有 LibriSpeech 数据集中的 pruned_stateless_emformer_rnnt2
,conv_emformer_transducer_stateless
,conv_emformer_transducer_stateless2