基于改进Conformer的新闻领域端到端语音识别(End-to-End Speech Recognition in News Field based on Conformer)

no code implementations • CCL 2021 • Jimin Zhang, Kerekadeer Zao, Yunfei Shen, Shanwumaier Ai, Liejun Wang

“目前, 开源的中文语音识别数据集多为面向通用领域, 缺少面向新闻领域的开源语音识别语料库, 因此本文构建了面向新闻领域的中文语音识别数据集CHNEWSASR并使用ESPNET-0. 9. 6框架的RNN、Transformer和Conformer等模型对数据集的有效性进行了验证, 实验表明本文所构建的语料在最好的模型上CER为4. 8%, SER为39. 4%。由于新闻联播主持人说话语速相对较快, 本文构建的数据集文本平均长度为28个字符是Aishell1数据集文本平均长度的2倍, 且以往的研究中训练目标函数通常为基于字或词水平, 缺乏明确的句子水平关系, 因此本文提出了一个句子层级的一致性模块与Conformer模型结合直接减少源语音和目标文本的表示差异, 在开源的Aishell1数据集上其CER降低0. 4%, SER降低2%;在CHNEWSASR数据集上其CER降低0. 9%, SER降低3%, 实验结果表明该方法不提升模型参数量的前提下能有效提升语音识别的质量。”

speech-recognition Speech Recognition