基于注意力LSTM和多任务学习的远场语音识别

【摘要】：由于背景噪声,混响以及人声干扰等因素,远场语音识别任务一直充满挑战性。本文针对远场语音识别任务提出基于注意力机制和多任务学习框架的长短时记忆递归神经网络声学模型。模型中嵌入的注意力机制使其自动学习调整对扩展上下文特征输入的关注度,显著提升了模型对远场语音的建模能力。为进一步提高模型的鲁棒性,我们引入多任务学习框架,使其联合预测声学状态和干净特征。AMI数据集上的实验结果表明,与基线模型相比,引入注意力机制和多任务学习框架的LSTM模型获得了绝对1 5%的词错误率下降。