本文介绍了一种名为PromptKWS的新型关键词识别(KWS)框架,旨在提升开放词汇场景下关键词唤醒系统的准确性。该框架的核心创新在于引入了提示短语预测网络(PPN),这是一种编码器-解码器架构,能够有效提取关键词的提示嵌入。通过将提示嵌入与提示引导的KWS编码器结合,并利用提示-声学多头交叉注意力机制(MHCA)进行信息融合,PromptKWS实现了对任意关键词的灵活识别。实验结果表明,与基线系统相比,PromptKWS的唤醒率提升了超过10%。此外,该框架在噪声环境和发音变化等复杂真实场景中表现出显著优势,相较于纯声学模型,其平均准确率提升了超过15%。这一成果为开放词汇关键词识别在动态环境下的应用提供了更可靠的解决方案。
| PromptKWS | 一种基于提示引导的开放词汇关键词识别框架,通过提示信息提升识别准确率。 |
| Keyword Spotting (KWS) | 关键词识别,用于在连续语音流中检测特定关键词的技术。 |
| Prompt Phrases Prediction Network (PPN) | 提示短语预测网络,一种编码器-解码器结构,用于提取关键词提示的嵌入表示。 |
| Prompt-acoustic Multi-head Cross-attention (MHCA) | 提示-声学多头交叉注意力机制,用于将提示嵌入与声学特征融合。 |
| Open-vocabulary | 开放词汇,指系统能够识别训练中未出现的新词或自定义词。 |
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅