🔥 今日值得一读 唤醒率暴涨10%+!PromptKWS用提示词让关键词识别更聪明,复杂环境准确率再提15%!
PromptKWS: A Novel Prompt-Guided Open-Vocabulary Keyword Spotting Framework
arXiv CL (cs.CL) 🔥 重点 #关键词唤醒#提示学习#语音识别 🕐 09-01 12:00
👨‍💼 主理人解读 · 为什么值得关注
开发者可用此框架实现自定义关键词的语音唤醒,无需重新训练,适用于智能设备和语音助手。

📖 AI 总结

本文介绍了一种名为PromptKWS的新型关键词识别(KWS)框架,旨在提升开放词汇场景下关键词唤醒系统的准确性。该框架的核心创新在于引入了提示短语预测网络(PPN),这是一种编码器-解码器架构,能够有效提取关键词的提示嵌入。通过将提示嵌入与提示引导的KWS编码器结合,并利用提示-声学多头交叉注意力机制(MHCA)进行信息融合,PromptKWS实现了对任意关键词的灵活识别。实验结果表明,与基线系统相比,PromptKWS的唤醒率提升了超过10%。此外,该框架在噪声环境和发音变化等复杂真实场景中表现出显著优势,相较于纯声学模型,其平均准确率提升了超过15%。这一成果为开放词汇关键词识别在动态环境下的应用提供了更可靠的解决方案。

🔑 关键词速览

PromptKWS一种基于提示引导的开放词汇关键词识别框架,通过提示信息提升识别准确率。
Keyword Spotting (KWS)关键词识别,用于在连续语音流中检测特定关键词的技术。
Prompt Phrases Prediction Network (PPN)提示短语预测网络,一种编码器-解码器结构,用于提取关键词提示的嵌入表示。
Prompt-acoustic Multi-head Cross-attention (MHCA)提示-声学多头交叉注意力机制,用于将提示嵌入与声学特征融合。
Open-vocabulary开放词汇,指系统能够识别训练中未出现的新词或自定义词。
infoAI 公众号二维码

📱 每天一份 AI 前沿日报

关注公众号,每天 09:00 推送 · 不错过任何重磅