基于跨层连接注意力的语音识别网络、方法、设备及介质

实质审查的生效

摘要

本发明适用于语音识别技术领域，提供了一种基于跨层连接注意力的语音识别网络、方法、设备及存储介质，该语音识别网络基于Transformer的编码器‑解码器结构构建，该语音识别网络的Transformer编码器包含多个编码层，相邻编码层之间连接有跨层连接模块，编码层用于在生成注意图时通过跨层连接模块学习前一编码层的中间注意力图的信息，从而使得每个编码层所产生的注意力图能够更加精准地对上下文的依赖关系进行表示，进而使得语音识别网络在增加了几乎可以忽视的参数量的情况下，其语音识别准确率得到显著提升。

基本信息

专利标题：

基于跨层连接注意力的语音识别网络、方法、设备及介质

专利标题（英）：

暂无

公开（公告）号：

CN114360507A

申请号：

CN202111577740.8

公开（公告）日：

2022-04-15

申请日：

2021-12-22

授权号：

暂无

授权日：

暂无

发明人：

殷绪成张天昊陈松路

申请人：

珠海亿智电子科技有限公司

申请人地址：

广东省珠海市高新区唐家湾镇港乐路8号大洲科技园B区厂房803室

代理机构：

深圳青年人专利商标代理有限公司

代理人：

吴桂华

优先权：

CN202111577740.8

主分类号：

G10L15/02

IPC分类号：

G10L15/02 G10L15/06 G10L15/16 G06N3/04 G06N3/08

IPC结构图谱

G部——物理

G10

乐器；声学

G10L

语音分析或合成；语音识别；语音或声音处理；语音或音频编码或解码

G10L15/00

语音识别

G10L15/02

语音识别的特征提取；识别单位的选择

法律状态

2022-05-03 ：

实质审查的生效

IPC(主分类) : G10L 15/02
申请日 : 20211222

2022-04-15 ：

公开

注：本法律状态信息仅供参考，即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。

文件下载

暂无PDF文件可下载