国家标准网
文库搜索
切换导航
首页
频道
仅15元无限下载
联系我们
首页
仅15元无限下载
联系我们
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211388921.0 (22)申请日 2022.11.08 (71)申请人 南方电网数字电网研究院有限公司 地址 510700 广东省广州市黄埔区中新广 州知识城 亿创街1号 406房之86 (72)发明人 黄文琦 林全郴 梁凌宇 郭尧 陈彬 林克全 林志达 陈英达 (74)专利代理 机构 华进联合专利商标代理有限 公司 44224 专利代理师 吴辉燃 (51)Int.Cl. G10L 15/08(2006.01) G10L 15/06(2013.01) G10L 15/26(2006.01) G06F 16/34(2019.01)G06F 16/38(2019.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 混合音频信号的转换方法、 装置、 计算机设 备和存储介质 (57)摘要 本申请涉及一种混合音 频信号的转换方法、 装置、 计算机设备和存储介质。 所述方法包括: 获 取多人会话场景下的混合音 频信号, 将所述混合 音频信号输入 预设的转换模型中, 获取所述混合 音频信号对应的转换文本, 其中, 所述转换文本 包括多个按照时序排列的单人音频信号对应的 单位转换文本。 采用本方法能够提高混合音 频信 号的转换效率。 权利要求书2页 说明书15页 附图7页 CN 115440198 A 2022.12.06 CN 115440198 A 1.一种混合音频信号的转换 方法, 其特 征在于, 所述方法包括: 获取多人会话场景 下的混合音频信号; 将所述混合音频信号输入预设的转换模型中, 获取所述混合音频信号对应的转换文 本; 其中, 所述 转换文本包括多个按照时序排列的单 人音频信号对应的单位 转换文本 。 2.根据权利要求1所述的方法, 其特征在于, 所述转换模型包括编码器子网络、 注意力 机制子网络和 解码器子网络, 所述将所述混合音频信号输入预设的转换模型中, 获取所述 混合音频信号对应的转换文本, 包括: 将所述混合音频信号输入所述编码器子网络, 获取所述混合音频信号中各单人音频信 号的特征信息; 将各所述特征信 息输入所述注意力 机制子网络, 获取各所述单人音频信号对应的识别 权重; 将各所述特征信息和各 所述识别权 重输入所述 解码器子网络, 得到转换文本 。 3.根据权利要求1或2所述的方法, 其特征在于, 所述获取多人会话场景下的混合音频 信号, 包括: 获取所述多人会话场景 下的初始混合音频信号; 对所述初始混合音频信号中的声纹信息进行识别, 剔除掉目标声纹信息, 得到所述混 合音频信号; 所述目标声纹信息包括空白声纹信息和噪音 声纹信息 。 4.根据权利要求1或2所述的方法, 其特 征在于, 所述 转换模型的训练过程包括: 将多人会话场景下的样本混合音频信号输入预设的初始转换模型中, 得到所述样本混 合音频信号对应的样本转换文本; 根据所述样本转换文本和金 标准转换文本, 得到所述初始转换模型的损失函数的值; 根据所述损失函数的值对所述初始转换模型进行训练, 得到所述 转换模型。 5.根据权利要求 4所述的方法, 其特 征在于, 所述金 标准转换文本的获取 过程包括: 对所述样本混合音频信号的声纹进行识别, 获取所述样本混合音频信号中多个单人样 本音频信号; 对于各所述单人样本音频信号, 将所述单人样本音频信号输入预设的神经网络模型 中, 获取所述单人样本音频信号对应的单位样本转换文本; 所述神经网络模型用于将单人 音频信号 转换为对应的单位 转换文本; 按照各所述单人样本音频信号的生成时间, 对各所述单人样本音频信号对应的单位样 本转换文本进行拼接处 理, 得到所述金 标准转换文本 。 6.根据权利要求5所述的方法, 其特征在于, 所述按照各所述单人样本音频信号的生成 时间, 对各所述单人样本音频信号对应的单位样本转换文本进行拼接处理, 得到所述金标 准转换文本, 包括: 按照各所述单人样本音频信号的生成时间, 对各所述单人样本音频信号对应的单位样 本转换文本进行排序, 得到排序后的单位样本转换文本; 在所述排序后的单位样本转换文本的初始字符和结尾字符中分别插入开始符号和结 束符号, 得到处 理后的单位样本转换文本; 根据所述处理后的单位样本转换文本的初始符号和结束符号, 对所述处理后的单位样 本转换文本进行 首尾拼接, 得到所述金 标准转换文本 。权 利 要 求 书 1/2 页 2 CN 115440198 A 27.根据权利要求6所述的方法, 其特征在于, 所述按照各所述单人样本音频信号的生成 时间, 对各所述单人样本音频信号对应的单位样本转换文本进行排序, 得到排序后的单位 样本转换文本, 包括: 按照各所述单人样本音频信号的生成时间, 对各所述单人样本音频信号对应的单位样 本转换文本进行顺序排序, 得到排序后的单位样本转换文本; 或者, 按照各所述单人样本音频信号的生成时间, 对各所述单人样本音频信号对应的单位样 本转换文本进行倒序排序, 得到排序后的单位样本转换文本 。 8.一种混合音频信号的转换装置, 其特 征在于, 所述装置包括: 第一获取模块, 用于获取多人会话场景 下的混合音频信号; 第二获取模块, 用于将所述混合音频信号输入预设的转换模型中, 获取所述混合音频 信号对应的转换文本; 其中, 所述转换文本包括多个按照时序排列的单人音频信号对应的 单位转换文本 。 9.一种计算机设备, 包括存储器和处理器, 所述存储器存储有计算机程序, 其特征在 于, 所述处 理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤。 10.一种计算机可读存储介质, 其上存储有计算机程序, 其特征在于, 所述计算机程序 被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。权 利 要 求 书 2/2 页 3 CN 115440198 A 3
专利 混合音频信号的转换方法、装置、计算机设备和存储介质
文档预览
中文文档
25 页
50 下载
1000 浏览
0 评论
0 收藏
3.0分
赞助2.5元下载(无需注册)
温馨提示:本文档共25页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2.5元下载
本文档由 SC 于
2024-02-18 22:23:53
上传分享
举报
下载
原文档
(1.4 MB)
分享
友情链接
T-ZJSXX 01—2022 浙江省学生精神 心理 障碍休学-复学标准和办理程序.pdf
斯元商业咨询 网络安全科技供应链报告:厂商成分分析及国产化替代指南 2022.pdf
GB-T 42706.2-2023 电子元器件 半导体器件长期贮存 第2部分:退化机理.pdf
GB-T 19557.5-2017 植物品种特异性、一致性和稳定性测试指南 大白菜.pdf
JR-T0213-2021 金融网络安全 Web 应用服务安全测试通用 规范.pdf
DB43-T 2746-2023 特种设备使用单位安全风险评估和管控导则 湖南省.pdf
T-CMSA 0034—2022 抑制雷电装置技术要求.pdf
DB65-T4613-2022 农村卫生户厕建设与管理规范 新疆维吾尔自治区.pdf
T-SMA 0030—2022 智能电力井盖监测模块检验规范 第2部分:倾角.pdf
GB-T 23456-2018 磷石膏.pdf
DB32-T 4659.2-2024 医院公共卫生工作规范 第2部分:疾控机构医防融合工作指南 江苏省.pdf
GB-T 16664-1996 企业供配电系统节能监测方法.pdf
DB14-T 1720-2018 黄土公路隧道工程监测技术规程 山西省.pdf
GB-T 2965-2023 钛及钛合金棒材.pdf
GM-T 0122-2022 区块链密码检测规范.pdf
OWASP-Top-10-for-LLMs-2023-v05.pdf
DB22-T 1582-2012 工业企业能源计量数据管理规范 吉林省.pdf
NY-T 3866-2021 草地贪夜蛾测报技术规范.pdf
T-CIECCPA 008—2020 工业企业节能诊断报告编制规范.pdf
GB-T 33848.1-2017 信息技术 射频识别 第1部分:参考结构和标准化参数定义.pdf
1
/
25
评价文档
赞助2.5元 点击下载(1.4 MB)
回到顶部
×
微信扫码支付
2.5
元 自动下载
点击进入官方售后微信群
支付 完成后 如未跳转 点击这里下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。