In this paper, we present a scheme for extending deep neural network-based multiplicative maskers to deep subband filters for speech restoration in the time-frequency domain. The resulting method can be generically applied to any deep neural network providing masks in the time-frequency domain, while requiring only few more trainable parameters and a computational overhead that is negligible for state-of-the-art neural networks. We demonstrate that the resulting deep subband filtering scheme outperforms multiplicative masking for dereverberation, while leaving the denoising performance virtually the same. We argue that this is because deep subband filtering in the time-frequency domain fits the subband approximation often assumed in the dereverberation literature, whereas multiplicative masking corresponds to the narrowband approximation generally employed in denoising.


翻译:在本文中,我们提出了一个将深神经网络的多复制式掩码器扩大到用于时间频域内语音恢复的深子带过滤器的计划。 由此得出的方法可以笼统地适用于在时间频域内提供掩码的深神经网络,同时只需要少许更多的可训练参数和计算间接费用,而对于最先进的神经网络来说,这种计算间接费用是微不足道的。 我们证明,由此形成的深子带过滤器计划比起多复制式掩码来进行脱色,而使去色性能几乎保持不变。 我们认为,这是因为在时间频域内进行的深子带过滤符合在脱色文献中经常假定的亚频带近似值,而多复制式掩码与通常用于拆色的窄带近似值相对应。</s>

0
下载
关闭预览

相关内容

[综述]深度学习下的场景文本检测与识别
专知会员服务
77+阅读 · 2019年10月10日
VCIP 2022 Call for Demos
CCF多媒体专委会
1+阅读 · 2022年6月6日
征稿 | International Joint Conference on Knowledge Graphs (IJCKG)
开放知识图谱
2+阅读 · 2022年5月20日
Hierarchically Structured Meta-learning
CreateAMind
26+阅读 · 2019年5月22日
Transferring Knowledge across Learning Processes
CreateAMind
27+阅读 · 2019年5月18日
Unsupervised Learning via Meta-Learning
CreateAMind
42+阅读 · 2019年1月3日
A Technical Overview of AI & ML in 2018 & Trends for 2019
待字闺中
16+阅读 · 2018年12月24日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
1+阅读 · 2008年12月31日
Arxiv
12+阅读 · 2022年11月21日
Arxiv
20+阅读 · 2021年9月22日
Arxiv
126+阅读 · 2020年9月6日
Arxiv
12+阅读 · 2020年8月3日
Meta-Learning with Implicit Gradients
Arxiv
13+阅读 · 2019年9月10日
A Survey on Deep Transfer Learning
Arxiv
11+阅读 · 2018年8月6日
VIP会员
相关VIP内容
[综述]深度学习下的场景文本检测与识别
专知会员服务
77+阅读 · 2019年10月10日
相关论文
Arxiv
12+阅读 · 2022年11月21日
Arxiv
20+阅读 · 2021年9月22日
Arxiv
126+阅读 · 2020年9月6日
Arxiv
12+阅读 · 2020年8月3日
Meta-Learning with Implicit Gradients
Arxiv
13+阅读 · 2019年9月10日
A Survey on Deep Transfer Learning
Arxiv
11+阅读 · 2018年8月6日
相关基金
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
1+阅读 · 2008年12月31日
Top
微信扫码咨询专知VIP会员