收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

基于深度神经网络的语音增强模型研究

王怡婷  
【摘要】:语音增强是语音预处理中一个尤为重要的领域。在过去的几十年中,学者们已经提出了许多无监督的语音增强方法,但由于这些传统单通道无监督语音增强方法通常会对信号进行一些不合理的假设,导致“音乐噪声”、语音失真甚至语音丢失问题的出现,很大程度上限制了性能上限。近年来,深度神经网络(Deep Neural Network,DNN)在语音增强领域受到了越来越多的关注和应用。由于DNN具有的深层非线性结构,因此网络本身可以看作是降噪滤波器。同时基于大数据训练,DNN可以通过训练获得对目标语音的估计,故而能较好表现噪声和干净语音的复杂关系。因此,本文的主要研究方向是基于DNN的语音增强模型,本文提出了与传统无监督语音增强方法不同的语音增强方法,这种方法几乎不需要做任何假设,并且能够准确学习带噪和干净语音的复杂关系,可以取得很大程度的性能提升。而为了进一步提高模型在复杂环境下的泛化能力,本文围绕训练数据处理、模型融合来提升模型性能,着重研究模型在低信噪比环境下的语音失真问题以及提高模型在复杂环境下对多种噪声类型的泛化能力。具体如下:首先,研究了语音增强以及深度神经网络的基本理论。详细叙述了语音信号预处理技术、传统无监督语音增强方法以及有监督语音增强方法等典型方法的模型框架和实现过程;深入了解现有基于DNN的语音增强方法及其模型框架、训练方法和优化策略,总结分析对比得出各类方法的优缺点,为下一步的研究奠定理论基础。其次,提出了一种基于DNN的语音增强模型。该模型使用对数功率谱作为特征,并将DNN的训练分为两步,分别是基于受限玻尔兹曼机的无监督预训练和基于反向错误传播算法的有监督调优。在增强阶段,提取带噪语音的对数功率谱特征,并将其送到己经提前训练好的DNN模型中进行解码,从而获得对干净语音的LPS的估计。通过对比实验证明,本文提出的模型在Seg SNR、LSD、PESQ和STOI等方面均能取得比传统无监督方法更好的结果,不仅能够有效解决“音乐噪声”、减轻语音丢失等问题,同时也能显著提升语音的听感和可懂度。最后,对上述提出的模型进行改进,研究了联合VAD-DNN语音增强模型。在已有的模型基础上引入了语音端点检测算法(Voice Activity Detection,VAD)处理原始训练数据,得到两个对处理噪声和保留语音各具优势的语音增强模型,而后通过VAD模型融合两个具有不同处理优势的语音增强模型,得到一个新的VAD-DNN语音增强模型。通过实验对比,相比于DNN语音增强模型,改进的联合VAD的DNN语音增强模型在低信噪比环境下显著提升了LSD、PESQ和STOI等指标,验证了该模型的性能。综上所述,本文的创新点主要是基于深度神经网络提出了一个语音增强模型,不同于以往的传统单通道语音增强方法,本文提出的模型基本上没有任何假设,能够有效解决“音乐噪声”、减轻语音丢失等问题,显著提升语音的听感和可懂度,获得比传统方法更好的性能。同时在为了获得更好的性能对此前提出的模型进行了改进,改进的联合VAD的DNN语音增强模型则在训练数据和模型融合方面进行改进,该模型很好的解决了低信噪比环境下语音增强性能不强以及对不平稳噪声的处理能力较差的问题。


知网文化
【相似文献】
中国期刊全文数据库 前19条
1 路明哲,方志良,刘福来,母国光,战元龄;IPA模型对Hopfield模型神经网络的改进[J];红外与毫米波学报;1994年02期
2 钟谭卫;神经网络中的多维MP模型[J];华南农业大学学报;2004年02期
3 王谷;汪洋;;神经网络修正灰色残差模型的交通量预测[J];交通标准化;2006年01期
4 张久彪,赵芸;一个改进的约束满足模型[J];安徽机电学院学报(自然科学版);1997年04期
5 刘义红;;一种基于云存储的自组织增量类脑记忆模型[J];安徽理工大学学报(自然科学版);2018年03期
6 李绍中;;基于自适应模糊神经系统的网络学习评价模型研究[J];计算技术与自动化;2012年02期
7 韦祥刚;赵足娥;吴年利;李培隆;;基于神经网络的英文机辅翻译预调序模型研究[J];现代电子技术;2017年22期
8 翟冠霖;杨燕;汪衡;杜圣东;;面向教育大数据情感分类的多方面情感注意力模型[J];模式识别与人工智能;2019年09期
9 夏勇,陈卫昌,张振仁,刘学杰;基于神经网络的传质系数模型建立及应用[J];计算机自动测量与控制;2002年02期
10 沈毅,刘勇,胡恒章;实现多模型同时镇定的神经网络方法[J];航天控制;1996年04期
11 李松如;陈锻生;;采用循环神经网络的情感分析注意力模型[J];华侨大学学报(自然科学版);2018年02期
12 吴茂兴;曾庆华;陈龙志;;神经网络及回归型支持向量融合健康评估模型[J];航空兵器;2013年06期
13 贾瑞玉,陈锋;相互激活模型中激活规则的改进[J];安徽教育学院学报(自然科学版);1999年02期
14 冯玉强,潘启树;基于神经网络与专家系统结合的模型自动选择[J];哈尔滨工业大学学报;2001年01期
15 聂子坤;龙伟;章鸿;;基于神经网络工序能耗模型的研究[J];新技术新工艺;2008年02期
16 林爱华;神经网络BP模型在一类介质扩散预测中的应用[J];计算机与应用化学;2000年Z1期
17 沈荣;;人工神经网络的基本模型[J];中国科技信息;2012年08期
18 周川,陈庆伟,胡维礼,胡寿松,周雨;基于模型跟随的神经网络非线性重构控制[J];系统工程与电子技术;2000年08期
19 陈岩松,朱伟利;光学神经网络多值模型及实验研究[J];光电子·激光;1993年05期
中国重要会议论文全文数据库 前20条
1 王秀娟;刘小荷;向才中;苟晓理;;模型仓库中基于决策支持的模型管理研究[A];2006中国控制与决策学术年会论文集[C];2006年
2 张婷;刘允刚;;基于改进卷积神经网络的语音分离方法[A];第36届中国控制会议论文集(C)[C];2017年
3 高林;刘喜梅;;多模型中权值确定的新方法及其应用[A];2009年中国智能自动化会议论文集(第二分册)[C];2009年
4 谢正荣;艾轶博;张卫冬;;高阶间接积分法的深度循环神经网络架构[A];2021中国自动化大会论文集[C];2021年
5 陈军屹;赵桂林;郑冠男;聂雪媛;;基于PINN神经网络的航母气流场模型的构建初探[A];第五届非定常空气动力学学术会议论文集[C];2021年
6 赵奥博;郑冠男;陈军屹;宋鑫;郝占宙;吕召阳;;基于PINN神经网络的圆柱绕流部分流场的构建[A];第五届非定常空气动力学学术会议论文集[C];2021年
7 刘宝;张言新;;基于生物调节机制的神经网络预估解耦控制算法研究及应用[A];第32届中国过程控制会议(CPCC2021)论文集[C];2021年
8 逯峰;彭继国;张波;;循环神经网络在煤矿中的应用[A];煤矿自动化与信息化--第29届全国煤矿自动化与信息化学术会议暨第10届中国煤矿信息化与自动化高层论坛论文集[C];2020年
9 李强;张悦娇;;神经网络的自适应有限时间容错同步控制[A];“两化”教学模式在应用型大学人才培养中的探究和实践专题论文集[C];2021年
10 罗朝林;陈武奋;张波;梁啟斌;;基于小波优化神经网络在大坝变形预测的应用[A];水库大坝和水电站建设与运行管理新进展[C];2022年
11 张星;关悦;党鑫鑫;胡波;;基于遗传算法-长短期记忆神经网络的月降水量预测研究[A];2021年(第七届)全国大学生统计建模大赛获奖论文集(二)[C];2021年
12 张玺森;宋浏阳;郭旭东;王华庆;;基于域融合健康指标和时间卷积神经网络的轴承退化趋势预测方法[A];第十四届全国振动理论及应用学术会议(NVTA2021)摘要集[C];2021年
13 张俊豪;赵晋锋;刘力源;;基于卷积神经网络的探地雷达隧道衬砌检测[A];2021年工业建筑学术交流会论文集[C];2021年
14 徐兴;赵倩婷;王苏宁;余绍康;;基于神经网络的自适应飞机防滑刹车控制器[A];第十八届中国航空测控技术年会论文集[C];2021年
15 宋尚焕;朱伟;;基于卷积神经网络的水声目标杂波分类[A];2021年浙黑苏鲁沪渝四省二市声学技术学术会议论文集[C];2021年
16 蒋子超;江俊扬;姚清河;杨耿超;;基于神经网络的差分方程快速求解方法[A];第十一届全国流体力学学术会议论文摘要集[C];2020年
17 耿传玉;王泽宇;周晓君;阳春华;;基于U-net卷积神经网络双层参数优化的心脏图像分割[A];第31届中国过程控制会议(CPCC 2020)摘要集[C];2020年
18 段滈杉;乔俊飞;蒙西;汤健;;基于模块化神经网络的城市固废焚烧过程氮氧化物软测量[A];第31届中国过程控制会议(CPCC 2020)摘要集[C];2020年
19 李淋雨;邱寅祺;何星;;基于LSTM的火电厂入口硝浓度预测方法研究[A];第31届中国过程控制会议(CPCC 2020)摘要集[C];2020年
20 韩红桂;甄琪;杜永萍;乔俊飞;;基于低秩双线性卷积神经网络的手机型号识别方法[A];第31届中国过程控制会议(CPCC 2020)摘要集[C];2020年
中国博士学位论文全文数据库 前20条
1 张仕良;基于深度神经网络的语音识别模型研究[D];中国科学技术大学;2017年
2 夏旻;基于突触计算的神经网络情景记忆模型研究[D];东华大学;2009年
3 林绍辉;深度神经网络压缩与加速关键技术的研究[D];厦门大学;2019年
4 翟军勇;基于多模型切换的智能控制研究[D];东南大学;2006年
5 赵俊红;神经网络的正则化及在地质预测中的应用研究[D];大连理工大学;2020年
6 纪厚业;异质图神经网络关键技术研究[D];北京邮电大学;2021年
7 姚卫;时滞忆阻神经网络的同步与多稳定性研究[D];湖南大学;2020年
8 肖理业;基于机器学习的电磁场建模与设计研究[D];电子科技大学;2019年
9 陈涵瀛;核电站热工水力系统工况预测与诊断方法研究[D];哈尔滨工程大学;2018年
10 梁智杰;聋哑人手语识别关键技术研究[D];华中师范大学;2019年
11 刘昂;微结构硅基光子学器件性能的研究[D];南京大学;2019年
12 赵博雅;基于卷积神经网络的硬件加速器设计及实现研究[D];哈尔滨工业大学;2018年
13 杜昌顺;面向细分领域的舆情情感分析关键技术研究[D];北京交通大学;2019年
14 陈科海;机器翻译上下文表示方法研究[D];哈尔滨工业大学;2019年
15 饶红霞;信息受限下神经网络的状态估计和拟同步研究[D];广东工业大学;2019年
16 张马路;Spiking机器学习算法研究[D];电子科技大学;2019年
17 付钱华;忆阻神经网络的动力学研究[D];电子科技大学;2019年
18 毛瑞琛;深度神经网络下的规范化地址建设与语义空间模型研究[D];浙江大学;2019年
19 武晨;DFP航天器动力学特性分析及精确控制方法研究[D];哈尔滨工业大学;2018年
20 杨旭辉;基于神经网络的C-ADS InjectorⅡ束流偏移校准技术研究[D];兰州大学;2019年
中国硕士学位论文全文数据库 前20条
1 王怡婷;基于深度神经网络的语音增强模型研究[D];东华理工大学;2021年
2 纪强;基于循环神经网络的深度推荐模型研究[D];安徽大学;2020年
3 肖婷;基于神经网络的多变量时间序列短时预报模型研究[D];南京信息工程大学;2021年
4 王文聪;基于神经网络的增量学习模型研究与实现[D];吉林大学;2021年
5 陈宁;基于神经网络死亡率模型的我国死亡率预测及应用[D];天津财经大学;2019年
6 张婧祎;基于深度神经网络的信贷风控模型构建与应用[D];北京交通大学;2020年
7 杨康;基于神经网络的行为推荐模型研究[D];黑龙江大学;2020年
8 姚杨;基于卷积神经网络的模型压缩研究[D];南京大学;2020年
9 胡佳;我国商业银行信贷风险评估模型比较研究[D];湖南大学;2007年
10 孙依然;面向深度神经网络的模型压缩与加速研究[D];浙江大学;2021年
11 郝立扬;基于量化卷积神经网络的模型压缩方法研究[D];电子科技大学;2020年
12 陈天龙;基于深度神经网络的文本分类模型研究[D];南昌大学;2020年
13 芦霞;基于神经网络的感冒中药配方模型建立和性能考察[D];华东交通大学;2011年
14 章鸿;基于神经网络的工序能耗模型的研究[D];南昌大学;2007年
15 徐嘉荟;基于模型剪枝的深度神经网络压缩和加速方法研究[D];东南大学;2020年
16 沈俊豪;基于多种模型融合的光伏发电功率预测[D];江南大学;2021年
17 曹真;基于神经网络与生成模型的零样本图像分类[D];太原理工大学;2020年
18 段浩然;面向深度卷积神经网络的模型剪枝技术研究[D];中国科学技术大学;2021年
19 李婧萱;基于深度神经网络的统计机器翻译模型研究[D];哈尔滨工业大学;2016年
20 刘冉;基于神经网络的个人信用评估模型的研究[D];大连海事大学;2007年
中国重要报纸全文数据库 前20条
1 记者 张梦然;神经网络打开理解电子相互作用新窗口[N];科技日报;2021年
2 记者 董映璧;神经网络技术检测玻璃钢缺陷精度高[N];科技日报;2020年
3 记者 冯海波 通讯员 华轩;构建叠层宽度神经网络成深度模型[N];广东科技报;2021年
4 湖北日报全媒记者 张爱虎 通讯员 徐向军 实习生 于蓝;一群“90后”率先建成铁路“神经网络”[N];湖北日报;2019年
5 记者 刘霞;忆阻器制成神经网络更高效[N];科技日报;2017年
6 整理 本报记者 诸玲珍 顾鸿儒;微软神经网络切割法可使加速作用超线性[N];中国电子报;2018年
7 ;神经网络小史[N];电子报;2018年
8 ;人工智能将取得大面积突破[N];中国企业报;2017年
9 本报记者 龚丹韵;人机大战:人类还有优势吗[N];解放日报;2017年
10 ;人类正迎来云端机器人时代[N];中国企业报;2017年
11 记者 邱智丽;AI竞赛 中国力量崛起[N];第一财经日报;2017年
12 记者 刘霞;新神经网络使计算机像人一样推理[N];科技日报;2017年
13 本报记者 喻思娈;人工智能有多智能?[N];人民日报;2017年
14 记者 王雪青;构建机器世界神经网络 东土科技“抄底”人工智能[N];上海证券报;2017年
15 ;人工智能到底有多智能?[N];长白山日报;2017年
16 本报记者 刘霞;美用DNA制造出首个人造神经网络[N];科技日报;2011年
17 记者 毛黎;神经网络技术帮自主驾驶汽车识别幻影物体[N];科技日报;2020年
18 记者 孙刚;“神经网络”:打开复杂工艺“黑箱”[N];解放日报;2007年
19 首席记者 吴温 通讯员 郭旭梅;温控模型精准控制温度[N];石家庄日报;2020年
20 记者 闫洁;科学家证实串联模型存在缺陷[N];中国科学报;2012年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978