题名基于深度度量学习的说话人识别方法及应用研究
作者吉瑞芳
答辩日期2019-05-23
文献子类硕士
授予单位中国科学院研究生院
授予地点北京
导师徐波
关键词说话人辨认,说话人确认,说话人身份子空间模型,最大边缘余弦损失
学位专业模式识别与智能系统
英文摘要

近年来,说话人识别技术逐渐从实验室走入市场,面对海量增加的语音数据和有效时长很短的短语料,传统产生式系统开始力不从心。与此同时,深度神经网络异军突起,在图像识别、视频识别、语音识别等多种模式识别领域显示出了强大的计算能力和建模能力。本文围绕说话人识别技术在应用过程中遇到的海量语料和短语料等问题,从模型建立和模型训练两个角度入手,引入深度神经网络,进行了一系列探索,主要研究成果如下:

  1.在iVector系统框架下,提出一种非线性度量学习方法,解决海量语料下说话人辨认准确度低的问题。本文用深度独立子空间分析(Independent Subspace Analysis,ISA)网络取代传统线性判别分析方法(Linear Discriminate Analysis, LDA),监督说话人特征向量的提取,使得提取的特征更具区分性。同时,该网络能有效抑制环境噪音、信道差异等因素影响,增强特征的鲁棒性。当目标语料达到400k 时,辨认系统的Top -50准确率达到95%以上。

  2.搭建了两个端到端深度神经网络说话人确认系统模型,实现了对短语音特征的有效提取。针对iVector系统无法有效提取语音时长小于15s的语音特征的问题,本文分别搭建了基于深度残差神经网络和基于增强门控循环神经网络的两个说话人确认系统。利用深度神经网络强大的拟合能力和表征能力,分别进行了多种短语音时长条件下的特征提取。实验显示,在多语言、多时长条件下,两个深度神经网络系统均能有效表征说话人特征,在2s时长下,达到等错误率小于8%的识别效果。

 3.提出了两个度量学习方法,监督端到端短语音说话人确认系统的模型训练。本文借鉴Contrast 损失中计算样本与类中心特征向量相似度的思想,提出了基于说话人身份子空间模型损失,通过模型训练来学习说话人的身份特征向量,避免了Contrast 损失的难训练情况。针对Softmax 损失缺乏类间距离约束的问题,本文增加角边界约束和类边界约束,由此提出了基于最大边缘余弦损失的度量学习方法。在多语言、多时长条件下,以及两个深度神经网络系统测试了两个度量函数的识别性能。结果显示,相同条件下,基于以上度量学习方法系统的识别效果均明显优于基于Softmax 损失的系统,性能普遍提升在20%左右。

语种中文
页码92
内容类型学位论文
源URL[http://ir.ia.ac.cn/handle/173211/23794]  
专题数字内容技术与服务研究中心_听觉模型与认知计算
推荐引用方式
GB/T 7714
吉瑞芳. 基于深度度量学习的说话人识别方法及应用研究[D]. 北京. 中国科学院研究生院. 2019.
个性服务
查看访问统计
相关权益政策
暂无数据
收藏/分享
所有评论 (0)
暂无评论
 

除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。


©版权所有 ©2017 CSpace - Powered by CSpace