情感语音转换技术研究取得新进展
- 2022-08-24 15:43
- 科技日报
记者23日从内蒙古大学计算机学院获悉,该院刘锐研究员研究团队与日本大阪大学科学与产业研究所研究团队合作,在国际信号处理领域顶级期刊《IEEE/ACM音频、语音和语言处理会刊》上发表了“通过源滤波网络解耦非特定人情感进行语音转换”的最新研究成果。
据介绍,情感语音转换(VC)旨在将中性语音转换为情感语音,同时保留语言信息和说话人的身份。研究小组注意到,将情感特征与其他语音信息(如内容、说话者身份等)分离开来。)是实现高质量转化效果的关键。由于情感语音中声学特征的解耦比较复杂,中性语音的特征解耦处理不好。
研究团队对情感语音转换的声学特征解耦进行了研究,提出了基于“源-滤波器”模型的情感语音转换系统。具体而言,提出了一种基于"源-过滤器"模型的情感VC模型(简称SFEVC ),以解决情感语音转换的特征解耦问题,从而从音色和音调特征中准确过滤说话人的独立情感线索。SFEVC模型由多声道编码器、情感无关编码器、预训练的说话人相关编码器和相应的解码器组成。所有编码器模块均采用信息瓶颈自动编码器。
为了进一步提高各种情绪的转化质量,研究团队还提出了基于二维VA(激活度-效能)空间的训练策略。实验结果表明,SFEVC模型和VA训练策略的性能优于所有基线系统,在基于非并行数据的非特定人情感VC场景中取得了最佳性能。
扩展阅读
头条推荐
- 公安部交管局公布今年上半年事故多发路段2020-07-27 11:24
- 全球深空探索走进新时代2020-07-27 09:06
- 四部门:遏制货车非法改装 严厉打击百吨王2020-07-27 07:18
- “四个一百”优秀政法新媒体榜单正式发布2020-07-27 07:16
- 多地出台稳外贸稳外资“加强版”举措2020-07-24 09:11
图文推荐
-
2
上海海警查获5起涉嫌走私案件 涉案金额2000万元
2020-07-22 07:16
-
3
高科技重新定义新时代抢险抗洪
2020-07-21 07:24
-
4
2020第五届大致坡琼剧文化节在海口启幕
2020-07-13 08:56
-
5
黔东南州非遗大集市在丹寨万达小镇开市
2020-07-08 07:29