科研团队:情感语音转换技术研究取得新进展

2022-08-24 10:05:08   来源:科技日报

记者23日从内蒙古大学计算机学院获悉,该院刘瑞研究员所在科研团队与日本大阪大学科学与工业研究所科研团队合作,在国际信号处理领域TOP期刊《IEEE/ACM音频、语音和语言处理会刊》发表了“通过源滤波网络将独立于说话人的情感解耦以进行语音转换”的最新研究成果。

据介绍,情感语音转换(VC)旨在将中语音转换为情感声音,同时保留语言信息和说话者的身份。科研团队注意到,将情感特征与其他语音信息(例如内容、说话者身份等)解耦是实现高质量转换效果的关键。由于情感语音中声学特征的解耦更加复杂,面向中语音的特征解耦一直无法得到很好的处理。

科研团队针对情感语音转换的声学特征解耦问题开展研究,提出了一种基于“源—滤波器”模型的情感语音转换系统,具体来说,是为了解决情感语音转换的特征解耦问题而提出一种新颖的基于“源—滤波器”模型的情感VC模型(简称SFEVC),以从音色和音调特征中准确过滤说话人独立的情感线索。SFEVC模型由多通道编码器、情感独立编码器、预训练的说话人相关编码器和相应的解码器组成。所有编码器模块都采用信息瓶颈自动编码器。

为了进一步提高各种情绪的转化质量,研究团队还提出了基于二维VA(激活度—效价)空间的训练策略。实验结果表明,SFEVC模型以及VA训练策略的表现均优于所有基线系统,并基于非行数据在说话人无关的情感VC场景下实现了最优能。(记者张景阳 通讯员胡红波)

标签: 情感语音转换技术研究 取得新进展 情感语音 转换技术

相关阅读

科研团队:情感语音转换技术研究取得新进展

科技

记者23日从内蒙古大学计算机学院获悉,该院刘瑞研究员所在科研团队与日本大阪大学科学与工业研究所科研团队合作,在国际信号处理领域TOP期

2022-08-24

研究人员:新型复合树脂制成可回收涡轮机叶

科技

风力发电是一种越来越受欢迎的可再生能源。然而,将风能转化为电能的巨型涡轮机叶片被更换下来如何处置是一个问题。在23日举行的美国化学学

2022-08-24

高清大脑皮层发育新图谱绘成 代表了进一

科技

美国北卡罗来纳大学医学院的科学家们以前所未有的分辨率绘制了年轻人类大脑皮层的表面图,揭示了从出生前两个月到出生后两年关键功能区域的

2022-08-24

新研究:相似面孔的人或具相似DNA

科技

据发表在23日的《细胞报告》杂志上的一项新研究,具有相似面孔的人可能具有相似的DNA。该研究揭示了面部的强烈相似性与共同的基因变异有关

2022-08-24

研究人员:替代致强温室效应的氢氟烃 使用

科技

今夏全球酷热难耐,空调的使用量剧增。但空调中的氢氟烃制冷剂是强效的温室气体,也是气候变化的主要驱动力之一。研究人员在美国化学学会的

2022-08-24

科研团队:情感语音转换技术研究取得新进展

科技

记者23日从内蒙古大学计算机学院获悉,该院刘瑞研究员所在科研团队与日本大阪大学科学与工业研究所科研团队合作,在国际信号处理领域TOP期

2022-08-24

研究人员:新型复合树脂制成可回收涡轮机叶片

科技

风力发电是一种越来越受欢迎的可再生能源。然而,将风能转化为电能的巨型涡轮机叶片被更换下来如何处置是一个问题。在23日举行的美国化学学

2022-08-24

高清大脑皮层发育新图谱绘成 代表了进一步研究大脑发育的宝贵资源

科技

美国北卡罗来纳大学医学院的科学家们以前所未有的分辨率绘制了年轻人类大脑皮层的表面图,揭示了从出生前两个月到出生后两年关键功能区域的

2022-08-24

新研究:相似面孔的人或具相似DNA

科技

据发表在23日的《细胞报告》杂志上的一项新研究,具有相似面孔的人可能具有相似的DNA。该研究揭示了面部的强烈相似性与共同的基因变异有关

2022-08-24

研究人员:替代致强温室效应的氢氟烃 使用固态制冷剂的新型环保空调问世

科技

今夏全球酷热难耐,空调的使用量剧增。但空调中的氢氟烃制冷剂是强效的温室气体,也是气候变化的主要驱动力之一。研究人员在美国化学学会的

2022-08-24

科学家:人造甜味剂会提高人体血糖水平

科技

美国科学家在最新一期《细胞》杂志上撰文称,糖精和三氯蔗糖这两种人造甜味剂可能会阻碍人体在进食后调节血糖水平的能力,原因可能在于甜味

2022-08-24

俄罗斯研发出一种强放射性废物处理方法确保环境安全

科技

俄罗斯研发出一种有效的强放射性废物处理方法,并已获得专利。此项发明是正在开发的核电站乏核燃料创新处理技术的一个阶段,该方法可减少废

2022-08-24

俄开发快速处理温室气体方法 相关研究结果发表在《材料》上

科技

俄罗斯研究人员开发出对二氧化碳进行工业处理的新型高效催化剂。除了对环境具有意义之外,所得化合物还具有合成方法简单、成本低和许多其它

2022-08-24

研究人员:这个糖蛋白将有助于识别帕金森早期患者

科技

目前帕金森病的诊断主要依赖于患者出现的运动症状,例如手抖。但运动症状出现时意味着疾病已经进展了很久。而帕金森病的前驱期,已经存在的

2022-08-23

我国科学家在时间反演对称性实验检验上获重要进展 相关成果发表在《物理评论快报》上

科技

记者从中国科学技术大学获悉,该校卢征天教授团队利用激光冷原子方法对镱-171原子的固有电偶极矩进行了首次测量,获得了该电偶极矩小于上限

2022-08-23

遇见旗袍是于万千人群中的惊鸿一瞥 沿途洒满了爱的芬芳

旗袍,中国和世界华人女性的传统服装,被誉为中国国粹和女性国服。虽然其定义和产生的时间至今还存有诸多争议,但它仍然是中国悠久服饰文化

北京市电影院有序恢复开放 周五预售部分场次已满座

7月21日,北京市政府发布《北京市电影局关于在疫情防控常态化条件下有序推进电影院恢复开放的通知》,宣布全市低风险地区影院,可于7月24日

近期持续强降雨影响 第46届武汉渡江节因长江水位过高取消

武汉7·16渡江节组委会14日发布公告,由于长江武汉关水位超警戒水位,按照规定取消2020年第46届武汉7·16渡江节。受近期持续强降雨影响,

“非遗”普及受众最看重“动手”参观大师工作室非常享受

过去一段时间,国家级非遗项目灰塑传承人邵成村,多次在陈家祠等工作现场,向身边那些带着好奇目光的人们讲解灰塑的种种技术细节:草根灰、

璧山冷酒夜市 丰富市民夜间文旅活动

7月13日,位于璧山区南门唐城夜市街区的璧山冷酒夜市开街。这是璧山区打造夜间经济消费载体、培育夜间经济活动品牌的举措之一。璧山市民一

年内两市超过500家上市公司完成回购 累计回购金额超332亿元

近期A股市场持续震荡,不少上市公司或其重要股东推出回购、增持计划,用真金白银力挺股价。记者根据同花顺数据统计,今年以来,两市超过500

持续发力补链强链加大研发抢占市场 渝企跑出“加速度”

玥湖路渝快电充换电站 一辆新能源汽车,离不开研发、动力、配套等多个环节。作为汽车制造重镇,重庆在这些环节的多个板块上,正在加速奔跑

重启上市公司资本运作 康佳集团去年半导体业务营业收入为3.22亿元

近日,康佳集团正式对外发布2021年年度业绩报告。2021年,康佳集团实现全年营收491 07亿元,归属于母公司的净利润为9 05亿元,同比增长89 5

伟禄集团连续6年增长 去年营收同比增长37.5%

深港通标的之一的深圳企业伟禄集团近日公布2021年业绩。财报数据显示,伟禄集团全年营业收入11 95亿港元,同比增长37 5%,连续6年稳步增长;

龙头企业去年净利倍增 整个行业营收规模有望创造历史新高位

近日,面板龙头TCL科技、京东方分别发布2021年度业绩快报,两家企业去年归属于上市公司股东的净利润分别增长129 3%、412 86%,实现超过百亿

深圳国企全力为市民 守好“菜篮子”“米袋子”保障量足价稳

疫情防控形势下,民生物资供应是否充足成为市民最为关注的问题之一。连日来,深农集团、深粮控股等企业,充分发挥国企担当,全力为深圳市民