科研團隊:情感語音轉換技術研究取得新進展

2022-08-24 10:05:08   來源:科技日報

記者23日從內蒙古大學計算機學院獲悉,該院劉瑞研究員所在科研團隊與日本大阪大學科學與工業研究所科研團隊合作,在國際信號處理領域TOP期刊《IEEE/ACM音頻、語音和語言處理會刊》發表了“通過源濾波網絡將獨立于說話人的情感解耦以進行語音轉換”的最新研究成果。

據介紹,情感語音轉換(VC)旨在將中語音轉換為情感聲音,同時保留語言信息和說話者的身份。科研團隊注意到,將情感特征與其他語音信息(例如內容、說話者身份等)解耦是實現高質量轉換效果的關鍵。由于情感語音中聲學特征的解耦更加復雜,面向中語音的特征解耦一直無法得到很好的處理。

科研團隊針對情感語音轉換的聲學特征解耦問題開展研究,提出了一種基于“源—濾波器”模型的情感語音轉換系統,具體來說,是為了解決情感語音轉換的特征解耦問題而提出一種新穎的基于“源—濾波器”模型的情感VC模型(簡稱SFEVC),以從音色和音調特征中準確過濾說話人獨立的情感線索。SFEVC模型由多通道編碼器、情感獨立編碼器、預訓練的說話人相關編碼器和相應的解碼器組成。所有編碼器模塊都采用信息瓶頸自動編碼器。

為了進一步提高各種情緒的轉化質量,研究團隊還提出了基于二維VA(激活度—效價)空間的訓練策略。實驗結果表明,SFEVC模型以及VA訓練策略的表現均優于所有基線系統,并基于非行數據在說話人無關的情感VC場景下實現了最優能。(記者張景陽 通訊員胡紅波)

標簽: 情感語音轉換技術研究 取得新進展 情感語音 轉換技術

相關閱讀

科研團隊:情感語音轉換技術研究取得新進展

科技

記者23日從內蒙古大學計算機學院獲悉,該院劉瑞研究員所在科研團隊與日本大阪大學科學與工業研究所科研團隊合作,在國際信號處理領域TOP期

2022-08-24

研究人員:新型復合樹脂制成可回收渦輪機葉

科技

風力發電是一種越來越受歡迎的可再生能源。然而,將風能轉化為電能的巨型渦輪機葉片被更換下來如何處置是一個問題。在23日舉行的美國化學學

2022-08-24

高清大腦皮層發育新圖譜繪成 代表了進一

科技

美國北卡羅來納大學醫學院的科學家們以前所未有的分辨率繪制了年輕人類大腦皮層的表面圖,揭示了從出生前兩個月到出生后兩年關鍵功能區域的

2022-08-24

新研究:相似面孔的人或具相似DNA

科技

據發表在23日的《細胞報告》雜志上的一項新研究,具有相似面孔的人可能具有相似的DNA。該研究揭示了面部的強烈相似性與共同的基因變異有關

2022-08-24

研究人員:替代致強溫室效應的氫氟烴 使用

科技

今夏全球酷熱難耐,空調的使用量劇增。但空調中的氫氟烴制冷劑是強效的溫室氣體,也是氣候變化的主要驅動力之一。研究人員在美國化學學會的

2022-08-24

科研團隊:情感語音轉換技術研究取得新進展

科技

記者23日從內蒙古大學計算機學院獲悉,該院劉瑞研究員所在科研團隊與日本大阪大學科學與工業研究所科研團隊合作,在國際信號處理領域TOP期

2022-08-24

研究人員:新型復合樹脂制成可回收渦輪機葉片

科技

風力發電是一種越來越受歡迎的可再生能源。然而,將風能轉化為電能的巨型渦輪機葉片被更換下來如何處置是一個問題。在23日舉行的美國化學學

2022-08-24

高清大腦皮層發育新圖譜繪成 代表了進一步研究大腦發育的寶貴資源

科技

美國北卡羅來納大學醫學院的科學家們以前所未有的分辨率繪制了年輕人類大腦皮層的表面圖,揭示了從出生前兩個月到出生后兩年關鍵功能區域的

2022-08-24

新研究:相似面孔的人或具相似DNA

科技

據發表在23日的《細胞報告》雜志上的一項新研究,具有相似面孔的人可能具有相似的DNA。該研究揭示了面部的強烈相似性與共同的基因變異有關

2022-08-24

研究人員:替代致強溫室效應的氫氟烴 使用固態制冷劑的新型環保空調問世

科技

今夏全球酷熱難耐,空調的使用量劇增。但空調中的氫氟烴制冷劑是強效的溫室氣體,也是氣候變化的主要驅動力之一。研究人員在美國化學學會的

2022-08-24

科學家:人造甜味劑會提高人體血糖水平

科技

美國科學家在最新一期《細胞》雜志上撰文稱,糖精和三氯蔗糖這兩種人造甜味劑可能會阻礙人體在進食后調節血糖水平的能力,原因可能在于甜味

2022-08-24

俄羅斯研發出一種強放射性廢物處理方法確保環境安全

科技

俄羅斯研發出一種有效的強放射性廢物處理方法,并已獲得專利。此項發明是正在開發的核電站乏核燃料創新處理技術的一個階段,該方法可減少廢

2022-08-24

俄開發快速處理溫室氣體方法 相關研究結果發表在《材料》上

科技

俄羅斯研究人員開發出對二氧化碳進行工業處理的新型高效催化劑。除了對環境具有意義之外,所得化合物還具有合成方法簡單、成本低和許多其它

2022-08-24

研究人員:這個糖蛋白將有助于識別帕金森早期患者

科技

目前帕金森病的診斷主要依賴于患者出現的運動癥狀,例如手抖。但運動癥狀出現時意味著疾病已經進展了很久。而帕金森病的前驅期,已經存在的

2022-08-23

我國科學家在時間反演對稱性實驗檢驗上獲重要進展 相關成果發表在《物理評論快報》上

科技

記者從中國科學技術大學獲悉,該校盧征天教授團隊利用激光冷原子方法對鐿-171原子的固有電偶極矩進行了首次測量,獲得了該電偶極矩小于上限

2022-08-23

遇見旗袍是于萬千人群中的驚鴻一瞥 沿途灑滿了愛的芬芳

旗袍,中國和世界華人女性的傳統服裝,被譽為中國國粹和女性國服。雖然其定義和產生的時間至今還存有諸多爭議,但它仍然是中國悠久服飾文化

北京市電影院有序恢復開放 周五預售部分場次已滿座

7月21日,北京市政府發布《北京市電影局關于在疫情防控常態化條件下有序推進電影院恢復開放的通知》,宣布全市低風險地區影院,可于7月24日

近期持續強降雨影響 第46屆武漢渡江節因長江水位過高取消

?武漢7·16渡江節組委會14日發布公告,由于長江武漢關水位超警戒水位,按照規定取消2020年第46屆武漢7·16渡江節。受近期持續強降雨影響,

“非遺”普及受眾最看重“動手”參觀大師工作室非常享受

過去一段時間,國家級非遺項目灰塑傳承人邵成村,多次在陳家祠等工作現場,向身邊那些帶著好奇目光的人們講解灰塑的種種技術細節:草根灰、

璧山冷酒夜市 豐富市民夜間文旅活動

7月13日,位于璧山區南門唐城夜市街區的璧山冷酒夜市開街。這是璧山區打造夜間經濟消費載體、培育夜間經濟活動品牌的舉措之一。璧山市民一

年內兩市超過500家上市公司完成回購 累計回購金額超332億元

近期A股市場持續震蕩,不少上市公司或其重要股東推出回購、增持計劃,用真金白銀力挺股價。記者根據同花順數據統計,今年以來,兩市超過500

持續發力補鏈強鏈加大研發搶占市場 渝企跑出“加速度”

玥湖路渝快電充換電站 一輛新能源汽車,離不開研發、動力、配套等多個環節。作為汽車制造重鎮,重慶在這些環節的多個板塊上,正在加速奔跑

重啟上市公司資本運作 康佳集團去年半導體業務營業收入為3.22億元

近日,康佳集團正式對外發布2021年年度業績報告。2021年,康佳集團實現全年營收491 07億元,歸屬于母公司的凈利潤為9 05億元,同比增長89 5

偉祿集團連續6年增長 去年營收同比增長37.5%

深港通標的之一的深圳企業偉祿集團近日公布2021年業績。財報數據顯示,偉祿集團全年營業收入11 95億港元,同比增長37 5%,連續6年穩步增長;

龍頭企業去年凈利倍增 整個行業營收規模有望創造歷史新高位

近日,面板龍頭TCL科技、京東方分別發布2021年度業績快報,兩家企業去年歸屬于上市公司股東的凈利潤分別增長129 3%、412 86%,實現超過百億

深圳國企全力為市民 守好“菜籃子”“米袋子”保障量足價穩

疫情防控形勢下,民生物資供應是否充足成為市民最為關注的問題之一。連日來,深農集團、深糧控股等企業,充分發揮國企擔當,全力為深圳市民