站長之家(ChinaZ.com)9月26日 消息:EmoPP-Demo是一款基于情感感知的韻律短語生成模型,旨在提高端到端文本轉(zhuǎn)語音(TTS)的自然度和可懂度。
自然語音中存在著語言和情感韻律。然而,韻律短語的研究主要受到語言學(xué)的啟發(fā),情感韻律的研究相對較少。EmoPP-Demo通過準(zhǔn)確挖掘話語的情感線索并預(yù)測適當(dāng)?shù)亩陶Z分隔符,為情感表達(dá)提供了新的可能性。
地址:https://ai-s2-lab.github.io/EmoPP/
EmoPP模型通過融入情感線索,不但可以改善文本到語音的自然度,還可以提升語音的情感表達(dá)能力,有望在人工智能語音合成領(lǐng)域發(fā)揮重要作用。
核心功能:
1. 情感感知的短語劃分:EmoPP-Demo可以自動識別話語中的情感線索,并生成與情感相匹配的韻律短語分隔符,從而增強(qiáng)語音合成的情感表達(dá)能力。
2. 高性能情感表達(dá):經(jīng)過客觀和主觀評估,EmoPP-Demo在情感表達(dá)方面表現(xiàn)出色,優(yōu)于所有基線模型,并顯著提高了情感表現(xiàn)性能。
3. 語音演示:EmoPP-Demo提供了語音演示,可以讓用戶聽到情感感知韻律短語在TTS中的效果,進(jìn)一步驗(yàn)證了其在人類感知中的優(yōu)越性。
4. 開放源代碼:EmoPP-Demo的代碼和音頻樣本均可在GitHub上獲得,使研究人員和開發(fā)者能夠深入了解其工作原理并進(jìn)行自定義應(yīng)用。
5. 多數(shù)據(jù)集支持:EmoPP-Demo支持多種數(shù)據(jù)集,可根據(jù)不同需求進(jìn)行訓(xùn)練和評估,使其適用于各種情感和語境。
EmoPP-Demo是情感感知韻律短語生成的先進(jìn)工具,可用于提高文本到語音合成系統(tǒng)的情感表達(dá)能力,為語音交互和語音助手等應(yīng)用提供更加自然和生動的語音輸出。
(舉報(bào))