特征解耦模型的训练、语音解耦、语音合成的方法及设备
Abstract:
本申请涉及人工智能技术,提出了一种特征解耦模型的训练、语音解耦、语音合成的方法及设备,该方法包括:将样本音频的第一频谱特征输入至预训练的语音特征解耦模型的节奏编码器进行编码得到节奏编码;利用模型的内容编码器对第一频谱特征进行编码得到内容编码;利用模型的音高编码器对音高轮廓特征进行编码得到音高编码;通过模型的解码器对输入至解码器中的节奏编码、内容编码、音高编码、用户身份特征进行解码得到第二频谱特征;根据计算得到的重构损失函数和正交损失函数得到整体损失函数;根据整体损失函数计算梯度迭代更新模型参数,直至达到收敛条件,得到已训练的语音特征解耦模型。本申请可以优化语音特征解耦达到充分解耦的目的。
Patent Agency Ranking
0/0