★ 2
X-Dubbing 提出受时间与视觉约束的语音到语音翻译配音方案
论文提出 X-Dubbing,将跨语言配音拆解为时间感知的语音转文本翻译与视频感知的文本转语音两个联合问题,由配音翻译器生成时间结构化脚本、配音演员模型同步渲染。方法无需成对配音数据,在等时性与音画一致性等指标上优于近期基线。
arXiv NLP7 天前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文提出 X-Dubbing,将跨语言配音拆解为时间感知的语音转文本翻译与视频感知的文本转语音两个联合问题,由配音翻译器生成时间结构化脚本、配音演员模型同步渲染。方法无需成对配音数据,在等时性与音画一致性等指标上优于近期基线。