★ 2
相对时间间隔表示实现词级时间戳预测
语音大模型在细粒度时间对齐输出上能力不足。提出用相对时间戳替代绝对时间戳，采用混合微调策略和掩码时间戳训练目标，增强模型鲁棒性。实验显示在时间戳预测准确性上显著提升，同时保持语音转写性能。
arXiv cs.AI68 天前
共 1 篇相关资讯，按重要度与时间排序，每 3 小时更新。
语音大模型在细粒度时间对齐输出上能力不足。提出用相对时间戳替代绝对时间戳，采用混合微调策略和掩码时间戳训练目标，增强模型鲁棒性。实验显示在时间戳预测准确性上显著提升，同时保持语音转写性能。