★ 2
SignRAG:统一检索增强的无注释手语翻译框架
研究者提出 SignRAG,一个结合分层预训练、目标域检索增强与检索感知强化微调的统一框架,用于无注释手语翻译。该方法首次在 CSL-Daily 全部指标上超越有注释监督方法,代码与多尺寸模型已在 GitHub 开源。
arXiv NLP24 天前
共 2 篇相关资讯,按重要度与时间排序,每 3 小时更新。
研究者提出 SignRAG,一个结合分层预训练、目标域检索增强与检索感知强化微调的统一框架,用于无注释手语翻译。该方法首次在 CSL-Daily 全部指标上超越有注释监督方法,代码与多尺寸模型已在 GitHub 开源。
传统手语处理系统仅停留在句子层面,忽略关键话语现象。DiscoSign 提出基于 LLM 的模块化框架,处理空间共指消解与问答从句等三类话语现象,实现话语感知的文本到手语注解翻译。