★ 2
COFFEE:离散扩散的序列级引导框架
离散扩散模型并行生成序列,但用序列级目标引导时因未解析token组合爆炸而难以实现。论文提出COFFEE,将序列依赖与目标分离,用无目标载体构建联合模型,并用编译有限状态模型记录组合偏好。该方法无需重训练即可支持硬约束与软目标,在符号、语言和生物基准上取得良好控制效果。
arXiv cs.AI33 天前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
离散扩散模型并行生成序列,但用序列级目标引导时因未解析token组合爆炸而难以实现。论文提出COFFEE,将序列依赖与目标分离,用无目标载体构建联合模型,并用编译有限状态模型记录组合偏好。该方法无需重训练即可支持硬约束与软目标,在符号、语言和生物基准上取得良好控制效果。