#金融文本

多模态 Transformer 用语义表格建模长财务文本

论文提出多模态 Transformer 框架，将财务表格表示为语义增强的 token 序列，并通过交叉注意力与长文本融合，为每个数值变量附加其文字定义衍生的语义嵌入。基于财报与 MD&A 大规模数据实验显示，结构化数值仍是主要预测信号，但文本经交叉注意力而非简单拼接可带来稳定增量收益。