#统一多模态模型

FlexUMM 提出统一多模态模型灵活表征学习框架并开源代码

论文指出统一多模态模型中理解与生成能力会产生表征冲突，现有模型结构过于固定。作者提出 FlexUMM，动态决定何时保留共享计算、何时路由专用容量、何时停止处理，可作为模型无关插件接入现有 UMM。该框架同时提升准确率与推理效率，代码已在 GitHub 开源。