★ 2
HMP-GAE:超图消息传递抵御联邦大模型拜占庭攻击
论文针对联邦大语言模型(FedLLM)训练中的拜占庭攻击,提出超图消息传递图自编码器 HMP-GAE,将低秩模型更新建模为超图节点并利用高阶语义关系识别恶意更新。基于 Qwen-2.5 与 Llama-3.2 的实验显示,全局准确率提升 1.21%,语义熵降低 44.08%,困惑度降低 13.34…
arXiv cs.LG21 天前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文针对联邦大语言模型(FedLLM)训练中的拜占庭攻击,提出超图消息传递图自编码器 HMP-GAE,将低秩模型更新建模为超图节点并利用高阶语义关系识别恶意更新。基于 Qwen-2.5 与 Llama-3.2 的实验显示,全局准确率提升 1.21%,语义熵降低 44.08%,困惑度降低 13.34…