一种数据异构和通信带宽受限环境下的高效联邦学习方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种数据异构和通信带宽受限环境下的高效联邦学习方法
申请号:CN202410810655
申请日期:2024-06-21
公开号:CN118674069A
公开日期:2024-09-20
类型:发明专利
摘要
本申请提出了一种数据异构和通信带宽受限环境下的高效联邦学习方法。在每轮通信中,各客户端对更新的模型参数进行混合压缩,并将其进行编码后发送至服务器。服务器接收并解码参数,通过判断当前通信轮次是否为跳过周期,决定对参数进行随机洗牌或聚合,以更新全局模型。随后,将更新后的全局模型发送回客户端继续训练,直至达到预设通信轮数。此方法通过创新的压缩技术,显著减少了通信开销,解决了数据异构性较大时的收敛问题。最后,通过实验验证了发明方法的有效性。
技术关键词
联邦学习方法 Huffman编码 通信带宽 客户端 异构 服务器 模型参数更新方法 受限 压缩器 数据 洗牌 周期 随机梯度下降 解码参数 定义 机制 有效性 阶段