一种面向云边端系统的分层异构联邦学习方法

来源 :计算机研究与发展 | 被引量 : 0次 | 上传用户:zhouqiangjian
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
联邦学习通过用上传模型参数的方式取代了数据传输,降低了隐私泄露的风险.然而,将联邦学习应用到云边端框架下时,一方面,由于云边端存在边缘和终端两层分布式框架,对传统的单层联邦学习提出挑战;另一方面,终端节点因资源异构难以训练相同复杂度的模型,无法满足联邦学习客户端统一模型的假设.针对上述第1个问题,从传统的单层联邦学习方法出发,设计了面向云边端分层部署模型的联邦学习方案;针对第2个问题,通过在终端模型插入分支的方式,将大模型拆分为不同复杂度的小模型适配不同客户端资源状态,从而实现异构联邦学习.同时,考虑到终端存在大量无标签数据无法进行有效模型训练的问题,还提出了针对联邦框架的半监督学习方法,实现对无标签数据的有效利用.最终,通过MNIST和FashionMNIST数据集对论文方法进行了验证,实验结果表明,在有效避免隐私泄露的前提下,相比于其他同构和异构学习方法,上述方法最大可提升22%的模型准确率;在计算、通信、存储等资源开销上均有明显降低.
其他文献
文章借助三重自我建构理论,运用文本分析法和深度访谈法,研究豆瓣小组“买书如山倒 读书如抽丝”这一以“书”为中心,开展各种晒书、购书、分享书活动的趣缘聚类群。研究发现,在个体自我方面,组内成员通过书来彰显自身意志,完成对自我的凝视并且期待通过晒书完成有文化、有品位、知识渊博的理想自我的建构;在关系自我方面,组员间的交往尽管存在基于趣缘形成的弱关系向强关系的过渡,但由于真实空间的距离感等因素,小组中的
<正>目前,在新时代背景下,我国教学体系也逐渐进入全新发展时代。为进一步强化教学质量,从根源层面落实核心素养培育需求,小学数学教师需从学生角度出发,探索生活化引领方式,使课堂得到全面革新。通过整合生活化引领内容,可以使课本知识得到科学转变,提高教师与学生的互动性,进一步强化教学效果。因此,需要重视生活化引领方法,确保小学数学课堂能正常落实创新需求。一、当前小学数学授课存在的主要问题分析(一)教学理
期刊
随着我国经济文化的快速发展,英语作为一种交际语言在生活中已经变得不可或缺。新课程改革对英语的课堂教学也提出了越来越多的要求。对初中生来说,词汇的积累和掌握是英语学习和交流的基础。目前,我国初中英语词汇教学的现状是学生反复记忆,但停留在机械记忆层面,不能有效地激发学生记忆词汇的兴趣和提高记忆效率。故事教学法属于技巧类教学法,教师通过创设情景、发挥主观能动性、编造有趣的故事来激发学生学习的积极性,使学
《关于推动出版深度融合发展的实施意见》就加快推动新时代出版深度融合发展、构建数字时代新型出版传播体系作出全面部署,从内容建设、技术支撑、创新管理等方向提出加快推进出版深度融合的思路方向和具体举措,进一步完善了国内已有的出版融合政策体系。文章从推动出版深度融合的内容建设、技术支撑和创新管理三大具体发展举措出发,提出以优质供给和创新传播打造精品应对内容建设挑战,以科技创新赋能融合发展应对媒介变迁挑战,
日本的台湾研究历史悠久,近二十多年来渐成体系,具有较高水准与参考价值。与中国大陆、台湾地区及其他国家的研究相比,日本的台湾研究有其特色。本文首先按照日本台湾研究的主题与发表时序逐一介绍,得出结论日本台湾研究的重点在于日据时期、“台日关系”及台湾地区产业的研究。其背后原因涉及日本的史学传统、发展需要与研究人员的训练。最后提出日本台湾研究的种种不足,包括其对于“统独”立场的偏见、研究取材的狭隘以及研究
发展快速、灵敏、准确的食品安全检测方法是我国实施食品安全计划的重要技术支撑,对于保障人民健康具有重要意义。各类食品添加剂和膳食补充剂在不同食品中的使用有着严格的使用范围和添加量(如日落黄(SY)、过氧化氢(H2O2)和酪氨酸(Tyr)等),快速检测它们在食品中的添加量显得十分重要。电化学方法作为一种快速、简便和灵敏的分析检测方法,现在越来越多的被应用到食品分析检测领域中。中空介孔碳纳米球及其衍生物
<正>新课改背景下,小学数学课堂教学活动备受关注,课堂教学中的师生互动教学亦是如此。师生互动在小学教育过程中已经成为我国小学教育必不可少的教育方法,课堂上进行师生互动的教育方法能有效地促使学生掌握和理解知识,并且做到教学与实践的统一。教学的过程不仅能帮助学生学习知识,发散学习思维和数学思维能力,也能给数学教师带来成长,从而形成双向发展。然而,随着新课改的深入,小学数学教学中的师生互动有诸多方面的问
期刊