搜索到632篇“ 数据异构“的相关文章
一种基于数据异构的纵向联邦学习数据增强方法
本发明属于联邦学习领域,具体涉及一种基于数据异构的纵向联邦学习数据增强方法,包括各客户端在本地训练局部条件生成对抗网络,用于产生新的训练数据上传至中心服务器;中心服务器根据各客户端上传的训练数据处理得到全局模型,并将其下...
肖云鹏赵登科金勇唐飞王蓉韦世红王国胤
一种抵御数据异构的异步分层联邦学习方法及系统
本发明涉及一种抵御数据异构的异步分层联邦学习方法及系统,属于人工智能技术领域。该方法包括以下步骤:S1:构建物联网中的分层联邦学习框架;S2:构建物联网中抵御数据异构、系统异构和意外掉队的异步分层联邦学习算法,以及在不可...
祝志远鲁长星吴大鹏王汝言
音频模态数据异构联邦学习方法、系统、设备及介质
本发明公开了一种音频模态数据异构联邦学习方法及应用,该方法包括:选取多个客户端,将全局模型参数和全局知识发送至选中的客户端,使选中的客户端执行本地模型训练;接收并聚合选中的客户端上传的本地模型参数及本地知识;基于所述聚合...
郭梦雅陈兵胡峰
一种针对数据异构性的联邦宽度学习优化方法
本发明公开了一种针对数据异构性的联邦宽度学习优化方法,所述方法包括:获取每个客户端的参数更新矩阵;对每个客户端的参数更新矩阵进行降维处理;在完成降维处理后,计算各客户端的参数矩阵之间的余弦相似度;根据各客户端的参数矩阵之...
张伟文杨硕
数据异构参数确定方法、装置、设备、介质和程序产品
本申请涉及一种数据异构参数确定方法、装置、设备、介质和程序产品。所述方法包括:接收各参与方发送的第一本地模型;所述第一本地模型是所述参与方基于本地数据对协调方发送的初始全局模型进行训练得到的;根据各所述第一本地模型的相关...
黄聪李慧芳
面向数据异构的聚类联邦学习算法
2025年
联邦学习(FL)是一种在隐私保护和通信效率方面极具潜力的新型机器学习模型构建范式,然而现实物联网(IoT)场景中客户端节点数据之间会存在异构性,学习一个统一的全局模型会导致模型准确率下降。为了解决这一问题,提出一种基于特征分布的聚类联邦学习(CFLFD)算法。在该算法中,对每个客户端节点从模型提取的特征进行主成分分析(PCA)后所得到的结果进行聚类,以将具有相似数据分布的客户端节点聚类在一起相互协作,从而提高模型准确率。为验证算法的有效性,在3个数据集和4种基准算法上进行大量实验。实验结果表明,与FedProx相比,CFLFD算法在CIFAR10数据集和Office-Caltech10数据集上将模型准确率分别提升了1.12和3.76个百分点。
陈庆礼郭渊博方晨
关键词:聚类特征提取主成分分析
一种多层级关联数据异构数据同步方法
本发明公开了一种多层级关联数据异构数据同步方法,包括首先对包括但不限于Mysql、Pgsql的多种数据源的binlog数据进行全量数据同步,具体根据元数据管理和异构数据同步规则区分出同步的先后顺序;根据表的顺序分别查询数...
谢高峰
一种数据异构存储方法以及数据异构存储装置
本发明公开一种数据异构存储方法以及数据异构存储装置,涉及网络技术领域,数据异构存储方法包括以下步骤:(S1)接收不同异构数据信息输出的数据,提供数据异构交互和共享通道;(S2)将不同异构数据信息输出的数据通过分类算法标注...
丁英峰徐海鹏张华唐华
机理-数据异构信息融合的旋转机械数字孪生建模方法
本发明属于工程机械技术领域,公开了一种机理‑数据异构信息融合的旋转机械数字孪生建模方法,包括:基于物理实体建立几何模型,建立旋转机械机构的损伤耦合机理下的动力学白箱模型;物理空间实时采集多源动态数据;考虑关联性将物理空间...
张泽宇惠记庄耿麒张雅倩张浩
PFKD:综合考虑数据异构和模型异构的个性化联邦学习框架被引量:1
2024年
联邦学习是解决机器学习中数据共享和隐私保护两个关键难题的重要方法.然而,联邦学习本身也面临着数据异构和模型异构的挑战.现有研究往往只专注于解决其中一个方面的问题,忽视了两者之间的关联性.为此,本文提出了一个名为PFKD的框架,该框架通过知识蒸馏技术解决模型异构问题,通过个性化算法解决数据异构问题,以实现更具个性化的联邦学习.通过实验分析验证了所提出框架的有效性.实验结果显示,该框架能够突破模型的性能瓶颈,提高模型精度约1个百分点.此外,在调整适当的超参数后,该框架的性能得到进一步提升.
陈学斌任志强
关键词:数据异构

相关作者

赵雅倩
作品数:280被引量:23H指数:2
供职机构:浪潮电子信息产业股份有限公司
研究主题:存储介质 电子设备 介质 计算机 图像
李仁刚
作品数:320被引量:18H指数:2
供职机构:浪潮电子信息产业股份有限公司
研究主题:存储介质 电子设备 异构计算系统 内存 计算机
张新长
作品数:197被引量:1,352H指数:22
供职机构:湖南科技大学
研究主题:地理信息系统 GIS 城市规划 土地利用 矢量数据
郭泰圣
作品数:29被引量:173H指数:7
供职机构:中山大学地理科学与规划学院
研究主题:矢量数据 GIS AUTOCAD 地形图 地形图数据
张泽宇
作品数:93被引量:103H指数:6
供职机构:长安大学
研究主题:液力变矩器 装载机 闭锁式 功率匹配 滚刀