基于联邦学习的跨源数据错误检测方法

下载全文  

随着海量数据的涌现和不断积累,数据治理成为提高数据质量、最大化数据价值的重要手段.其中,数据错误检测是提高数据质量的关键步骤,近年来引起了学术界及工业界的广泛关注.目前,绝大多数错误检测方法只适用于单数据源场景.然而在现实场景中,数据往往不集中存储与管理.不同来源且高度相关的数据… …   相似文献

陈璐  郭宇翔  葛丛丛  郑白桦  高云君 《软件学报》2023,34(3):1126-1147

面向大数据分析的分布式矩阵计算系统研究进展

下载全文  

在大数据治理应用中,数据分析是必不可少的一环,且具有耗时长、计算资源需求大的特点,因此,优化其执行效率至关重要.早期由于数据规模不大,数据分析师可以利用传统的矩阵计算工具执行分析算法,然而随着数据量的爆炸式增长,诸如MATLAB等传统工具已无法满足应用需求的执行效率,进而涌现出了… …   相似文献

陈梓浩  徐辰  钱卫宁  周傲英 《软件学报》2023,34(3):1236-1258

面向列语义识别的共现属性交互模型构建与优化

下载全文  

政务数据治理正在经历从“物理数据汇聚”到“逻辑语义汇通”的新阶段.逻辑语义汇通是指针对各孤岛政务系统因长期“自治”而形成的元数据缺失、元数据同名不同义以及同义不同名等问题,在不重建或修改原系统代码以及不物理汇聚各政务数据的前提下,通过技术手段,统一各孤岛信息系统元数据的语义表达,… …   相似文献

高珊  袁宛竹  卢卫  王兰  张静  杜小勇 《软件学报》2023,34(3):1010-1026

基于宽容训练和隐私保护的快速监控视频检索模型

下载全文  

监控视频关键帧检索和属性查找在交通、安防、教育等领域具有众多应用场景,应用深度学习模型处理海量视频数据在一定程度上缓解了人力消耗,但是存在隐私泄露、计算资源消耗大、时间长等特点.基于上述场景,提出了一个面向大规模监控视频的安全、快速的视频检索模型.具体地,根据云端算力大、监控摄像… …   相似文献

覃浩  王平辉  张若非  覃遵颖 《软件学报》2023,34(3):1292-1309

数据定价与交易研究综述

下载全文  

在大数据时代,随着信息技术的发展,各行各业都在收集海量数据.数据是数字经济的基础,蕴含有巨大价值.但是由于缺乏高效可行的共享机制,数据拥有方彼此之间缺乏沟通,形成了一个个数据孤岛.这不利于大数据产业的健康发展.因此,给数据分配一个合适的价格,设计高效的数据交易市场平台成为消除数据… …   相似文献

江东  袁野  张小伟  王国仁 《软件学报》2023,34(3):1396-1424

基于区块链的物联网认证机制综述

下载全文  

随着物联网(Internet of Things, IoT)技术的高速发展,各类智能设备数量激增,身份认证成为保障IoT安全的首要需求.区块链作为一种分布式账本技术,提供了去信任的协作环境和安全的数据管理平台,使用区块链技术驱动IoT认证成为学术界和工业界关注的热点.基于云计算和… …   相似文献

程冠杰  邓水光  温盈盈  严学强  赵明宇 《软件学报》2023,34(3):1470-1490

兼顾行列的时序数据质量规则发现

下载全文  

智能装置设备产生的时序数据增长迅速,存在严重的数据质量问题.劣质时序数据质量管理和数据质量提升技术需求日益迫切.时序数据的有序时窗、行列关联等特点,为时序数据质量语义表达提出了挑战.提出了一种同时考虑时序数据在行与列上的数据依赖信息的数据质量规则,即时序否定约束TDC.研究了TD… …   相似文献

丁小欧  李映泽  王晨  王宏志  李昊轩 《软件学报》2023,34(3):1065-1086

面向数据联邦的安全多方θ-连接算法

下载全文  

近年来,多个国家地区出台了一系列数据安全相关的法律,例如欧盟的《通用数据保护条例》等.这些相关法律法规的出台,加剧了各企业机构等多方之间数据共享难的数据孤岛问题.数据联邦(data federation)正是解决该问题的可能出路.数据联邦是指多个数据拥有方在不泄露各自原始数据的前… …   相似文献

张媛媛  李书缘  史烨轩  周南  徐毅  许可 《软件学报》2023,34(3):1109-1125

基于脑启发的类增量学习

  

现有的类增量学习方法多是采用存储数据或者扩展网络结构,但受内存资源限制不能有效缓解灾难性遗忘问题。针对这一问题,创新地提出基于脑启发生成式重放方法。首先,通过VAE-ACGAN模拟记忆自组织系统,提高生成伪样本的质量;再引入共享参数模块和私有参数模块,保护已提取的特征;最后,针对… …   相似文献

王伟  张志莹  郭杰龙  兰海  俞辉  魏宪 《计算机应用研究》2023,40(3):671-675+688

基于区域中心签名的点云局部特征描述算法

  

针对目前点云局部特征描述子存在对噪声、点密度变化等因素鲁棒性差的问题,提出了一种基于区域中心签名的点云局部特征描述新算法。以查询点为中心构建一个球形包围盒,沿径向方向均匀划分为五个主区域,再沿不同的方位角、仰角方向将主区域划分为若干体积沿径向逐渐增大的子区域;采用顶点坐标、顶点数… …   相似文献

吕英豪  唐文斌 《计算机应用研究》2023,40(3):949-953

基于量子粒子群优化的多波束卫星联合资源分配算法

  

当使用元启发式算法求解多波束卫星联合资源分配问题时,时延约束和容量约束会导致计算复杂度增大,且算法难以收敛。对此,通过在目标函数中引入惩罚机制,在无效解的目标函数值加入了惩罚值,使得算法的优化解自适应地满足这两个约束。在此基础上,提出了基于量子粒子群优化的联合资源分配算法。仿真结… …   相似文献

高威  王磊  瞿连政 《计算机应用研究》2023,40(3):868-873+879

基于分簇和Stackelberg博弈的D2D资源分配策略

  

当前,车辆密集通信场景下存在通信资源利用率低、DUE(D2D user)用户通信质量差等问题。针对上述问题,提出了一种基于分簇和Stackelberg博弈的D2D(device to device)资源分配策略,以解决DUE用户功率分配、信道匹配问题。首先,基于每个信道内DUE用… …   相似文献

刘会衡  肖瑶  程晓红  张军 《计算机应用研究》2023,40(3):880-884+889

基于单UWB融合里程计的多机器人相对定位方法

  

针对卫星信号受阻,无预设基础设施(定位基站、地标等)环境下多机器人间的相对定位问题,提出了一种基于单个超宽带(ultra-wideband, UWB)融合里程计的多机器人相对定位方法。该方法利用滑动窗口截取历史时刻的多组机器人间测距信息与里程计预测的机器人位姿,构建非线性最小二乘… …   相似文献

邓忠元  刘冉  曹志强  肖宇峰 《计算机应用研究》2023,40(3):839-844

考虑公众风险的多目标医疗废物选址路径问题及樽海鞘算法求解

  

针对医疗废物处理中心的选址路径问题,在考虑公众风险的情况下,构建多目标优化模型。首先,分别从政府、公众和处理中心承包商角度出发,构建了以运营成本、风险成本以及运输成本最小化的多目标选址路径模型;其次,针对所构建模型的特点,设计了一种改进的多目标樽海鞘算法对模型进行求解;最后,以四… …   相似文献

鲍秀麟 《计算机应用研究》2023,40(3):710-716

分布式账本技术的发展历程研究综述

  

物联网、人工智能、大数据等众多领域缺乏量身定制的安全隐私技术保障,基于分布式账本技术(DLT)的系统作为一种分散的数据管理方法可以很好地满足其安全需求,因此基于分布式账本技术的系统层出不穷。为了帮助后续的研究者更全面快速地了解分布式账本技术,梳理了近年来基于分布式账本的研究成果,… …   相似文献

王嘉瑶  王婷  袁文亮  朱俊武 《计算机应用研究》2023,40(3):641-648

鲁棒结构正则化非负矩阵分解

  

现有的非负矩阵分解方法既忽略数据的非局部结构,又难以有效应对噪声和野值点。为了解决上述问题,提出一种新的用于聚类的鲁棒结构正则化非负矩阵分解算法。所提出的算法分别构建一个近邻图和一个最大熵图描述数据的局部结构和非局部结构,并使用L_2,1范数代价函数尝试解决噪声问题,从而学习到鲁棒具有判别力的表征。给出一个最优的迭代算法求解两个非负因子,该优化算法的收敛性已被理论和实验证明。在七个图像数据集上的聚类实验结果表明,所提出的算法在无噪声和有噪声情况下聚类均优于其他主流方法。… …   相似文献

董文婷  尹学松  余节约  王毅刚 《计算机应用研究》2023,40(3):794-799

融合信息反馈共享与蜉蝣搜索机制的樽海鞘群算法

  

针对樽海鞘群算法(SSA)收敛速度慢和易陷入局部最优的问题,提出了一种融合信息反馈共享与蜉蝣搜索机制的改进樽海鞘群算法。使用Piecewise映射的方法进行种群初始化,使初始樽海鞘种群更均匀的覆盖可行域空间;采用信息共享机制,提出辅助领导者策略,改进领导者位置更新公式,增强全局搜… …   相似文献

李克文  耿文亮  张敏  王晓晖  柯翠虹 《计算机应用研究》2023,40(3):696-703+724

基于频域叠加和深度学习的频谱信号识别

  

针对频谱监测领域频带较宽、接收机采样步进受限而造成的宽带频谱信号难以识别的问题,提出了一种频域叠加预处理和目标检测相结合的频谱信号识别方法。该方法利用频域叠加对频谱数据进行多帧叠加来突出频谱中的弱信号,将叠加处理后的频谱图像送入改进的目标检测网络中进行信号类型的识别。经过实验证明… …   相似文献

周宇航  侯进  李嘉新  李惠森 《计算机应用研究》2023,40(3):874-879

基于节点相似性的图注意力网络表示学习模型

  

图注意力网络(GAT)通过注意力机制聚合节点的邻居信息以提取节点的结构特征,然而并没有考虑网络中潜在的节点相似性特征。针对以上问题,提出了一种考虑网络中相似节点的网络表示学习方法NSGAN。首先,在节点层面上,通过图注意力机制分别学习相似网络和原始网络的结构特征;其次,在图层面上… …   相似文献

刘渊  赵紫娟  杨凯 《计算机应用研究》2023,40(3):822-827

结合增益率与堆叠自编码器的并行随机森林算法

  

针对大数据环境下随机森林算法存在冗余与不相关特征过多、特征子空间信息含量不足以及并行化效率低等问题,提出了结合增益率与堆叠自编码器的并行随机森林算法PRFGRSAE(parallel random forest algorithm combining gain ratio and… …   相似文献

刘卫明  陈伟达  毛伊敏  陈志刚 《计算机应用研究》2023,40(3):750-759+765