本发明涉及一种基于大数据的数据安全处理方法,所述方法包括:步骤S1:从终端获取大数据;步骤S2:进行大数据存储定位;步骤S3:对大数据进行透明过滤后存储在所定位的大数据节点中。本发明在集合的扩充中采用动静结合的选择过程;通过第三方固件统一管理,提高了过滤规则自身的安全性和调整的灵活性,可以随时根据对大数据节点的管理来动态的调整过滤规则,还设置有独立可插拔硬件的方式来设置透明过滤层;通过可插拔硬件在来保障终端设备的安全性。
📄 2019101792246
📂 G06F16_215
👤 黑龙江中医药大学
📅 2019-03-11
本发明公开了一种基于可视化分析图的UI数据处理方法及系统,涉及数据处理领域,该UI数据处理方法包括以下步骤:S1、基于Node的多进程集群构建分布式网关,读取本地数据库,并代理远程的数据服务;S2、搭建Hadoop集群,对本地数据库的数据进行可视化分析的人机交互的预处理操作,并得到图结构数据;S3、搭建分布式存储集群,利用文档型数据库对图结构数据进行优化查询、数据合并、数据排序及存储,并基于副本集对图结构数据进行存取;S4、基于MapReduce实现对图结构数据进行预处理。本发明使用了前后端分离的策略,提升可视化分析系统的展现层的多终端适配能力。
📄 2023112770552
📂 G06F16_215
👤 江苏春花秋月数字科技有限公司
📅 2023-10-07
已申报项目
本发明公开了一种建筑外墙保温与光伏一体化安全数据存储系统,涉及建筑用光伏分析技术领域;包括光伏数据采集模块、假设分析模块、流体预测模块、安全判断模块以及可视化模块;本发明通过获取建筑的外墙光伏数据信息,生成IV特性曲线对光伏组件进行性能分析,再对外墙光伏的传热过程进行假设模拟,使用有限体积法分析时间段数据得到光伏传热性能,根据光伏传热性能分析光伏板的流体对流情况,从而明确了流动形态下监测数据,质量,最后对建筑外墙光伏的安全影响信息进行分析,确定外墙光伏监测过程中的性能情况,对产生异常监测信号的光伏区域进行绑定,实现了快速确定外墙光伏组件的综合性能,提高了建筑外墙光伏一体化数据存储的准确性。
📄 2024100455706
📂 G06F16_215
👤 淮阴工学院
📅 2024-01-12
本发明提供了一种数据处理方法、装置及电子设备,所述方法包括:获取第一区域的第一点集,所述第一点集中包括多个数据点;判断所述第一点集中每个数据点的参数是否异常;若是,则将所述数据点作为目标点集中的数据点;若否,则将所述数据点作为第二点集中的数据点;按照预设抽稀算法对所述第二点集进行抽稀,得到第三点集;将所述第三点集中的数据点作为所述目标点集中的数据点。本发明实施例提供的一种数据处理方法、装置及电子设备,可以避免对数据点进行抽稀处理后重要数据丢失的问题。
📄 2019114209477
📂 G06F16_215
👤 北京蛙鸣华清环保科技有限公司
📅 2019-12-31
本发明公开了一种数据可信度优化方法、存储介质和设备,所述方法包括以下步骤:计算每个数据提供者提供的数据与真相之间的误差,对所述误差的方差进行区间估计,获得所述方差的置信区间,根据所述置信区间的上限,获得数据提供者的可信度;所述误差为数据提供者提供的数据与真相之间的差值;实时获取某时刻,数据提供者对于目标对象集提供的实时数据集,并根据所述数据提供者的可信度,计算出所述目标对象的聚合真相;计算该时刻,数据提供者提供的实时数据与聚合真相之间的实时误差,并根据所述实时误差计算出数据提供者的实时可信度,将所述数据提供者的可信度更新为实时可信度,用于下一时刻的真相聚合。本发明可对动态的长尾数据进行准确并且高效地聚合。
📄 2020111715427
📂 G06F16_215
👤 南京邮电大学
📅 2020-10-28
本发明提供的基于ERP企业管理系统的数据处理方法、设备及介质,由于该偏置数组反映了预置噪声属性的差异化特征,该基础噪声属性数组表示预置噪声属性的噪声属性向量,这样能够通过该第一噪声优化评分确定该触发数据优化机制的数字化企业运行日志与各预置噪声属性的差异化特征之间的噪声优化评分,进而将满足预设条件的第一噪声优化评分所关联的噪声属性作为该触发数据优化机制的数字化企业运行日志的EPR噪声优化策略。在一些示例下,通过考虑反映预置噪声属性的差异化特征,对分析得到的第一ERP管理流程噪声进行优化策略定制,提高了触发数据优化机制的数字化企业运行日志的噪声优化策略确定的准确性和可信度。
📄 2022104545219
📂 G06F16_215
👤 江苏益柏锐信息科技有限公司
📅 2022-04-28
本发明公开了基于设备电气状态评估的数据质量监控存储系统,涉及数据质量监控存储技术领域。该基于设备电气状态评估的数据质量监控存储系统,包括:环境状态评估模块、柜体状态干扰评估模块、柜体缺陷评估模块和数据存储模块。本发明通过进行环境状态评估并判断是否进行环境干扰调整,接着进行柜体状态干扰评估并判断是否进行柜体状态干扰调整,然后进行柜体缺陷评估获取柜体发热缺陷评估系数并判断是否进行缺陷优化,最后存储获取的合格柜体数据,达到了提升高压开关柜的电气状态数据采集与存储质量监控准确性的效果,解决了现有技术中存在高压开关柜的电气状态数据采集与存储质量监控准确性低的问题。
📄 2025102639573
📂 G06F16_215
👤 闽西职业技术学院
📅 2025-03-06
本申请实施例提供了一种客流数据的补偿方法、装置、设备及存储介质,涉及数据处理技术领域,以解决现有技术中客流数据丢失的问题。具体包括:确定客流设备组在第一时间区间内存在客流数据缺失;客流设备组包括用于采集客流数据的一个或多个设备;确定第一时间区间的时间属性,时间属性包括时间类别和时间长度;根据第一时间区间的时间属性,获取客流设备组在第二时间区间内的客流数据,第二时间区间与第一时间区间的时间属性相同,且第二时间区间与第一时间区间之间的时间间隔小于第一预设阈值;至少基于客流设备组在第二时间区间内的客流数据,预测客流设备组在第一时间区间内缺失的客流数据。
📄 2022103320190
📂 G06F16_215
👤 杭州海康威视系统技术有限公司
📅 2022-03-30
一种医院后勤系统的健康程度评估方法,属于数据挖掘领域,通过对医院后勤数据的分析以及现场实际情况的调研,提出了医院后勤运送任务执行的合理度、医院后勤运送任务分配的合理度、医院后勤运送任务的饱和度三大指标来对医院后勤系统的健康程度进行评估。基于医院后勤运送数据的评估方法较之传统的评估手段能够即时准确掌握后勤系统中存在的问题,分别从任务数据的合理性、任务执行时间维度和员工的劳动强度三个方面出发,利用实际后勤数据归纳出的指标来评估医院后勤系统运行的健康程度。摆脱以往“人为”管理的因素,通过科学的数据分析去解决问题,投入的人力物力更少,客观性更高,从而更具备可行性和实际意义。
📄 2018104719515
📂 G06F16_215
👤 浙江工业大学
📅 2018-05-17
本发明属于涉及热能管理和供热系统数据处理领域,公开了一种基于双通道生成对抗网络的热计量数据填补方法,通过双通道生成对抗网络的设计,能够同时对热计量数据和辅助数据进行多维度建模,显著提高缺失数据填补的准确度;通过结合GRU的生成器进行数据生成,可以更好的捕捉热计量数据中时间维度的信息,以达到更好的生成效果。利用外部天气信息和日期信息作为辅助输入,结合后直接输入到生成器中,这种方式更适合捕捉复杂的时间依赖性,有助于生成符合时间逻辑的填补数据。
📄 2024115684125
📂 G06F16_215
👤 浙江工业大学
📅 2024-11-05
本发明提供一种基于自适应遗传算法的关联规则挖掘方法及系统,其中,方法包括:步骤S1:获取待挖掘数据,对所述待挖掘数据进行预处理;步骤S2:基于Apriori算法,对预处理结果进行处理,获得频繁项集;步骤S3:基于自适应遗传算法,对所述频繁项集进行处理,获得关联规则集;步骤S4:基于预设的筛选规则,从所述关联规则集中筛选出关联规则。本发明的基于自适应遗传算法的关联规则挖掘方法及系统,解决现有的关联规则算法在处理数据时扫描数据库次数多、产生较多的候选项集、产生过多无用的规则的难题和遗传算法容易陷入局部最优问题,缩短了运行时间,降低了开销成本。
📄 202111604792X
📂 G06F16_215
👤 盐城工学院; 盐城工学院技术转移中心有限公司
📅 2021-12-25
本发明涉及的是一种基于本体的关联数据质量评估方法,具体为:一、关联数据质量评估数学模型定义;二、进行LDQAM数学模型向本体模型的映射;三、约束规则与推理规则制定,在使用本体进行关联数据质量评估时,利用本体的约束规则和推理规则来进行数据筛选,从而进一步进行评估;四、关联书质量评估原型系统搭建,基于上述规则进行评估系统构建,为数据评估进行服务;五、进行数据评估服务,利用构建的原型系统进行数据评估,并验证系统的有效性。本发明结合关联数据以及数据质量技术,用于发现目前网络上已发布关联数据中有关完整性、语义有效性、语义一致性、语义准确性、可用性等维度方面的缺陷,并给出相应解决方案。
📄 2018110041877
📂 G06F16_215
👤 黑龙江芯每达电子科技开发有限公司
📅 2018-08-30