本发明涉及一种基于大数据的数据安全处理方法,所述方法包括:步骤S1:从终端获取大数据;步骤S2:进行大数据存储定位;步骤S3:对大数据进行透明过滤后存储在所定位的大数据节点中。本发明在集合的扩充中采用动静结合的选择过程;通过第三方固件统一管理,提高了过滤规则自身的安全性和调整的灵活性,可以随时根据对大数据节点的管理来动态的调整过滤规则,还设置有独立可插拔硬件的方式来设置透明过滤层;通过可插拔硬件在来保障终端设备的安全性。
📄 2019101792246
📂 G06F16_215
👤 黑龙江中医药大学
📅 2019-03-11
本发明公开了一种超高精度设备制造用激光智能检测系统及方法,涉及设备制造调控领域,其技术方案要点包括:数据库包括系统中相关信息的缓存和超高精度设备的参数信息,以及用户管理信息,并进行分布式存储和调用管理图像处理模块通过图像分割和去雾算法处理原始图像数据并获取处理后图像数据,坐标转换模块将激光坐标系中的坐标点转换为加工件坐标系,分析模块根据评估公式计算加工件上杂质颗粒的聚集和分布的评估指数,为判断模块的判定提供数据支持,判断模块根据判断结果生成不同的调控指令,调控指令包括对加工件进行清洗和加工件继续生产制造;实现超高精度设备在生产制造过程中加工件的清洗调整。
📄 2024104881187
📂 G06F16_21
👤 成都工业学院
📅 2024-04-23
本发明公开了一种档案电子信息数据恢复方法,涉及档案管理与数据恢复技术领域,包括以下步骤,获取原始档案数据,提取第一数据并按格式特征生成第二数据,第二数据包括层级标识及结构化元数据,基于结构化元数据生成数据对象的版本序列,按预设策略匹配第三数据,第一数据中未提取的加密数据块为第四数据,并进行解密,再按格式特征生成第五数据,若第一数据中存在未提取的非加密损坏数据块,则生成补充修复数据,根据层级标识对第一数据、第三数据、第五数据及修复数据进行整合,并重建目录与元数据关联,生成完整卷宗,通过构建结构化元数据版本序列,分级修复异构数据,融合区块链双重校验,形成三位一体体系,适用于档案恢复。
📄 2025111511367
📂 G06F16_21
👤 贵州蓝天创新科技有限公司
📅 2025-08-18
本发明公开了一种基于可视化分析图的UI数据处理方法及系统,涉及数据处理领域,该UI数据处理方法包括以下步骤:S1、基于Node的多进程集群构建分布式网关,读取本地数据库,并代理远程的数据服务;S2、搭建Hadoop集群,对本地数据库的数据进行可视化分析的人机交互的预处理操作,并得到图结构数据;S3、搭建分布式存储集群,利用文档型数据库对图结构数据进行优化查询、数据合并、数据排序及存储,并基于副本集对图结构数据进行存取;S4、基于MapReduce实现对图结构数据进行预处理。本发明使用了前后端分离的策略,提升可视化分析系统的展现层的多终端适配能力。
📄 2023112770552
📂 G06F16_215
👤 江苏春花秋月数字科技有限公司
📅 2023-10-07
已申报项目
本发明公开了一种建筑外墙保温与光伏一体化安全数据存储系统,涉及建筑用光伏分析技术领域;包括光伏数据采集模块、假设分析模块、流体预测模块、安全判断模块以及可视化模块;本发明通过获取建筑的外墙光伏数据信息,生成IV特性曲线对光伏组件进行性能分析,再对外墙光伏的传热过程进行假设模拟,使用有限体积法分析时间段数据得到光伏传热性能,根据光伏传热性能分析光伏板的流体对流情况,从而明确了流动形态下监测数据,质量,最后对建筑外墙光伏的安全影响信息进行分析,确定外墙光伏监测过程中的性能情况,对产生异常监测信号的光伏区域进行绑定,实现了快速确定外墙光伏组件的综合性能,提高了建筑外墙光伏一体化数据存储的准确性。
📄 2024100455706
📂 G06F16_215
👤 淮阴工学院
📅 2024-01-12
本发明提供了一种数据处理方法、装置及电子设备,所述方法包括:获取第一区域的第一点集,所述第一点集中包括多个数据点;判断所述第一点集中每个数据点的参数是否异常;若是,则将所述数据点作为目标点集中的数据点;若否,则将所述数据点作为第二点集中的数据点;按照预设抽稀算法对所述第二点集进行抽稀,得到第三点集;将所述第三点集中的数据点作为所述目标点集中的数据点。本发明实施例提供的一种数据处理方法、装置及电子设备,可以避免对数据点进行抽稀处理后重要数据丢失的问题。
📄 2019114209477
📂 G06F16_215
👤 北京蛙鸣华清环保科技有限公司
📅 2019-12-31
本申请提供了一种教学资源库管理系统及方法,可在自动生成目标专业的教学资源的资源元数据;确定多个元数据样本;提取每个元数据样本中所有资源信息的数字特征,通过云模型生成所述每个元数据样本的云滴样本,依据所述每个元数据样本的数字特征确定所述每个元数据样本对所述云滴样本的样本隶属度;确定各个资源信息在对应元数据样本中的波动趋势,根据所有波动趋势生成各个元数据样本中所有资源信息的分布模式;基于所有的样本隶属度和所有分布模式确定所述资源元数据与所述教学资源之间的匹配度,依据所述匹配度对目标专业的教学资源进行存储分配。采用本申请的方案,可对多源异构的元数据进行差异校准,以提高教学资源的存储效率。
📄 2025102898506
📂 G06F16_21
👤 佛山职业技术学院
📅 2025-03-12
本发明涉及一种数据采集方法和系统,方法包括:获取采集条件,并根据采集条件获取目标数据,其中,采集条件包括采集对象和采集属性;从知识库获取对应目标数据的样本数据;根据目标数据和样本数据判断目标数据是否可信;若是,则采集目标数据存入目标数据库或大数据存储库。如此,可以根据知识库中的样本数据对目标数据进行正确性验证,在判定目标数据可信时才进行采集,避免采集到错误数据,提高数据采集的正确率。
📄 2016101647126
📂 G06F16_21
👤 华南师范大学
📅 2016-03-21
本发明公开了一种针对软件变更日志生成方法的自动化质量保证框架。包括如下步骤:基于软件历史变更数据,生成diffh的单词wd和msgref的单词wm的单词向量和基于协同过滤算法,计算单词wd和wm之间的关联性Rel(wd,wm);构建单词wd的单词映射表基于已构建的单词映射表,分别计算两个质量分数Precisioni和Recalli;基于词频‑逆文档频率(TF‑IDF),生成变更差异向量di;计算待测软件变更日志和历史软件变更之间的相似程度选择与待测软件变更Ci相似度最高的前n个历史软件变更至计算相关性分数RetScorei;设置阈值Prect、Rect和Rett,对待测软件变更Ci的生成日志的语义相关性进行预测;基于预测结果对软件变更日志进行过滤或者保留。
📄 2020114261089
📂 G06F16_21
👤 重庆大学
📅 2020-12-09
本发明公开了一种数据可信度优化方法、存储介质和设备,所述方法包括以下步骤:计算每个数据提供者提供的数据与真相之间的误差,对所述误差的方差进行区间估计,获得所述方差的置信区间,根据所述置信区间的上限,获得数据提供者的可信度;所述误差为数据提供者提供的数据与真相之间的差值;实时获取某时刻,数据提供者对于目标对象集提供的实时数据集,并根据所述数据提供者的可信度,计算出所述目标对象的聚合真相;计算该时刻,数据提供者提供的实时数据与聚合真相之间的实时误差,并根据所述实时误差计算出数据提供者的实时可信度,将所述数据提供者的可信度更新为实时可信度,用于下一时刻的真相聚合。本发明可对动态的长尾数据进行准确并且高效地聚合。
📄 2020111715427
📂 G06F16_215
👤 南京邮电大学
📅 2020-10-28
本申请的目的是提供一种文本结构化的方法、设备及系统,本申请通过确定非结构化文本所需的至少一个信息提取器;对所述至少一个信息提取器进行初始化并设定每一信息提取器对应的配置文件名称以及优先级,根据所述配置文件名称及优先级确定运行顺序;按照所述运行顺序逐一运行所述至少一个信息提取器,得到每一信息提取器的提取结果;将所述每一信息提取器的提取结果按照预设格式进行格式化,得到结构化文本。从而可以为深度学习技术在文本结构化过程中的使用提供便利。
📄 2020114888729
📂 G06F16_21
👤 上海芯翌智能科技有限公司
📅 2020-12-16
本发明提供的基于ERP企业管理系统的数据处理方法、设备及介质,由于该偏置数组反映了预置噪声属性的差异化特征,该基础噪声属性数组表示预置噪声属性的噪声属性向量,这样能够通过该第一噪声优化评分确定该触发数据优化机制的数字化企业运行日志与各预置噪声属性的差异化特征之间的噪声优化评分,进而将满足预设条件的第一噪声优化评分所关联的噪声属性作为该触发数据优化机制的数字化企业运行日志的EPR噪声优化策略。在一些示例下,通过考虑反映预置噪声属性的差异化特征,对分析得到的第一ERP管理流程噪声进行优化策略定制,提高了触发数据优化机制的数字化企业运行日志的噪声优化策略确定的准确性和可信度。
📄 2022104545219
📂 G06F16_215
👤 江苏益柏锐信息科技有限公司
📅 2022-04-28