发明专利 已授权

一种基于集群环境的空气质量监测大数据分区存储方法

📄 申请号:CN201911053354.1 📄 发布日:2025/11/16

著录项目信息

申请日
2019-10-31
公开号
CN110825744B
公开日
2023-06-20
申请人
武汉工程大学
法律状态
已下证
专利类型
发明
主分类号
IPC 分类号

技术画像

应用场景

空气质量监测, 环境监测, 智慧环保, 大数据存储与管理, 数据中心

摘要

本发明公开了一种基于集群环境的空气质量监测大数据分区存储方法,该方法包括以下步骤:S1设计省级环境监测中心站SQL Server数据库用于记录每个自动化监测站的小时均值的数据表;S2为每个自动化监测站数据表添加CHECK约束;S3根据多维度的统计需求,提取数据表的相应字段分量作为新的分区维度,然后使用UNION ALL操作符,将所有的监测站点数据表构建v_All_Samples分区视图;S4配置能用于Hadoop、Spark集群的Eclipse开发环境,生成SparkSesion对话实例sparkHBAir,以jdbc的方式连接SQL Server数据库服务器,将v_All_Samples读取到Spark集群中的hbairData数据集中;S5对hbairData数据集进行分区,获得对hbairData数据集进行多维度、分层次的分区存储。本发明方法对比传统的关系数据库分区视图技术,在大规模数据的操作方面有明显的效率优势。
权利要求书 (12项) 说明书 附图

……

……

图1
图2
图3

法律状态时间线

相似专利推荐 AI 驱动 · 同领域

暂无同领域相似专利推荐
议价
不含过户费

📋 交易方式: 委托待转让 📌 交易状态: 在售 👁️ 浏览次数:110 ❤️ 收藏人数:93 📋 项目申报: 未申报

资金托管 权属尽调 包过户
🏢 淄博智来知识产权服务有限公司
✓ 企业认证✓ 手机绑定历史成交 0件好评率 98.5%

📊 出价记录 (3条)
王**¥-10万
李** 企业¥-8万
陈**¥-3万
查看全部出价