基于HBase的海量GIS数据分布式处理实践

上传:lylaslylas 浏览: 3 推荐: 0 文件:PDF 大小:1.81MB 上传时间:2021-04-19 08:30:39 版权申诉
设计了一种基于分布式数据库HBase的GIS数据管理系统。系统优化了栅格数据的生成和存储过程,将海量栅格数据直接写入HBase存储、索引。同时,针对矢量空间数据的存储、索引与检索,提出了一种新的rowkey设计,既考虑经纬度,又考虑空间数据类型和属性,使得在按空间位置检索矢量地理信息时,能通过HBase的rowkey迅速定位需要返回的数据。在HBase的集群环境上用真实GIS数据对上述方法进行了验证,结果表明,提出的系统具有较高的海量数据存储和检索性能,实现了海量地理信息数据的高效存储和实时高速检索。
上传资源
用户评论
相关推荐
基于HBase海量数据查询
本文当是一个基于HBase的海量数据的实实时查询系统的原理分析。详细的介绍了大数据查询的原理。
CAJ
0B
2019-05-06 22:41
hbase海量数据入库方式
hbase入库的几种方式及海量数据的处理
DOC
0B
2019-03-07 00:53
论文研究海量铁路机车GIS定位数据分布式处理技术.pdf
海量铁路机车GIS定位数据分布式处理技术,周小平,刘祥磊,针对铁路机车海量GIS信息数据及其对铁路调度几种控制系统带来的数据存取问题,采用HadoopHDFS进行海量GIS数据存取,提出HBase的数
PDF
0B
2019-09-28 21:21
大型GIS海量数据分布式组织与管理.pdf
Large-scale GIS massive data distributed organization and management.pdf
PDF
0B
2019-06-26 04:16
论文研究基于分布式海量数据处理架构研究.pdf
基于分布式的海量数据处理架构研究,马学志,袁玉宇,本文主要研究的是基于分布式海量数据处理的架构设计,为了解决目前流行的社会性网络服务,以及一些大规模访问量的新闻,服务性网
PDF
387KB
2020-07-17 06:03
hbase海量数据全量导入方法
hbase海量数据的全量导入方法,大数据导入。
DOC
0B
2019-09-21 15:30
基于hadoop海量遥感数据处理
海量遥感数据在hadoop平台的处理技术
PDF
0B
2019-05-13 18:22
基于Hadoop海量日志数据处理
Hadoop-based massive log data processing
PDF
0B
2019-06-26 19:14
HBase存储海量图片
本文档详细的描述了如何采用HBase存储海量图片,以及如何将大批量的小文件写成sequenceFile文件格式。
DOC
0B
2019-05-20 00:09
基于Hbase海量视频存储简单模拟
以hadoop、hbase为基础,hdfs存储文件,hbase存储相应索引,使用分词技术,实现视频的存储及索引,这是一个简单的web项目,欢迎交流学习:770838433
ZIP
0B
2019-04-29 21:23
data mining类相关课程海量数据分布式处理
这些资料是我花了几百买的七*月*算法的课程,里面带的课件以及随堂代码,为了csdn的下载积分我也是拼了,这个是一系列课程中的一部分,总起来的课程会超过220M无法上传,需要的朋友们需要一部分一部分下载
RAR
5.39MB
2020-12-25 13:49
论文研究基于数据网格分布式处理海量数据存储及管理.pdf
基于数据网格的分布式处理后海量数据的存储及管理,刘庆慧,,研究基于数据网格的分布式处理后海量数据的存储及查询问题。首先,根据软件不同组件的功能以及对于数据的要求,将海量数据进行分
PDF
146KB
2020-07-17 01:21
海量数据处理
海量数据处理 1.应尽量避免在where子句中对字段进行null值判断,否则将导致引擎放弃使用索引而进行全表扫描;2.应尽量避免在where子句中使用!=或操作符,否则将引擎放弃使用索引而进行全表扫描
TXT
0B
2019-04-17 14:17
基于SparkSQL海量数据仓库设计与实践
基于SparkSQL的海量数据仓库设计与实践
PDF
0B
2019-04-30 18:45
论文研究基于HBase网络社区海量数据存储优化研究.pdf
基于HBase的网络社区海量数据存储优化研究,吴旭,郭建,基于HBase自动根据Rowkey排序表中数据的特性,在组织网络社区海量数据的存储结构时添加了时间戳以便按照时间段对海量数据进行查询,H
PDF
393KB
2020-07-21 04:14