首页 | 本学科首页   官方微博 | 高级检索  
相似文献
 共查询到18条相似文献,搜索用时 171 毫秒
1.
并行计算技术可以大幅度提高数据处理效率,快速响应用户需求。随着地理空间数据量增大、复杂性增加、时效性增强,采用并行计算技术和处理架构来进行地理空间信息大数据的处理是必由之路。本文研究了各种高性能计算以及互联网所采用的并行计算技术,分析了地理空间数据的特点和并行处理的难点,提出了GIS对并行计算的支持技术路线,探讨了云计算环境中部署并行系统的方法和策略,实现了SMPP并行架构,并基于该系统对并行处理的效能进行了研究和分析。最后,展望了并行GIS技术发展的前景和演进路线。  相似文献   

2.
针对全球海量地理信息数据成果数据量大、数据类型丰富、质量检查内容多的特点,本文将分布式并行计算技术、多线程技术应用到地理信息数据质量控制体系中,基于MapReduce框架实现了多源多时相海量数据并行质量控制,把算法结构由一个周期执行一个操作改造为一个周期执行多个操作的并行处理,从根本上解决重复操作多、计算慢的质量检查难题。选取核心矢量要素、DOM成果、DEM成果作为典型数据案例开展效率对比试验。试验结果表明,该技术方案的处理效率比传统技术方案提高2~3倍,有效地压缩了任务执行时间,节约了任务执行成本,实现了对海量地理信息数据的快速质量控制,保障了全球地理信息数据的成果质量。  相似文献   

3.
基于矢量地理空间数据自身的特点,运用离散傅立叶变换技术,提出了一种基于离散傅立叶变换的矢量地理空间数据数字水印算法。首先根据矢量地理空间数据的顶点序列构造复数序列,然后对该复数序列做离散傅立叶变换,将水印信息转换为符合N(0,1)分布的伪随机水印序列嵌入到变换后的幅度中,再进行离散傅立叶逆变换得到含水印信息的矢量地理空间数据。提取水印时,通过比较嵌入水印的数据与原始数据之间的差异提取出原始水印信息。实验分析表明,该算法在抗矢量地理空间数据处理中常见的删点、数据格式转换、平移、旋转等方面具有较好的效果。  相似文献   

4.
针对海量空间数据分布式存储中存在的不顾及空间邻近性、分布不均和数据倾斜的问题,基于MapReduce并行编程模型,对Hilbert空间曲线层次分解的思想和节点容量感知的方法进行了研究,提出了一种层次分解的空间数据并行划分策略,并通过临界值判定实现空间数据的均衡存储。最后通过实例分析说明该方法可以在保证空间数据邻近特性的同时,解决海量空间数据分布式存储不均和数据倾斜的问题。  相似文献   

5.
面向服务的地理信息公共平台关键技术研究   总被引:1,自引:0,他引:1  
王艳军  邵振峰 《测绘科学》2012,37(3):160-162
地理信息公共平台是数字城市地理空间框架建设的重要内容。基于面向服务的体系架构,本文设计和研究了地理信息公共平台应用的总体模型。空间信息目录服务为分布式地理资源共享集成提供索引,数据在线维护更新和网络空间分析服务实现了多源多专题空间数据的分布式互操作机制。实验采用开放松耦合接口跨部门共建应用模式,在数字城市地理空间框架建设中实践验证本文关键技术具有应用价值。  相似文献   

6.
Apache Spark分布式计算框架可用于空间大数据的管理与计算,为实现云GIS提供基础平台。针对Apache Spark的数据组织与计算模型,结合Apache HBase分布式数据库,从分布式GIS内核的理念出发,设计并实现了分布式空间数据存储结构与对象接口,并基于某国产GIS平台软件内核进行了实现。针对点、线、面数据的存储与查询,与传统空间数据库系统PostGIS进行了一系列对比实验,验证了提出的分布式空间数据存储架构的可行性与高效性。  相似文献   

7.
基于面向服务的体系架构,设计地理空间信息共享框架的逻辑模型,研究了多源多尺度多专题空间数据的分布式共享机制;基于该共享机制,本文重点研究了地理要素的在线更新服务,提出在线更新中基于空间方向索引的数据压缩策略,并实现了具体压缩算法,采用传统空间数据更新方法验证了本文方法的有效性。  相似文献   

8.
针对时空数据存储与查询问题,传统方法存在硬件成本高,存储效率低等缺点。通过对MapReduce模型和Hadoop框架等云计算核心技术的分析和研究,提出了一种基于Hadoop的时空数据存储模型,并在此模型的基础上,设计了基于MapReduce的时空数据查询并行化框架。该框架通过对时空数据的并行操作,使其适用于海量时空数据的存储与管理。  相似文献   

9.
地理信息服务主要解决传统的地理信息系统所访问的地理信息资源共享问题。提出了基于网格的地理信息服务技术体系,建立了基于网格地理信息服务概念框架,以及基于网格地理空间信息服务平台的层次结构。探讨了地理空间数据网络传输保密技术、多源地理空间数据无缝集成技术、地理空间信息多级格网搜索技术、地理空间数据的无损压缩技术和地理空间信息服务规范5个方面的地理信息服务关键技术。  相似文献   

10.
付仲良  胡玉龙  翁宝凤  彭瑞 《测绘学报》2016,45(11):1342-1351
为了解决基于"键-值"模型的云存储环境仅支持简单的关键字查询,不支持多维空间查询的问题,提出了一种新的分布式空间索引方法——M-Quadtree索引。在索引构建过程中,设计了一种基于改进四叉树的空间数据划分方法,该方法规定了叶节点区域的最小数据量,通过四叉树叶节点的再合并,解决了划分后各子区域间存储量不平衡的问题,并且满足了MapReduce并行化要求。给出了MapReduce框架下M-Quadtree索引的快速构建、查询与更新算法,并在搭建的Hadoop平台进行了关键参数对索引效率的影响以及不同规模数据下索引的创建、查询和更新试验。与现有分布式空间索引的对比试验及分析结果表明,M-Quadtree索引在数据存储量负载均衡、算法并行化和空间查询效率等方面表现得更好。  相似文献   

11.
针对GNSS大网在海量数据存储和解算方面面临的挑战,设计了从基础设施、数据管理、计算和服务到应用的GNSS分布式存储与解算体系结构;基于HDFS改进了GNSS数据存储目录结构;基于HBase设计了GNSS数据存储表结构;基于MapReduce提出了GNSS大网分区分布式解算策略。实验搭建了分布式平台,实现了GNSS数据分布式存储、并行检索和发布以及GNSS大网分区分布式解算,存储和解算性能均得到了较大提高。结果表明,所提出的方法可用于GNSS大网数据存储和解算。  相似文献   

12.
当前网络中地理信息以几何形式递增,为了高效地从海量网络信息中检索出高质量的地理信息,本文提出了一种基于主题爬行的地理信息分布式检索方法。本文采用面向对象的方法将网络地理数据按照四元组的要求进行分解和组织,对地物实体的主题文本特征、地理空间特征、时间维特征等相关信息进行封装,建立四元组实体对象,实现了地理信息数据的相互集成与组织。引入MapReduce模式的并行处理机制完成对网页中地理信息数据的优化存储与索引,并且通过分别计算网页文本、地理文本与查询关键词的主题相关性对爬取的网页进行有序的排列,从而提供快捷、高效的地理信息主题查询。  相似文献   

13.
在大数据时代来临的背景下,传统数据处理和分析方法已无法满足时空大数据高效存取、实时处理、分析挖掘等需求。本文结合智慧广东时空信息云平台的项目建设案例,探讨了面向大数据的时空信息云平台的建设目标、总体架构、关键技术、应用情况等内容,为解决海量时空大数据处理与分析性能问题,推动地理信息服务高质量发展做了积极探索。  相似文献   

14.
为解决传统面向海量基础地理信息数据多人协同更新技术方案中存在的问题,满足实际生产中对作业效率、过程数据管理等要求,本文提出了一种多人离线协同作业方法。该方法以扩展的时空数据库模型为基础,通过更新过程中多时态数据的集中存储管理,要素的离线编辑及协同状态维护,协同冲突检测与处理,本地编辑内容提交等工艺方法,实现了多人离线协同更新作业。基于该方法研发了协同作业系统,该系统已在多个省级及以上数据库更新项目中得到了应用,应用效果良好。  相似文献   

15.
异构地理信息处理环境互操作的Internet GIS方法   总被引:18,自引:0,他引:18  
提出了异构地理信息处理环境互操作的Internet GIS方法和基于互操作性的Internet GIS构造模型,即分布式超图模型,阐述了其具体实现过程,并以自主开发的Internet GISGeoSurf为例验证了此方法。  相似文献   

16.
围绕GIS应用系统在空间数据分析效率提升的方面,本文提出了一套基于分布式自动化并行处理框架的效率提升方法,阐述了如何基于ArcPy、WebAPI、分布式调度、调度控制因子等关键技术,实现分布式自动化并行处理。本文方法有助于便捷、高效地解决大量空间数据分析处理的效率问题。  相似文献   

17.
基础地理信息空间框架建设与应用   总被引:1,自引:0,他引:1  
基础地理信息空间框架是以形成数字信息服务的产业化模式为目标,通过对各种不同技术手段获取的基础地理信息进行采集、编辑处理、存贮,建成多种类型的基础地理信息数据库,并建立数据传输网络体系,为各级行政部门及各行业提供基础地理信息服务。  相似文献   

18.
立足于城市地理信息系统建设的总体目标,结合数字城市、智慧城市建设的实际需求和工作操作流程,在已有基础地理信息资料和技术的基础上,应用计算机技术、GIS技术的处理技术和方法,构建大比例尺城市地理信息数据批处理和质检系统。该系统可以为数字城市、智慧城市的大比例尺地理信息数据生产提供技术支持,减少生产成本,提高工作效率和数据生产质量,同时可以大量减轻作业人员和质检人员的工作量,也为数字城市和智慧城市的业务系统建设带来了新的数据解决方案。  相似文献   

设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号