A machine learning approach for predicting computational intensity and domain decomposition in parallel geoprocessing     

Peng Yue  Fan Gao  Boyi Shangguan  Zheren Yan 《International journal of geographical information science》2020,34(11):2243-2274

ABSTRACT

High performance computing is required for fast geoprocessing of geospatial big data. Using spatial domains to represent computational intensity (CIT) and domain decomposition for parallelism are prominent strategies when designing parallel geoprocessing applications. Traditional domain decomposition is limited in evaluating the computational intensity, which often results in load imbalance and poor parallel performance. From the data science perspective, machine learning from Artificial Intelligence (AI) shows promise for better CIT evaluation. This paper proposes a machine learning approach for predicting computational intensity, followed by an optimized domain decomposition, which divides the spatial domain into balanced subdivisions based on the predicted CIT to achieve better parallel performance. The approach provides a reference framework on how various machine learning methods including feature selection and model training can be used in predicting computational intensity and optimizing parallel geoprocessing against different cases. Some comparative experiments between the approach and traditional methods were performed using the two cases, DEM generation from point clouds and spatial intersection on vector data. The results not only demonstrate the advantage of the approach, but also provide hints on how traditional GIS computation can be improved by the AI machine learning.  相似文献   

Mechanical models of fracture reactivation and slip on bedding surfaces during folding of the asymmetric anticline at Sheep Mountain, Wyoming     

Pablo F. Sanz  David D. Pollard  Patricia F. Allwardt  Ronaldo I. Borja 《Journal of Structural Geology》2008,30(9):1177-1191

  相似文献   

在基于数字填图系统的1：25万区域地质调查修测中前人地质资料的利用与数据采集     

覃小锋  ;周开华  ;胡贵昂  ;周府生  ;李广宁  ;谢凌锋  ;潘艺文 《中国区域地质》2008,(7):986-994

1：25万区域地质调查修测的核心任务是挖掘、利用前人资料和对前人资料的二次开发。在1：25万玉林市幅数字地质填图试点的过程中．总结出一套基于数字填图系统的前人地质资料利用与数据采集的工作方法。其工作流程和工作步骤可分为6个阶段：①前期准备阶段;②室内地质资料录八阶段;③野外数字地质调查阶段;④室内资料整理阶段;⑤图件编制阶段;⑥成果提交阶段。该工作方法与传统的地质调查方法相比,提高了地质调查的工作效率和质量,已基本上达到了在1：252万区调修测区推广应用的“实战性”要求。  相似文献   

栉江珧工厂化育苗技术研究     

于瑞海  王昭萍  李琪  郑小东  周维武  王世党 《中国海洋大学学报(自然科学版)》2007,37(5):704-708

通过亲贝强化营养和升温促熟培育,提早栉江珧人工育苗时间;合理控制幼虫密度,前期4~5个/mL,后期2~3个/mL,严把饵料质量关,投喂新鲜无污染的饵料,科学换水与充气,及时分级筛选等系列技术措施,克服栉江珧育苗中易发生幼虫粘连的技术难题,使育苗生产顺利进行;开展了多种附着基投放的采苗方法试验,选出了铺砂浮动网箱采苗和网袋装网片附着基和细砂吊在池中采苗2种比较理想的采苗方法,提高稚贝的附着变态率,其附着变态率达30%以上,促进稚贝的生长和成活,在1 000 m3水体中育出2 mm以上的稚贝1.096亿粒。  相似文献   

基于MAPGIS的县级土地利用数据库建设及探讨——以大同市新荣区为例     

边建伟  贾琇明 《测绘科学》2008,(Z1)

本文体现了3S技术在县级土地更新调查中的重要性。重点介绍了在MAPGIS土地利用数据库系统中通过专题数据建立土地利用现状数据库,从内业判读,到外业调查,然后进行数据入库前的检查,分析数据的精度,入库后的相关处理和检查,最后建立新荣区1:1万土地利用数据库。通过建立的数据库,进行统计和汇总,输出各种专题图表,供土地部门进行合理规划和决策。  相似文献   

空间信息网格中远程空间连接查询的优化     

谢传节  刘高焕  高秉博  盛文涛 《遥感学报》2008,12(5)

随着空间信息网格的建设,网格平台上管理的空间信息资源越来越丰富,这促进了空间信息网格中空间数据分布式查询的应用需求,而在分布式空间查询中,空间连接查询操作往往成为性能的瓶颈.根据空间信息的特点,通过利用网格计算资源来优化空间连接查询的执行.首先基于网格服务构建网格平台分布式空间数据查询软件结构,通过设计远程空间连接执行服务利用网格平台中的计算资源;根据空间信息的特点.采用基于Kd-Tree空间分区并行连接的方法提高远程空间数据连接操作执行效率,并给出了远程空间连接执行的查询代价模型;然后根据连接代价模型设计了远程空间连接查询执行计划优化生成算法;最后总结了本文工作并探讨了下一步研究方向.  相似文献   

国内外城市雨水径流水质的研究   总被引：4，自引：0，他引：4  

蒋德明  蒋玮 《物探与化探》2008,32(4):417-420,429

综合国内外综合资料,对城市不同建筑材料屋面和不同路面的雨水径流水质特征进行了对比分析,阐明了影响城市雨水径流水质的三大因素,并论述了城市雨水收集利用的现实意义。  相似文献   

应用改进并行遗传算法反求水文地质参数研究   总被引：1，自引：0，他引：1  

孔祥龙  朱国荣  江思珉 《高校地质学报》2008,14(1):126-132

利用单纯形法局部搜索速度快和遗传算法全局寻优的特点,同时为了克服两种方法各自的弊病,提出采用混合单纯形技术的并行遗传算法(Hybrid Simplex Parallel Genetic Algorithm,SPGA)进行水文地质逆问题的求解。详细阐述了SPGA算法的具体操作和实现,并将该方法应用于水源地的地下水模拟反演中。计算结果表明,SPGA算法在水文地质参数寻优计算中具有比较好的可靠性和计算效率。  相似文献   

石狮市地下管线数据采集与建库     

柯金朴 《测绘与空间地理信息》2008,31(3)

地下管线是城市生存发展的命脉,准确掌握地下各种管线的状况,是搞好城市建设和规划管理工作的基础。本文根据石狮市城市规划建设现状,探讨地下管线普查和采集的方法,提出建立地下管线信息系统等有关问题。  相似文献   

蚌埠市地理信息系统应用探讨     

张子扬 《现代测绘》2008,31(2):41-42

阐述了GIS系统的设计原则,建设方案,揭示了GIS系统功能模块的效能,利用Map控件建立信息管理系统,最后探讨了GIS系统在应用领域的发展前景。  相似文献