一种面向海量数字高程模型数据的洪水淹没区快速生成算法   总被引：1，自引：0，他引：1  

沈定涛  王结臣  张煜  黄俊  胡承芳 《测绘学报》2014,43(6):645-652

常见种子点填充算法在实现DEM数据下的洪水淹没区生成时,具有难以处理大数据量以及过多的递归计算易导致算法效率较低等缺点。针对此问题,本文提出一种面向海量DEM数据的洪水淹没区生成算法分块压缩追踪法,该算法采用条带分块和实时栅格压缩存储技术,以解决海量地形数据下的淹没分析计算问题。最后,通过将本算法与常见种子点填充算法和分块种子点填充算法进行了对比测试,实验结果表明本算法不仅较好地解决了海量DEM数据下的洪水淹没区生成问题,与常规种子点填充算法和分块种子点填充算法相比亦具有较高的计算效率。  相似文献   

基于可伸缩环境的海量信令分析算法研究     

魏青  高雪玉  魏志强  杨孝成  王培鹤 《中国海洋大学学报(自然科学版)》2013,(5):107-111

针对海量信令分析问题,提出一套基于可伸缩环境体系的分析模型算法。利用循环缓冲机制接收海量数据并进行缓冲转发;借助信令拷贝方式达到信令的纵向拓展;凭借信令分流技术进行目标信令的过滤和处理;采用自动重连和队列缓冲相结合的方式,有效解决由于网络异常、拥堵产生的丢包问题;各环节根据现有硬件资源完成模型的动态配置,使硬件资源利用率和软件执行效率达到最佳平衡状态,增强硬件资源的可伸缩性;该算法既提高了海量信令处理的时效性、准确性,又增强了硬件资源的可配置性和灵活性。从实验结果来看,该算法简单有效,适合于标准模式下各种级别硬件设备的海量信令分析。  相似文献   

多源海量统计遥感数据集成管理技术研究     

方利  姚敏  岳建伟  余卓渊 《测绘软科学研究》2010,(1):56-60

统计遥感业务是国家统计局基于统计业务对空间信息的发展和应用需求,将GIS、Rs和GPS空间信息技术全面应用于统计数据的获取、管理与分析中,从而提高统计效率和统计科技含量,构建新型国家统计业务体系。统计遥感业务数据具有多源、海量的特点,实现统计遥感数据的集成与管理是新型统计遥感业务成功运转的基础。针对统计遥感业务及数据应用需求,通过对各类空间数据集成与管理技术进行研究,提出在建立统计遥感空间数据库基础上,将影像以县级为单位进行拼接、然后压缩存储到统计遥感空间数据库,同时结合影像编目技术实现海量遥感影像的管理;提出将元数据管理和数据转换、数据直接访问以及数据互操作方式,实现多源统计遥感数据的集成与管理。通过多种方式,从应用层面较好地解决了海量、多源统计遥感数据的集成与管理,提升了统计遥感数据的应用范围。  相似文献   

基于OpenMP的海量DEM快速并行裁切算法     

马金龙 《测绘与空间地理信息》2022,45(3):183-186,189

为了提高海量DEM的裁切效率,且充分利用现有的多核CPU计算资源,提出一种基于OpenMP框架的快速并行裁切算法,并对其性能进行实例验证.通过对规则和不规则DEM数据用不规则矢量范围线裁切的任务进行分解,设计了相应的并行程序,将遍历点与矢量范围线的空间关系及DEM内插的过程进行并行化计算,缩短了计算时间.算法在实际生产...  相似文献   

海量数据驱动下的高分辨率海洋数值模式发展与展望          下载免费PDF全文

宋振亚  刘卫国  刘鑫  苏天赟  刘海行  尹训强 《海洋科学进展》2019,37(2)

海洋数值模式是定量描述海洋物理现象及其变化的数值模型,也是海洋与气候研究、预测的核心工具。随着海洋观测的不断投入与积累、对海洋认识的不断深入,特别是在高性能计算技术的支撑下,海洋数值模式已有了长足进步,正朝着高分辨率和多物理过程的方向发展。随着分辨率的提高、物理过程的细化,海洋数值模式的发展面临着多个方面的挑战。当前,海洋数据数量和种类不断增多,同时超级计算机、高性能计算和深度学习等技术的快速发展,为海洋数值模式的突破提供了机遇与挑战。本研究回顾了海洋数值模式的发展现状,梳理和分析了其发展中遇到的大规模高效并行计算和参数优化这两个关键问题,探讨和展望了当前海量数据驱动下海洋数值模式的发展趋势。提出计算负载均衡、计算与I/O重叠的并行流水线设计以及降低全局交换的算法改进是当前突破高分辨率海洋模式大规模高效并行效率的关键。从海洋科学、高性能计算以及深度学习深度交叉融合的角度,提出了实现海洋科学与深度学习相结合的6个途径,在此基础上,探讨了基于深度学习的参数化优化可能实现的途径。  相似文献