共查询到10条相似文献,搜索用时 156 毫秒
1.
海量气象数据的长期归档保存是气象局的重要业务之一,传统的数据归档方式已经不能满足需要。基于多线程流水线的气象数据光盘自动归档方法可以解决海量数据归档的问题。利用该方法针对这一问题提出很好的解决方案,并完成了系统的开发、获得较好应用效果。系统通过基于线程流水线技术的多任务并行处理机制,大大缩短了海量数据的分类、压缩、光盘数据生成与刻录的整体运行时间。该系统每天能处理981.8GB,刻录数据577.3GB(以50G的蓝光光盘为例)。 相似文献
2.
3.
气象探测资料种类多、数据量大,早期宁夏实时气象探测资料主要存储在各类服务器中,如何便捷高效地使用气象探测资料是困扰业务人员的难题。本文首先分析了宁夏气象资料归档业务需求,制定了气象资料自动归档策略;其次,介绍了系统的总体架构,阐明了各功能模块的设计思路;再次,采用了MySQL、NAS和Bootstrap等关键技术,设计开发了“宁夏气象资料自动归档管理系统”;最后,统计了宁夏气象资料的自动归档情况和展示了资料查询下载效果。经试运行,该系统可以实时自动归档宁夏气象探测资料和基础预报资料,能够查询下载数值模式产品、雷达数据和天气图等归档资料。 相似文献
4.
气象科技材料归档的讨论冯月琴(内蒙古气象档案馆)气象科技档案是直接记述和反映气象科技活动并归档保存的气象科技材料(含气象科技文件,下同)。履行了归档手续,集中保管起来的气象科技材料才称之为气象科技档案,其作用、性质、数量和存在形式都随之发生了变化。留... 相似文献
5.
本文针对"天擎"归档系统的建设需求、总体架构,提出系统实现的若干关键技术问题并进行深入分析,气象大数据云平台(以下简称"天擎")归档系统设计为面向海量数据归档存储的支撑系统,保障数据的安全完整。系统基于在线存储、离线存储以及磁带库管理软件,通过层次性结构体系、消息队列和微服务技术框架,实现多协议数据归档、敏感数据归档及转储数据归档等功能,满足各种新增数据归档业务场景,同时具备丰富的数据回取服务、数据全流程的追溯和规范化的磁带管理保障等功能。2020年8月"天擎"归档系统投入业务运行,每日归档的实时数据量约为10TB,后续最高可承载约240TB日数据量的归档业务。 相似文献
6.
7.
黄海云 《沙漠与绿洲气象(新疆气象)》2009,3(Z1)
气象科研档案的整理工作,是对气象科研项目(课题)研究、科学考察、科学试验工作中形成的具有保存价值的各种载体形态的科技文件资料收集归档,进行系统的整理和科学编目,使之条理化和系统化,这是气象科研档案的中心环节,是开发利用气象科研档案信息资源的基础和前提条件. 相似文献
9.
WMO对未来信息系统提出了包括提供在线元数据、数据目录服务和提高元数据定义、收集、归档和交换的标准化水平在内的总体需求,正在建设的"新一代天气雷达信息共享平台"也对解决气象元数据在气象宽带网环境下的全网同步问题提出了现实要求。该文首先从现有气象元数据标准着手阐述同步系统所承载主体——气象元数据在数据发现、数据应用及服务、数据展示和信息冗余度方面的不足,提出相应的改进措施,并对同步系统的数据一致性模型以及OAI-PMH元数据同步协议等同步机制进行研究,分析FIFO、单调读和单调写等几种典型一致性模型的特点和适用范围以及OAI-PMH协议的可行性,给出同步系统的总体设计思路,针对由总体设计思路形成的原型系统进行试验。分析试验结果数据表明:气象元数据全网同步系统原型基本满足符合WMO核心元数据标准的气象元数据在广域网分布环境下的多节点同步交换需求。 相似文献
10.
随着越来越多基于网络、自动化的信息共享系统的广泛使用,元数据已成为不同学科间共享信息的关键。近年来气象数据的应用领域不断扩展,气象数据面临着海量信息流通共享的迫切需要,由此气象元数据应运而生。该文介绍的气象元数据是在满足WMO (世界气象组织) 信息系统提出的包括提供在线元数据、数据目录服务和提高元数据定义、收集、归档和交换的标准化水平在内的总体需求的背景下,依据WMO核心元数据标准设计并由自开发程序自动生成的。北京GISC系统是WMO信息系统中承担区域间及全球资料交换的主干通信中心之一,至2012年1月,北京GISC系统制作并提供系统内全部数据对应的气象元数据,共计约12万条。 相似文献