共查询到20条相似文献，搜索用时 15 毫秒
1.
2.
Python语言在CIMISS中的应用 总被引：1，自引：0，他引：1
CIMISS实现了国家级气象数据的整合集约,国省首次建立了统一的数据环境,并通过标准统一、功能丰富、调用高效的气象数据统一服务接口MUSIC。本文介绍了Python编程语言特性,及其相对于IDL,Fortran,Matlab等气象行业常用编程语言的优势。阐述了Python在国外气象行业中的应用,以及如何调用CIMISS的客户端SDK,Web Services以及Rest服务接口。气象科研人员通过掌握Python编程语言,能够快速地从CIMISS中获取和处理气象数据,并可以使用Python进行各类气象数据的处理。 相似文献
3.
全国综合气象信息共享平台（CIMISS）是依托天气雷达数据共享平台工程项目建成的国省统一数据环境,实现各类气象数据的规范管理,直接支撑气象业务应用。该文介绍了CIMISS架构设计及核心内容,结合业务应用效果的实例分析,阐述架构设计如何有效提升数据和应用的集约高效。借鉴企业架构（EA）方法,建立了业务架构、数据架构、应用架构、技术架构和标准规范体系。采用一系列架构优化设计,包括实现元数据统一管理同步、数据质量控制、统一业务监控、异构数据库统一数据服务、优化信息流程、分层设计和集群技术应用等,满足CIMISS标准性、扩展性、稳定性等需求,获得良好的全流程数据服务时效,核心资料接收入库总耗时均小于3 min,数据访问效率较国家级气象资料存储检索系统提升2~5倍。继承现有CIMISS架构设计成果,正在设计中的气象大数据平台整体技术架构将向云平台、分布式存储等新技术升级。 相似文献
4.
随着气象数据量的不断增长,进一步提升CIMISS数据管理和服务能力的需求变得日益迫切。为解决存储系统动态扩展能力不足、并行计算与吞吐效率低下等限制CIMISS继续发展的问题,采用分布式文件系统和NAS技术替代GPFS建设共享文件系统,实现非结构化气象数据的存储功能;采用分布式数据库替代Oracle RAC建设关系数据库管理系统,实现结构化气象数据的存储功能和非结构化气象数据的索引功能。实践证明,该方案能够有效地改善CIMISS的数据存储能力、并发响应能力,适应未来气象业务对数据存储和应用的需求。 相似文献
5.
6.
针对CIMISS数据存储管理系统在业务运行中出现的性能瓶颈问题,在分析该系统流程的基础上,根据性能瓶颈出现的不同环节开展相应的优化工作,针对数据存储性能问题,分析了传统Share Disk和最新Share Nothing架构的差异,设计了分布式数据库的部署方案和嵌入CIMISS技术方案。针对业务调度进程的性能瓶颈,优化了相应的调度记录项。数据分析表明,上述优化措施实施后,数据存储管理系统的服务性能和运行稳定性提升明显,数据服务接口皆有数倍的性能提升,非结构化数据平均入库及时率高于98%,为各类气象业务应用提供了稳定可靠的数据环境支撑。 相似文献
7.
8.
9.
10.
针对气象信息网络常规运行监控业务需要,结合气象信息共享系统（China Integrated Meteorological Information Service System,简称CIMISS）的运维实际,设计开发了基于CIMISS的气象数据处理时效监视系统,实现了对13类上行气象观测数据处理主要的节点时效、自动站疑误数据处理、数据访问服务性能的实时监控,并可为部分气象观测设备的运维保障提供参考指引。文中从系统结构与数据流程、主要业务功能、技术实现等方面对系统的实现方式等进行了介绍。 相似文献
11.
12.
CIMISS中气象观测资料处理入库效率优化方法 总被引：3，自引：0，他引：3
气象资料种类多、海量、格式多样复杂,造成综合气象信息共享系统(CIMISS)巨大的处理压力。以高空L波段数据作为个例,进行详细的分析,在数据库表设计上,通过"键-要素"的拆分方式减少数据库冗余,建立合理的索引和分区提高数据表访问效率。在处理流程方面,通过简约化流程减少系统间消息交互和IO,从而优化系统的存储效率。同时简约流程中对比PRO*C和OCI两种入库方式,PRO*C简单高效便于开发,而OCI功能全面但相对复杂,通过比较两种入库方式的效率,系统采用PRO*C方式。高空L波段数据实际运行效果表明,平均28s完成一份数据的处理。对比高空探测数据的处理,简约流程比原流程入库更快。 相似文献
13.
14.
15.
16.
17.
设计了一种新型高效的公路交通气象观测站监控系统.该系统主要包含两个方面的内容,一是采用多线程编程技术设计开发实时气象报文数据入库程序,二是对开源ZedGraph制图控件的修改和重新封装使用,并以Oracle10g大型数据库作为后台数据库,最终构建成由实时气象数据入库的程序和数据提取展示程序组成的监控系统.该系统不仅实现了对海量气象数据的存储备份,而且其监控展示功能可以更高效地为交通气象的监测预警决策提供依据.通过具体应用,证明了该系统在减少气象灾害对交通的影响方面是可行的、有效的. 相似文献
18.
19.
20.
通过对雷达风暴结构产品数据的提取、入库,采用网页形式对数据库进行检索,并对雷达数据进行统计分析后发现：距离、回波底高度、回波顶高度、回波最强反射率因子强度及其所在高度统计中样本的分布先增加后减少,垂直液态含水量样本的分布为递减;雷达数据库可检索雷暴、冰雹天气过程相关数据,有利于与其他气象数据库资料融合和分析;使用存储过程可快速对资料进行处理,从网页读取数据时执行效率大大提高。 相似文献