首页 | 本学科首页   官方微博 | 高级检索  
相似文献
 共查询到20条相似文献,搜索用时 31 毫秒
1.
介绍了Cassandra关键技术、实时气象数据存储模型。湖北省运行MICAPS4采用基于Cassandra的分布式数据存储环境。对分布式存储系统高可用性、读取性能的测试结果表明,系统提高了MICAPS客户端对实时气象数据的检索效率,并极大减轻了各级台站的维护压力。  相似文献   

2.
MICAPS4体系采用客户端/服务器的系统架构,其中服务端系统是MICAPS4的重要部分,利用分布式存储与分布式计算技术,构建可容纳102 TB量级的气象实时数据,千万数据总量,面向数百并发用户的服务器集群系统。MICAPS4服务端系统在国内率先实现全部气象实时数据由文件到数据库、从集中式系统到分布式系统的迁移,该系统自2015年起在全国推广使用。在海量气象数据和大量用户并发访问的环境下,表现出很高的稳定性和优越的读写性能,同时具有便捷的扩展性和可维护性。MICAPS4服务端系统分为分布式存储系统、分布式前处理系统、站点实况轮询系统、查询服务器系统和监控系统5个子系统,分布式存储子系统为MICAPS4客户端提供了近实时数据的高速随机与顺序读取服务,分布式前处理系统利用对等分布式架构实现了海量气象实时数据的流式计算,站点实况轮询系统实现了跨系统的实况数据异构副本的同步功能,查询服务器系统利用多线程服务器技术实现了MICAPS4客户端的实时计算请求,监控系统利用部署于每个节点的探针实现监控信息的主动上报。  相似文献   

3.
程雷 《贵州气象》2013,37(4):48-51
随着数据库应用技术的发展,伴随气象业务领域的不断拓宽,对气象资料存储和查询实效的要求越来越高,仅凭传统翻阅原始凭证查询气象资料已远远不能满足现实需要,该文应用数据库技术,实现电子数据资料的存储、检索和一键调阅,实践表明有效地提高了气象资料的检索效果。  相似文献   

4.
王甫棣  郑波  胡英楣 《气象科技》2012,40(5):745-749
为了更好地保障国务院办公厅接收中国气象局提供的各类气象数据,解决旧有系统存在的问题,对现有国务院气象数据服务系统进行升级改造。全新开发的数据收集发送功能,解决了现有系统无法进行非法文件过滤和配置灵活性问题;升级现有的监视系统,使新系统满足业务需要的检索、报警、时效计算等功能;扩充的补调下载功能更加贴近操作员的使用习惯。改造后的系统通过数据传输与时效监视功能的分离和程序的改进,增强了传输可靠性和时效性,同时能够为未来业务应用扩展提供支持。经过实际业务测试,系统运行稳定,并为2011年国务院汛期服务提供了有效支撑。  相似文献   

5.
为收集管理应用新型地基遥感设备观测的海量、多源、实时数据,中国气象局气象探测中心设计并搭建了超大城市观测数据系统平台。系统基于主流Web开发技术和分布式列存储集群方式MySql数据库,具备数据实时传输、监控、存储、分析、显示和共享等功能,实现了新型地基遥感观测数据管理规范化、产品服务多样化、资料共享便捷化。该系统平台既提高了新型地基遥感设备数据的支撑保障能力,同时分钟级廓线数据产品满足了短临天气预报对实时数据的高时效需求。目前,平台已在部分城市中推广应用,为地基遥感设备业务化运行提供全面的平台支持。  相似文献   

6.
文章介绍了内蒙古自治区气象大数据管理云平台利用分布式存储与计算架构,构建数据采集子系统、数据加工处理子系统、数据存储管理子系统、业务监视子系统、数据共享服务子系统和数据展示子系统,实现部门内外常规气象观测资料、服务产品、行业部门相关数据的集约化、标准化、统一存储管理,对接内蒙古自治区政府“云上北疆大数据平台”和“政务资源共享平台”,完成了行业的互补和延伸,开辟了气象信息化发展的新舞台。  相似文献   

7.
为满足我国气象灾害风险管理业务体系建立和发展的需求,有效支撑防灾减灾决策服务,设计并建设了气象灾害风险管理系统。该系统包括大数据应用、模型算法、在线分析与产品制作、综合运维等分系统,面向暴雨、台风、干旱、高温、低温等主要气象灾害,覆盖气象灾害风险管理业务的主要环节,实现灾害监测识别、影响评估、风险评估、风险预估和风险区划等功能。系统探索应用时空匹配的大数据融合、Web-GIS、空间数据分布式存储、微服务和多租户等技术。目前,系统可实现实时发布灾情监测、灾害事件识别、影响评估、风险评估、风险预估、风险区划等多类业务产品。在国家级气象业务部门的应用显示,该系统具有良好的业务能力与发展前景,有助于推进客观化、定量化、精细化气象灾害风险管理业务发展,提升防灾减灾决策服务能力。  相似文献   

8.
基于Hadoop的数值预报产品服务平台设计与实现   总被引:4,自引:4,他引:0       下载免费PDF全文
数值预报产品数据与日俱增,采用传统的关系型数据库对其进行存储和管理存在效率低和存储能力不足的问题。另外,基于文件的存储方式在数据存储处理、数据读取和算法计算等方面存在性能瓶颈。针对这一问题,基于Hadoop技术体系设计了分布式的数据存储模型,实现了数值预报产品数据的分布式存储和处理,开发了数值预报产品数据接入处理模块;并实现了基于Rest Web Service的获取数值预报产品要素场数据访问接口、时间序列数据访问接口、数据下载接口等业务应用接口。多业务用户的实际业务测试表明, 该平台在诸如数值预报产品气象数据处理和业务应用方面较传统技术架构具有一定优势。  相似文献   

9.
气象观测资料是气象业务和气象研究的基础资源,各种数据序列质量的优劣直接影响着气象业务和气象研究的应用效果、准确性和可靠性。随着内蒙古气象局气象业务技术体制改革的不断深入,各种气象观测资料信息量不断增长,资料采集、数据传输、数据加工处理、信息服务和数据存储各个环节的质量控制必须进一步加强。文章系统地阐述了内蒙古气象资料质量控制体系的现状和资料观测、数据传输、统计处理等各个环节的质量控制方法,并描述了气象资料质量控制体系的发展方向。  相似文献   

10.
决策气象服务是气象服务的重要组成部分,为提升决策气象服务水平,广州市气象局基于FAST平台和相关数据库建立决策气象服务业务系统。通过采用Postgre SQL数据库及分布式数据存储方案,Java语言开发及Java EE平台管理,并使用模块式设计,系统实现了决策产品制作流程化操作和一键式发布,做到了预报结论一致性、服务有痕迹和产品标准化,有效提高了决策气象服务工作效率。  相似文献   

11.
本文针对气候监测预测分析系统(CIPAS3.0)数据环境的系统架构、总体设计,提出系统实现的若干关键技术并进行深入分析。CIPAS3.0作为国家气候中心面向气候监测、预测、诊断业务的核心业务系统,其数据支撑环境已全面融入气象大数据云平台“天擎”,针对不同存储格式的数据源,建立了以GBASE和PostgreSQL底层存储架构为基础的气候专题数据库,采用基于配置文件的可插拔数据加工处理框架,并提供了具有数算一体能力的数据访问接口。CIPAS数据环境设计采用OBS(Object Storage Service)对象存储进行产品的管理,同时针对数据产品完整性和分布式集群管理建立了全流程的监控系统,实现了数据从采集、入库、存储、加工处理、访问、监控等各环节的支撑作用。目前,CIPAS3.0数据环境已投入业务使用,其建设成果在国家级业务单位和试点省份的试用显示出其在支撑业务应用能力与发展前景方面具备较好的基础。  相似文献   

12.
依据广西公众气象服务产品、行业气象服务产品精细化、集约化及智能化业务发展需求,基于智能网格产品及CIMISS基础数据平台,实现气象数据的汇聚、分发、共享及存储。依托J2EE、GIS及分布式技术,对现有的电力气象、旅游气象、交通气象等业务系统进行整合,构建基于B/S与C/S混合架构的广西行业气象服务集约化系统,形成基于广域网络、上下一体、统筹集约的气象服务业务系统布局,为公众、行业用户提供更精细、更实时的预报、实况和预警信息产品。  相似文献   

13.
随着气象业务现代化建设的迅速发展,湖北省气候应用所已完成了地面历史气象资料的信息化工作,现实地面资料已通过网络传输。如何利用这些信息资料为业务和科研服务,各省气候所(气候中心)根据实际需要建立了很多数据库,这些数据库针对性强,而气象要素、资料年代、站点范围均有一定的局限,且利用时效较差,很难适应科研、业务和气象服务等方面的需求。随着气象信息化的进一步发展,停止打印和制作地面气象记录报表势在必行。所以必须有一个系统将全省各台站的全部气象资料管理起来,并提供相应的检索和统计功能。湖北省地面气象信息资料服务系统正是针对以上情况开发的。该系统的投入使用,将大大提高资料的使用时效,拓宽信息资料的服务范围,并为今后取消地面气象记录报表制作奠定基础。  相似文献   

14.
1引言随着高密度自动观测网的建成,为气象服务工作带来新的契机,在日常工作中我们需要将加密站点的气象资料保存起来,为乡镇预报、气候区划等工作服务。虽然我们可以在高密度自动观测网上查询到平均气温、时段降水量、最高气温等气象要素,但是由于站点较多等原因存储数据比较  相似文献   

15.
自动站点雨量数据到格点化雨量数据的插值方法一直在气象业务中有着重要应用,但传统插值法一般只考虑距离对估测点的影响,不能够真实地反应降水的落区分布.利用多普勒雷达资料对雨量插值结果进行校正,可使得插值后的结果较好地反映雷达反射率分布特征,也可以较好地克服反距离加权插值法的尖点问题.经过业务测试检验,基于雷达校正的雨量插值方法效果较为稳定,可以在业务中进行应用.  相似文献   

16.
为了更好地管理全区的气象资料,为越来越多的对外气象资料服务提供方便,我局组织建立和开发了吉安地区气象数据库系统。系统从地区级气象台天气预报业务和服务工作的实际需要出发,以全区气象台站的气象要素资料为主要内容,具有注重实用、方便操作、界面较好、便于移植和功能扩充等特点,并具有部分资料自动续加的功能。本文就数据库系统的有关情况情况作一介绍。1概况气象资料的建库工作在吉安地台很早就开始了,但大多用BASIC语言建立顺序文件,缺乏统一的规范,也没有合适的应用软件相配套,使用很不方便。为此我们在本系统中改用数…  相似文献   

17.
区域气象自动站的建立,提高了防灾减灾及突发灾害性天气的监测预警能力。随着站点建设规模的快速扩展,数据处理量成倍增多,对数据库系统的存储处理提出了更高的要求。ORACLE数据库在处理海量数据方面,性能优异、可伸缩性强。以ORACLE 10G作为核心数据库,设计、建立了基于ORACLE的陇东南区域自动气象站数据库与应用系统。经过试用表明,该数据库能够很好地满足区域自动气象站数据实时访问和检索需求,提高了数据应用效率,实现了陇东南和周边部分地区近千个站点的资料自动入库、存储和查询检索。本文对数据库设计、SQL语句查询优化原则、ORACLE数据服务器和客户端的连接配置等方面做了重点介绍。  相似文献   

18.
为适配气象业务科研应用对算力、存储资源的需求特点,采用分布式计算、分布式存储、虚拟化技术搭建气象基础设施云平台,并根据不同的业务类别、网络区域、资源服务对象针对性地设计云平台资源分区,以及每个分区需具备的云资源及功能。设计的云平台涵盖IaaS层、PaaS层功能,通过软件定义方式池化硬件资源,形成具备云计算、大数据支撑特征的资源池,为众多气象应用端部署、气象大数据业务提供虚拟主机、物理算力、数据存储资源。实际运行效果表明设计的气象基础设施云平台能够适应数据处理规模与时效性要求不断提升的业务发展需求。  相似文献   

19.
气象是一门自然科学,与人们生产生活关系密切。为了更好地发展生产安排生活,人们需要认识和研究天气气侯的变化及其规律。为此,广大气象工作者日以继夜地在海岛、高山、边防、城乡各地开展气象科研、业务与服务工作。由于气象部门具有人员高度分散、工作高度集中的特点,为了加速气象工作的现代化,更好地为四化建设服务,气象部门在体改中已由双重领导以地方为主改为以条条为主的体制。体改以来,我区广大气象工作者仍然积极依靠当地领导,开展气象业务服务工作,近两年来取得了一定成绩。例如去年6月18-22日的桂北持续性大暴雨(融水安太700公厘),区、地、县气象部门都报得较好,为防汛部门指挥抗洪抢险赢得了主动。全区八十多个县基本完成了农  相似文献   

20.
介绍了基于“9210工程”和MICAPS系统的资料自动存储、整理、检索和历史天气图分析业务系统——基于MICAPS系统的数字化天气图及常规气象资料检索分析系统,较全面地介绍了该系统高度自动化、设计友好的功能和在业务中的应用。  相似文献   

设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号