共查询到20条相似文献，搜索用时 15 毫秒
1.
数值预报产品数据与日俱增,采用传统的关系型数据库对其进行存储和管理存在效率低和存储能力不足的问题。另外,基于文件的存储方式在数据存储处理、数据读取和算法计算等方面存在性能瓶颈。针对这一问题,基于Hadoop技术体系设计了分布式的数据存储模型,实现了数值预报产品数据的分布式存储和处理,开发了数值预报产品数据接入处理模块;并实现了基于Rest Web Service的获取数值预报产品要素场数据访问接口、时间序列数据访问接口、数据下载接口等业务应用接口。多业务用户的实际业务测试表明, 该平台在诸如数值预报产品气象数据处理和业务应用方面较传统技术架构具有一定优势。 相似文献
2.
针对气象数据种类多、信息量大、精度高等特点,传统的关系型数据库系统在存储处理、数据读取等方面存在负载饱和、读写性能不理想等问题,利用云数据存储技术,结合气象数据特征,设计了基于云数据存储平台的气象数据存储和处理方法。通过分析气象数据的结构化、半/非结构化特征,采用云关系型数据库存储结构气象数据;采用NoSQL对象库存储半/非结构化气象数据;在数据的存储过程中,应用了气象数据分块压缩技术,进行气象数据存储和传输。结果表明,所讨论的方法具有很好的存储传输效率,能够满足大规模气象数据在业务应用中对存储查询和处理速度的要求。 相似文献
3.
以精细化预报为标志的现代天气预报业务对高时空分辨率气象数据的应用提出了更高的需求,而传统的预报分析制作系统MICAPS3（Meteorological Information Comprehensive Analysis and Processing System Version 3）无法满足符合大数据特征的实时预报相关的数据应用。同时,模式预报和集合预报应用已在各专业预报领域中发挥越来越重要的作用,网格预报产品正在涵盖全部的预报业务流程,而MICAPS3无法提供便捷高效的支撑。为解决上述问题,国家气象中心启动了MICAPS4建设,一方面建立了基于大数据的气象实时预报应用技术体系,解决了气象大数据处理、存储、分析和显示效率的关键技术难题;另一方面搭建了多个满足不同复杂预报业务需求的专业化版本。MICAPS4将信息化技术与预报技术、预报业务流程紧密结合,解决了现代化预报方法的平台化集成应用与精细化预报制作的关键技术难题,基于MICAPS4基础框架的多个专业版在中央气象台和部分省级气象台进行业务化应用推广。基于CIMISS（China Integrated Meteorological Information Sharing System）-MICAPS4的海量数据存储环境,极大减轻了系统部署和本地化工作量,显著提升了数据解析及数据存储访问效率。 相似文献
4.
随着智能网格业务不断发展,智能网格气象预报业务产品种类、数量日益增长,给产品的存储管理带来挑战。针对江西省智能网格气象预报业务产品收集及存储现状,采用PostgreSQL、Kibana、Elasticsearch等开源技术,提出了基于气象大数据云平台的气象数据湖建设思路,实现产品集中存储和管理,并提供统一共享服务,解决了海量多源数据产品存储、管理和共享等技术难题,为业务用户能够高效共享和应用数据产品提供数据环境支撑。 相似文献
5.
智能网格气象产品包括智能网格预报和cldasV2.0实况分析产品,将智能网格气象产品应用于决策气象服务,可提高内蒙古决策气象服务精细化水平。利用智能网格产品建立内蒙古地区决策气象服务敏感性分析启动阈值,采用动态数据库sql语句对智能网格格点预报数据和格点实况数据进行检测,当检测达到阈值后,自动启动制作决策气象服务材料。基于WebGis的Openlayers技术实现智能网格格点气象要素数据可视化动态展示和图形下载,根据需求设计自治区、盟市、旗县三级不同层级色斑图和格点图下载及预报图和实况图的自动生成；采用Postgres分布式集群数据库快速统计方法实现cldas2.0实况数据统计、计算和查询。 相似文献
6.
物联网、云计算、移动互联、大数据等新一代智能技术的迅猛发展,为智慧气象产品提供了技术支撑。由于气象信息系统数据类型多种多样,且来自多个部门、跨越多个系统平台,数据结构和格式也不相同,因此数据读取与处理是一项异常复杂的工程。为了解决该问题,开发了基于智慧气象的气象服务数据接口。基于智慧气象的数据接口,具有跨平台性、良好的响应速度、通用的数据交换格式,可使各种应用之间相互通信,并能创建新的应用。基于智慧气象的气象服务数据接口为RESTful风格,返回格式为JSON。数据接口的开发采用JAVA语言,基于Spring MVC+Spring Security Oauth2开发框架实现。数据存储采用Oracle数据库,分为冷、热两种数据。客户端对数据接口的访问,采用HTTP GET的方式发出数据请求,访问服务资源地址,获得JSON格式的数据返回结果。为加强数据接口访问的安全性,采用HTTPS POST方式访问授权接口获取访问令牌。基于智慧气象的数据接口,已为微信、微博、手机APP、网站等多个系统及保险公司、市政等多个单位提供数据支撑,且气象服务数据接口系统安全性高,具有较好的用户体验和兼容性。 相似文献
7.
8.
9.
10.
数值模式已经成为天气预报业务发展的主要方向，数值模式计算产生各种气象网格产品。气象网格产品具有数据量大、更新频次快、专业性强等特点，需要借助专业工具软件进行处理，不能很好满足企业和社会用户使用的需求，应用范围受到极大的限制。面对气象网格产品专业化与气象数据应用需求简单化之间的矛盾，文章提出针对气象网格产品，尤其是实况网格产品和预报网格产品，采用互联网服务手段，通过对网格数据离散化处理的方法，空间化管理的方式，将WebGIS技术应用到气象网格产品服务中。用户在客户端只需要进行简单文字检索或者GIS图形检索，系统便可以实现对气象网格产品中的有效数据进行精细化抽取，最终实现服务精细。文中提出的数据处理方法，对不同行业间气象网格产品的应用起到指导作用。 相似文献
11.
利用基于张弛逼近的四维数据同化技术,构建了广东深圳的千米格距网格化气象数据集,由于同化了深圳及周边可获得的高频次观测数据,气象数据集基本准确表现出几种关键气象要素的年际变化和月变化特征。在网格化气象数据集基础上开发了“深圳市细网格气候信息平台”,并通过平台推出了若干精细气候数据产品:精细风玫瑰、逐网格风能等。这些数据产品已经在格点气温预报、风能示范项目选址以及详细规划的自然通风评估中发挥了实际作用。这些探索表明,网格化气象数据集的建立,有望为城市的网格化精细管理和建设提供气象科技支撑。 相似文献
12.
随着更高精度的气象网格数据在气象业务中的广泛应用，使用高精度网格数据为社会公众提供精细化气象服务的需求越来越旺盛。针对气象网格数据文件大，网页前端动态渲染效率低等问题，提出基于瓦片金字塔模型的网格数据快速传输和渲染技术的研究及应用。采用服务器端的金字塔模型的瓦片动态切割、压缩传输以及浏览器终端的插值和渲染等技术，实现基于B/S框架下HTML5的气象网格数据快速展示的流程。同时，利用中国区域1 km分辨率多源融合实况分析产品，基于微信小程序终端进行检验发布，试验结果表明，百兆级气象网格数据可视化更新时间达毫秒量级，可以广泛应用于各类空间网格数据高效可视化的页面渲染。 相似文献
13.
山东省气象业务一体化平台（简称“一体化平台”）,是在气象业务系统集约化、自动化、智能化的建设要求下,为满足山东气象现代业务发展要求,解决山东气象业务运行中的诸多关键问题,利用互联网技术,面向山东全省天气预报业务设计研发的高度集约化的智能业务平台。一体化平台实现了基于内网 WebGIS 的气象数据渲染,基于 CIMISS、Oracle、Redis的三级数据库架构,基于 FTP、SMTP、传真服务器、阿里短信等技术的一键式发布引擎,基于 WebOffice的智能网格预报定制化气象服务,建立了山东短时和临近预报业务体系,融合了山东省气象部门近年来的多项科研成果。在此基础上实现了实况监测、短时临近预报、山洪预警、网格预报、产品制作发布、预报共享、预报检验和业务管理等功能。一体化平台支撑了 “省—市—县” 三级台站的天气预报业务和重大活动气象保障服务,提升了监测分析、短时和临近预警、决策服务能力。 相似文献
14.
一种地市级气象数据库的设计与应用 总被引：1，自引：0，他引：1
面向地市级气象业务数据库系统存在的数据管理分散、数据流程不统一等问题,以气象数据为核心,从标准化、规范化数据库建设的角度,提出一种气象数据库系统架构与设计方法。从逻辑结构、物理存储方面对气象数据进行划分,设计了气象数据的物理存储模型和数据统一访问规范。基于RabbitMQ消息中间件和元数据技术实现了多种气象观测资料的采集、传输、入库、备份的统一处理。通过消息数据与元数据的映射关系,增强了多源气象数据处理的灵活性和可扩展性。该系统已经投入业务使用,为气象数据管理和公共服务提供稳定、高效的数据支撑,取得较好的应用效果。 相似文献
15.
实况网格产品是智能网格预报业务重要数据源。为满足气象业务及气象服务对实况网格产品的服务需求,在实时收集和处理各种实况网格产品基础上,采用JavaScript、HTML、CSS等web技术,构建了基于WebGIS的实况网格产品应用分析平台。采用Leaflet、Canvas等技术搭建了基于HTML5的WebGIS框架,实现了各种实况网格产品叠加地理信息统一展示。通过格点与站点观测数据的对比分析,提供产品的实时数据质量评估分析。基于网格格点,实现任意区域、不同要素等级的格点面积及面积比例等定量指标的统计分析。平台自投入业务应用以来,为各级业务应用和精细化气象服务提供了数据支撑。平台基于全国统一的数据环境和参数配置方式,具有很强的应用推广价值。 相似文献
16.
论述了网格计算技术及其在气象领域的应用,指出网格的最终目标是资源共享和协同工作。在简述青藏高原地区中尺度数值模式系统建设的基础上,从模式背景、MM5应用系统建设的关键问题及技术路线、科研开发与业务化方案设计、模式的动力和物理方案及预报产品等方面介绍了青藏高原基于网格计算的MM5应用系统,并给出该系统在2006年业务试运行的检验结果,在此基础上总结了基于网格计算的应用系统在资源共享方面的效果。聚合主要高性能计算机系统的计算能力,构建一个国家级气象高性能计算机管理与应用网络平台,实现多集群系统的网格化全局管理和资源共享,不仅使参加网格计算项目的各个网格用户通过浏览器随时随地、安全、方便地访问网格上的计算、存储、数据和程序资源以及享受网格提供的各种服务,而且使研究开发人员不受计算机平台与地域的限制,即可选取所关心的预报区域、预报时效、时间步长、物理过程参数化方案等对数值模式本地化,同时解决了经济条件相对落后地区计算资源不足的问题,为高原地区气象部门探索研究资源共享的管理制度和运行机制创造了条件。 相似文献
17.
18.
本文针对气候监测预测分析系统（CIPAS3.0）数据环境的系统架构、总体设计，提出系统实现的若干关键技术并进行深入分析。CIPAS3.0作为国家气候中心面向气候监测、预测、诊断业务的核心业务系统，其数据支撑环境已全面融入气象大数据云平台“天擎”，针对不同存储格式的数据源，建立了以GBASE和PostgreSQL底层存储架构为基础的气候专题数据库，采用基于配置文件的可插拔数据加工处理框架，并提供了具有数算一体能力的数据访问接口。CIPAS数据环境设计采用OBS（Object Storage Service）对象存储进行产品的管理，同时针对数据产品完整性和分布式集群管理建立了全流程的监控系统，实现了数据从采集、入库、存储、加工处理、访问、监控等各环节的支撑作用。目前，CIPAS3.0数据环境已投入业务使用，其建设成果在国家级业务单位和试点省份的试用显示出其在支撑业务应用能力与发展前景方面具备较好的基础。 相似文献
19.
针对基层气象台站气象服务工作对气象信息保障的需求,基于中国气象局卫星广播系统CMACast小站数据接收服务器及其所接收气象资料,设计并开发CMACast内蒙古气象信息Web平台,将卫星下发的气象资料进行解析、可视化和转储,结合Web、Android以及NCL等多种技术,最终实现了Linux下的气象资料可视化和跨平台Web访问及移动终端访问,具有常用气象实况、预报资料调阅显示及一定的本地化设置功能,为基层气象台站提供了一套由Web平台和智能手机客户端构成的决策支持系统,解决了现场气象服务和人工影响天气等工作中气象资料获取的问题。 相似文献
20.
基于网格计算的MM5系统在青藏高原地区的应用 总被引：1，自引：0，他引：1
论述了网格计算技术及其在气象领域的应用,指出网格的最终目标是资源共享和协同工作.在简述青藏高原地区中尺度数值模式系统建设的基础上,从模式背景、MM5应用系统建设的关键问题及技术路线、科研开发与业务化方案设计、模式的动力和物理方案及预报产品等方面介绍了青藏高原基于网格计算的MM5应用系统,并给出该系统在2006年业务试运行的检验结果,在此基础上总结了基于网格计算的应用系统在资源共享方面的效果.聚合主要高性能计算机系统的计算能力,构建一个国家级气象高性能计算机管理与应用网络平台,实现多集群系统的网格化全局管理和资源共享,不仅使参加网格计算项目的各个网格用户通过浏览器随时随地、安全、方便地访问网格上的计算、存储、数据和程序资源以及享受网格提供的各种服务,而且使研究开发人员不受计算机平台与地域的限制,即可选取所关心的预报区域、预报时效、时间步长、物理过程参数化方案等对数值模式本地化,同时解决了经济条件相对落后地区计算资源不足的问题,为高原地区气象部门探索研究资源共享的管理制度和运行机制创造了条件. 相似文献