首页 | 本学科首页   官方微博 | 高级检索  
相似文献
 共查询到18条相似文献,搜索用时 656 毫秒
1.
基于SOA的地球系统科学数据共享平台架构设计与实现   总被引:11,自引:2,他引:9  
为了能够有效整合集成分散、异构的地球系统科学数据资源,为用户提供“一站式”的数据共享服务,需要一种分布式的数据共享平台.本文首先分析了分布式地球系统科学数据共享平台对互操作的需求,然后设计了基于SOA(Service-Oriented Architecture)的分布式地球系统科学数据共享平台的总体架构.该平台由物理上分布、逻辑上统一的总中心、认证中心和分中心共同构成,采用Web Services技术将数据共享核心业务封装成一系列的Web服务:数据中心信息同步服务、元数据推送与管理服务、多源异构数据访问服务等.通过Web服务这种松散的耦合机制,不仅能够很好地实现数据中心之间的互操作,而且具有良好的开放可扩展性,可快速纳入新的异构系统作为分布式数据共享平台的节点,其数据共享核心服务,也可以方便地集成到其他应用系统中,为它们提供数据共享的功能.最后介绍了Web服务实现与部署的方法.分布式的地球系统科学数据共享平台已经应用到国家科技基础条件平台建设项目:地球系统科学数据共享网中.截止到2007年底,通过共享平台成功整合了10.23TB的分散数据资源,为3万多用户提供17TB的数据服务.  相似文献   

2.
地球系统科学数据共享研究与实践   总被引:4,自引:2,他引:2  
分布式、异构科学数据的整合集成与"一站式"共享服务是科学数据共享的关键和难点。首先,提出"创建地球系统科学数据共享联盟,共建、共享"的分散数据资源整合理念和按"总中心-分中心-数据资源点"三个层次的整合架构,然后,在组织模式上保障分布式数据资源的有效整合。即通过"元数据集中管理,数据体分散存储"的策略,从技术上保障分布式数据资源的快速整合。针对地球系统科学不同学科数据资源的特性,设计了地球系统科学数据核心元数据标准及扩展方案,利用MVC(元数据标准模型-显示视图-操作函数)模式实现多标准地学元数据的统一管理和自适应显示。最终,研究面向SOA的分布式地球系统科学数据共享平台,通过"一个总中心,认证中心和若干个分中心",形成物理上分布、逻辑上统一的分布式服务网络,从而为用户提供"一站式"的数据共享服务。  相似文献   

3.
科学数据共享实践:以国家地球系统科学数据中心为例   总被引:2,自引:0,他引:2  
地球系统科学是一门综合性交叉学科,起源于全球变化研究,受益于遥感技术进步,现已进入大数据时代,人工智能技术成为解决地球系统科学前沿问题的新手段。科学数据共享是推动科学发展、提升数据价值的关键,经过长期的探索和实践,全球已形成完善的数据资源管理政策与机制、持续的数据共享服务体系、多元化的科学数据整合模式,并且新的理念不断推动数据共享创新发展,其中“可发现、可访问、可互操作和可重用”原则和数据出版备受推崇。我国颁布了国家层面的政策法规,着重推动国家级科学数据中心建设、科技项目数据资源汇交及数据出版。借鉴国外数据共享经验,结合国内实际发展情况,我国探索出具有中国特色的地球系统科学数据资源分类体系,在元数据、分布式互操作、大数据分析和共享服务等关键技术方面都取得了重大突破。本文以国家地球系统科学数据中心为例,系统梳理了国内地球系统科学领域的数据共享实践进展,详细介绍了国家在地球系统科学领域的数据共享实践及其成效。国家地球系统科学数据共享工作已探索形成成熟稳定的运行服务机制、研制出适用于多源分散地球系统科学数据的标准体系、 建成多学科多时空尺度的地球系统科学数据库群、自主研发海量异构数据共享网络技术体系与服务系统,促进了地球系统科学的科学发展,同时也推动了数据共享理念的传播与推广。然而,数据孤岛现象、共享服务系统标准化程度低、系统技术标准未对接国际规范等问题仍然较为突出,阻碍了地球系统科学数据开放与共享。未来,随着共享个性化需求被激活,定制化的“数据+知识”服务有望成为主流趋势,将给数据共享带来新的机遇和挑战。  相似文献   

4.
中国可持续发展信息共享网经历了“九五”、“十五”国家计划的支持,已经集中了我国多部门、多领域的海量数据,实现了对外提供可持续发展数据信息共享服务模式;然而,系统目前只是针对用户提供数据信息服务,对于大多数非专业用户而言,一般多使用指标作为分析的数据源,难以直接使用系统中的数据进行综合分析,因此如何对数据进行有效的组织管理,实现数据库中数据到分析指标间的映射关系,是系统面临急需解决的问题;针对这一问题,提出了可持续发展数据库组织管理模式,针对可持续发展指标的特点,提出了固定指标与动态自定义指标概念,并根据两种指标的特点分别设计了相应的指标到数据的映射模式与存储方法,实现了系统由基于数据的服务转变为基于指标的服务模式,使用户能够更好地使用该系统进行可持续发展分析并提高系统数据的使用率。  相似文献   

5.
国家地球系统科学数据共享平台(以下简称"本平台")是以分散科研数据整合共享为重点的科技部、财政部首批通过认定的23个国家科技基础条件平台之一。1科技资源概况本平台数据资源以陆地表层系统数据为核心,涉及固体地球、日地系统数据等,总数据量  相似文献   

6.
Web环境下地学数据共享用户行为模式分析   总被引:1,自引:0,他引:1  
了解科学数据共享用户行为特征对实现高效、精准的数据共享服务具有重要的参考意义。本文基于国家地球系统科学数据共享平台网站服务器日志及服务记录数据,利用空间数据挖掘及Web使用挖掘技术,探索地球系统科学数据共享用户行为模式。在数据预处理阶段,完成用户识别、会话识别、位置识别,并对数据进行空间建模、空间数据库建库。在数据挖掘阶段,分别对用户产生的网页浏览数、会话数、数据集浏览数为对象进行空间“热点”分析,识别用户行为的地域差异。针对用户数据浏览和下载行为,采用FP-growth算法对用户——数据之间进行关联规则挖掘,发现用户对数据关注和使用的高频规律。分析结果表明:(1)该共享平台用户地在国内各省市均有分布,用户最多的3个省(市)分别为北京市、山东省、江苏省,该分布与国内高校学生分布相关程度不高,但与“211工程”高校学生的空间分布相关度较高;(2)空间“热点”分析表明,北京、天津及河北北部无论在网页浏览、数据浏览还是会话量上都是“热点”区域,但识别的“冷点”区域有较大不同,尤其是数据访问“冷点”分布较广,如南方沿海省份、河南省、山东省、四川省等;(3)关联规则挖掘发现多个数据浏览高频项目集以及关联规则。数据下载高频项与数据浏览高频模式较好吻合,但下载行为未表现出明显关联规则。本文提供了一种结合Web使用挖掘和空间数据挖掘的用户行为模式挖掘方法,该方法也可用于其他类型网站的数据挖掘。  相似文献   

7.
面向地震行业,以交互式门户网站提供零障碍、一站式、可视化的地震科学数据共享服务,以使用便捷、高效稳定、扩展性好为目标,对地震数据共享服务平台的系统架构、服务端架构、数据库及其功能进行设计。基于国家科学数据共享工程要求,规范化地震数据检索、可视化、共享模式,实现了多源地震数据共享服务平台的原型系统。系统面向地震行业用户开放,可以促进行业业务工作的开展和地震科技的研究,全面提升地震科学数据的交换、共享、产出效益。  相似文献   

8.
地质资料是极其宝贵的信息资源,也是开展地质工作的重要基础,利用大数据、云计算等技术,对地质成果资料进行集成与应用,有助于发挥地质成果资料的最大效能。通过全面系统收集山东省所有地质资料成果数据、成果图件、相关科研报告和地质论文,进行纸质资料扫描建库,利用ETL工具完成多源异构地质资料数据整合,完成山东省地质资料成果集成工作;研发"地质资料数据服务系统",实现地质资料共享应用,系统结合云平台的设计思路,采用SOA架构,基于Hadoop和Spark进行搭建,支持数据库、文件等多源数据导入,提供地质资料空间数据查询检索、资料数据统计、空间分析、数据发布等功能,为不同专题的地质系统产品提供基础服务。地质资料数据服务系统为建立山东省"地质云"奠定基础。  相似文献   

9.
本文在叙述了“数字地球”的产生背景的基础上,着重分析了“数字地球”的科学内涵、“数字地球”给地球科学带来的新契机和我们应有的对策.笔者认为,“数字地球”是国家利益和现代科学技术的综合产物;“数字地球”的科学内涵可分为宏观战略层、技术实现层和应用层三个层面;“数字地球”是一个战略,并不能代替相关的学科和技术领域,现有的科学技术水平也不能完全满足“数字地球”的要求;“数字地球”的兴起给地球科学带来了大好机遇,使地球科学在对地球整体性认识、数字虚拟、对地球复杂巨系统的研究等方面都大大深化;面临“数字地球”的挑战,我们应该采取的策略是积极借鉴数字地球的思想,在继续大力发展现有的相关学科和技术领域的同时,努力进行自主创新,力求通过“中国数字地球”或“数字中国”的建设来占领制高点.  相似文献   

10.
遗址保护的多学科综合研究特征以及考古学的不可逆性、不确定性,使遗址数据的共享成为一项紧迫的工作。本文通过对遗址保护过程的分析及遗址保护相关单位的分类,提出了遗址数据"授权使用,分级共享;远程使用、保证安全;限时使用,有偿服务"的共享原则和集中管理的共享服务模式。结合当前云计算和大数据的发展趋势,研究提出了基于云计算平台的遗址保护数据共享平台总体框架,并对总体框架中的遗址考古公共服务云GIS平台进行功能设计,以石峁遗址为例,实现遗址数据资料在公共服务平台上的发布、展示、查询浏览及遗迹模拟展示。  相似文献   

11.
基于WSRF的网格空间服务及其管理   总被引:1,自引:0,他引:1  
网格技术与空间信息技术的结合,产生了空间信息网格。空间信息网格能够汇集各种空间信息资源,进行一体化管理,支持资源共享,提供"按需服务"的能力。"按需服务"要求能根据用户的要求,提供多样性服务,即能自动发现所有满足用户需求的空间信息资源或其组合,并评估各个资源或其组合,按一定目的选择资源,提供服务。但是由于网格的动态性,使得使用者较难得到现势性很好的空间信息资源的信息,直接影响了空间信息网格"按需服务"的能力。将传统的空间信息服务技术直接融入网格不能解决这一问题。为了解决该问题,提高"按需服务"的可靠性,本文根据支持资源状态和服务分离的网格框架W SRF,提出了W SRF设计网格空间服务及其管理的方案。即在空间信息资源节点,除了将信息资源以标准服务的方式提供使用,还以W SRF的方式组织资源的状态并提供访问和订阅;网格中央节点收集、维护和管理各子节点的服务和资源状态信息,提供信息访问接口以支持"按需服务"所必需的资源选择。最后按照该方案实现了一个简单的空间数据网格。  相似文献   

12.
面向地学计算的资源环境科学数据共享平台的设计   总被引:1,自引:0,他引:1  
目前,在我国的资源环境科学领域中,数据、计算和服务等各种资源存在着共享少、冗余大、标准杂等问题。而信息技术的飞速发展给资源环境科学领域的信息技术基础--地理信息系统带来强大的技术支持。鉴于此,本文以中国科学院资源环境科学数据共享平台建设为例,系统地介绍面向地学科学计算的资源环境科学数据共享平台的设计以及所采用的关键技术--元数据标准/元数据数据库技术、XML/GML技术以及网络会议/多媒体技术等。  相似文献   

13.
农业信息化建设过程中,各信息系统数据源的异构性、分布性和自治性限制了农业信息资源的有效共享。为了解决这一难题,结合面向服务体系结构和Web服务技术,设计一种可以共享普通数据,地理信息系统空间数据和移动设备通过全球移动通讯系统传输的数据的服务中间件,并成功应用于海南热带农业信息服务系统的开发应用中。通过实际使用证明,该中间件有效地解决了该地区农业信息资源的共享问题。  相似文献   

14.
随着云技术的飞速发展,"一切资源皆服务"成为可能,"数字地球"的实现也不例外。观测技术的快速发展使数据资源变得很丰富,但数据利用率低是普遍存在的现象,如何完成空间数据信息的再加工是亟待解决的问题,在云时代,具有数据处理功能的服务是解决此问题的方法之一,如何描述、发现和集成数据处理服务,从云端服务池中发现最优的服务是其关键所在。为了提高服务的查全率和查准率,引入了本体的概念,服务的语义描述很大程度上提高了空间数据处理服务的应用范围,缓解了非专业用户和专业人员之间的沟通障碍。本文分析了相关领域服务匹配算法的优缺点,结合GP服务自身的特点,提出了本体的GP服务的多层次发现算法:通过包含关系和线索关系完成服务间隐含关系的挖掘,主要是父子关系和前驱后继关系的表述;扩展传统本体表达模型,增加包含和线索关系,为服务的查找做准备;服务的多层次查找,第一次筛选主要针对服务预处理中包含和线索关系的表达查找,第二次筛选利用神经网络的突触原理,结合传统的服务匹配算法,完成服务的准确查找。经试验证明,此方法大大地提高了服务的查准率和查全率,具有重要的实践意义。  相似文献   

15.
 为了能直观、形象和动态地反映不同区域税收状况的空间分布规律和变化趋势,提高异构税收征管GIS系统的数据共享和互操作性能,采用GIS企业级中间件与开放地理信息联盟(OGC)规范的GIS Web服务(GIServices)相互集成的方式,构建一种面向服务架构(SOA)的税收征管WebGIS系统(STAXGIS)。STAXGIS是一致性的业务模型和信息模型,通过GIS企业级中间件提供空间数据转换、税收业务处理与税收空间分析等高级服务功能,并采用GIServices提供税源查询与定位、税收专题分析、税务查询与申报等方面的信息服务。STAXGIS采用J2EE 4层框架(即数据层、应用服务层、Web服务层和客户层)实现其部署与分层管理,这与传统税收征管GIS系统相比,STAXGIS的征管效率和可扩展性大大提高。以福建省福州市为例的研究表明,STAXGIS可增强现有分散管理的异构税收征管GIS系统在分布式环境下的信息共享能力和互操作性,提高异构环境下税收征管空间分析的整体效率,并向各级税务管理部门提供直接或间接的决策支持。  相似文献   

16.
网络环境下,如何让用户快速发现所需数据是地学数据共享平台长期面临的挑战之一。本文基于国家地球系统科学数据共享平台网站服务器日志数据获取用户搜索行为及数据集访问行为,使用聚类算法挖掘用户行为模式,并基于会话聚类 模式开发在线搜索和访问预测算法。在数据预处理阶段,对原始服务器日志数据进行清洗、用户识别、用户会话识别、搜索词提取。在模式挖掘阶段,采用DBSCAN算法对会话进行聚类。考虑到会话向量值的二元性,聚类算法中的距离采用Jaccard距离函数计算。视每个会话聚类包含的搜索词集合为一个文本,所有用户历史搜索词集合为语料库,统计各聚类中搜索词的TF-IDF值。在线搜索推荐,以搜索词检索各聚类中TF-IDF值,返回TF-IDF值最高的搜索词所属聚类,并给出该聚类的高频项目作为推荐。在线访问推荐,则以用户实时访问向量为查询向量,计算该向量与聚类中心的聚类。根据聚类排序,给出距离最近的聚类,并产生该聚类中高频项目作为推荐。实验结果表明基于TF-IDF和聚类的搜索推荐有较高的准确率和召回率,访问推荐效果基于高频统计的推荐有较大提高。研究可得出以下结论:① 地学共享网用户访问和搜索行为体现了专业性的特点,其行为较普通网站用户可预测性更好;② 对于地学数据共享用户行为预测,需明确定义用户行为,并采用合适的距离函数描述行为相似性;③ 通过搜索词TF-IDF值来预测用户数据需求的方法可行,以此产生的推荐可作为搜索结果的补充。本研究可服务于地学领域数据共享平台建设,提高共享服务质量,也可为其他领域科学数据共享提供技术方法借鉴。  相似文献   

17.
地理数据的信息共享具有重要性、基础性与公益性等特征.本文针对现有地理数据共享效应的评价研究较为薄弱的现状,提出一种面向用户的地理数据共享评价策略.该方法设计了影响共享评价的指标因子,以共享范围、共享质量、社会效益、经济效益、数据安全性,以及共享服务作为一级因子,并在一级因子下建立二级因子.鉴此,分别采用层次分析法、专家...  相似文献   

18.
面向服务的地学多源数据虚拟整合及其可视化分析   总被引:1,自引:0,他引:1  
科学数据共享的推进,给科研人员带来了前所未有的科研契机,但是依然没有摆脱"搜集数据-下载数据-整理分析数据"的科研流程,这种传统的科研流程已经严重阻碍了科研效率的产出,科研人员对信息和知识的需求已经远远大于对数据本身的需求,而要实现对信息和知识的挖掘,多源数据的实时整合与在线可视化分析是其关键。本文选择社会经济研究主题,以中国社会经济统计数据、国家基础地理行政区划矢量数据为例,并结合ESRI和Google的全球地图与影像服务,采用在线虚拟整合的方法,探讨了面向服务的地学多源数据集成方案及其可视化分析,以期达到快速的知识发现与信息获取。研究结果表明:面向服务的技术架构虽然已经成熟,相对于传统的数据共享和应用系统在数据接口开放性、集成性和应用扩展性等方面具有明显的优势,能够切实解决多源异构数据的整合问题,但是技术的成熟并不等于应用的成熟,广泛而成熟的应用不但需要技术的支撑,更需要友好和智能的操作界面,这方面还需要较长的时间去探索。从本文的应用实例来看,在面向服务技术的深入应用过程中,还存在着不同来源数据单位不统一、操作流程复杂、服务规范不统一等问题。同时,在不同类型服务的标准化、操作智能化和多源服务的功能应用模块化等方面还需要大量的实践,才能进一步推进地学信息化科研环境的建设,以全方位为科研人员服务。  相似文献   

设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号