首页 | 本学科首页   官方微博 | 高级检索  
相似文献
 共查询到19条相似文献,搜索用时 250 毫秒
1.
数据预处理技术在地学大数据中应用   总被引:3,自引:2,他引:1  
大数据时代随着数据的爆发式增长,在带来可供研究的海量数据的同时,也带来巨量的噪声和冗余数据。在地学领域,由于研究方向和技术方法手段的多样化,产生了数据量巨大和类型众多的地学数据集合。在地学信息的研究过程中,经常碰到地学信息孤岛,分图幅地学数据边界系统误差和地学文档的非结构化问题。在对地学数据进行信息的提取和挖掘之前,必须根据研究目的对地学大数据进行预处理,使冗余、复杂的大数据转为结构化、准确、可用的数据。本文以地学大数据的预处理技术为切入点,从地学数据交互标准与语义、数据调平、地质图接边和文本结构化等四个研究方面,分析阐述目前地学大数据挖掘方面存在的问题及主要的解决手段,同时也对多元数据融合在大数据中的应用进行了阐述。希望通过本文对地学大数据预处理技术的探讨,能对地学大数据的挖掘有所帮助。  相似文献   

2.
大数据背景下地质云的构建与应用   总被引:8,自引:3,他引:5  
陈建平  李婧  崔宁  于萍萍 《地质通报》2015,34(7):1260-1265
地质学属于数据密集型科学,并与地球科学面临的问题息息相关。已经收集的和将要收集的大量数字国土相关数据,由于科学研究的需要,正在不断加以检验和扩充。大数据时代背景下,中国国土资源数字化、信息化的战略行动具有深远意义,大数据的相关技术应用为实现地质工作的现代化和信息化提供了有效的支撑。重点介绍大数据背景下的"地质云"构建理念与方法,以及大数据在地学领域的应用。大数据为非结构化、半结构化的地质数据带来了新的处理方法与理念。地质云的构建旨在探索以需求带动的地质核心数据的应用,挖掘非结构化数据的新数据信息,以支撑国土资源管理决策。  相似文献   

3.
地质调查正在从"数字化"走向"智能化",需要在大数据思维的指导下,面向非结构化数据开展机器阅读和地质知识的自动提取.地学命名实体和关系联合提取是当前研究的难点和核心.本文采用基于大规模预训练中文语言模型的BERT—BiLSTM—CRF方法开展岩石描述文本命名实体与关系联合提取.首先,通过收集数字地质填图工作中的剖面测量...  相似文献   

4.
数字填图技术理论基础   总被引:5,自引:0,他引:5  
针对数字填图技术多学科性的技术特点,介绍了有关数字填图技术的研究内容、数字填图系统概念与组成及其对数据的要求.在此基础上重点介绍了RGMAP数字填图系统的PRB数据模型及PRB基本过程与过程扩展机制问题.  相似文献   

5.
崔宁  陈建平 《地质通报》2015,34(7):1365-1368
从大数据时代背景出发,提出研究地质非结构化数据的战略意义。通过分析地质数据的特点,发现其大数据性。以JPG图件为例,展开国内外研究现状分析和行业应用分析。最后通过分析地质JPG图件数据的使用情况,提出地质JPG图件数据战略规划。  相似文献   

6.
PRB数字地质填图前期数据准备及PRB过程字典库建立   总被引:8,自引:0,他引:8  
PRB数字地质填图前期数据准备包括软硬件准备、地形图数值化、前人资料的收集和室内录入、多元数据的叠加和整合、PRB过程字典库的编制等方面.PRB过程字典库由结构化字典、填缺式字典和描述性字典3部分组成.结构化字典和填缺式字典可直接查询, 为1~1.5级字典, 描述性字典为2级字典, 需要2级查询.不同的字典类型均以文本文档的形式存在, 文件名后缀为.DIC.   相似文献   

7.
RGMAP的多源数据应用模式研究   总被引:1,自引:0,他引:1  
RGMAP数字地质调查系统在区域地质填图中,为实现物、化、遥等多源数据间的综合分析提供了基础平台.在分析当前数据融合于地学中的应用基础上,结合RGMAP的功能特点,介绍了该系统的应用方式和应用前景.  相似文献   

8.
9.
智能地质调查大数据应用体系架构与关键技术   总被引:7,自引:0,他引:7  
地质调查数据主要由结构化和非结构化多样性的数据构成。由非结构化多样性数据文件组成的报告,由于技术原因,长期以来一直以传统的目录文件方式进行存储。这种存储方式导致数据的查询、统计、更新等操作不但低效,而且非常不利于检索、查询、挖掘等应用,使得数据服务能力极低。通过把Hadoop生态体系融入中国地质调查云平台架构,基于Hadoop HDFS和HBase存储架构,建立非结构化地质数据基础内容库存储组织模式,采用Lucene全文搜索引擎架和地质领域本体词库构建快速随机访问的索引文件机制,改变了多样化、碎片化的复杂地质调查非结构化数据的存储、阅读、搜索和应用模式,为智能地质调查提供精确、快速服务奠定基础。  相似文献   

10.
自开展数字地质填图工作以来,获得了大量的数字地质填图数据库资料,但这些数据库资料的}[交目前仍没有标准规范,影响了数字填图地质资料的汇交和验收工作。本文提出了数字地质填图数据库资料的接收验收技术要求,包括数字地质填图数据库资料汇交内容、组织形式、质量要求及数据验收等几个方面的内容。本技术要求的研究和探索为地质资料汇交人和地质资料管理机构接收、验收数据填图地质资料提供了依据。  相似文献   

11.
大数据技术的高速发展为地质数据挖掘与分析带来了新的机遇。借鉴大数据技术的思想,提出了一种多源异构的地质数据集成方法,为数据挖掘、地质数据信息化服务提供了技术基础。针对北京周口店研究区,建立了其野外地质三维综合信息平台,将各类地表、地质体、地质信息等结构、半结构、非结构数据集成到统一的平台系统中,实现了研究区域相关地质数据的集成管理、可视化浏览、查询与分析,为大数据方法在地质领域的应用提供了新的思路。  相似文献   

12.
地质调查成果信息化建设方法探索——基于数字填图技术   总被引:2,自引:2,他引:0  
地质调查项目信息化建设是实现地质调查有效服务国家生态文明建设重大需求的支撑体系之一。数字填图技术是地质调查项目信息化建设中的关键技术,使得野外数据采集、数据处理、成果输出等全流程信息化得以实现。文章针对地质调查项目信息化建设过程中的技术难点,应用最新的数字填图系统平台,总结出一套简明实用的地质调查项目信息化建设方法:首先,优选符合地质调查精度要求的数据源,并采用2000国家大地坐标系;而后,运用数字填图技术系统中DGSGIS工具下载、配准所选取数据源影像作为地理底图;最后,使用数字填图系统建设完成地质调查项目空间数据库。该方法技术流程简洁、实用性强,对地质调查项目信息化建设具有一定指导意义。   相似文献   

13.
基于地质大数据理念的模型驱动矿产资源定量预测   总被引:4,自引:2,他引:2  
于萍萍  陈建平  柴福山  郑啸  于淼  徐彬 《地质通报》2015,34(7):1333-1343
在大数据科学成为新的科学范式的背景下,基于地质大数据理念,提出了模型驱动的矿产资源定量预测评价的新方法,以及模型流程建模技术贯穿整个矿产资源预测评价过程的新思路,以地质理论指导地质大数据分析和计算机技术实现地质大数据挖掘2条主线展开研究,实现了面向地质大数据的数据挖掘与矿产资源的定量预测评价。结合青海祁漫塔格铁铜多金属矿床、山东焦家金矿床、云南个旧锡铜多金属矿床等不同地区、不同成矿类型和矿种开展了应用研究,完成了找矿模型工作流的设计与实现,进行了有利成矿信息的挖掘,取得了较好的效果,为大数据时代数字地质研究提供了新的思路。  相似文献   

14.
地质大数据特点及其合理开发利用   总被引:1,自引:0,他引:1  
大数据的合理开发与利用将开辟一个新的认知空间,提出解决各种实际问题的新模式,催生一个前所未有的数字经济新领域和开创一个新的人类生活方式。"数学地质"与"信息技术"结合形成"数字地质"。"数字地质"是地质科学的"数据科学"。地质数据科学是用数据的方法研究地质学,根据地质数据的特点和地质工作的需要研究和开发利用地质大数据。本文概述了地质数据的混合性、抽样性、因果性、时空性、多态性和多元性等主要特点,提出地质大数据的开发利用宜首先建立"知识库",据此建立"数据库""模型库"和"方法库",以便有针对性地做到获取、分析、研究和应用大数据。  相似文献   

15.
PRB数字地质填图技术研究   总被引:21,自引:1,他引:20  
从近2 0年地质填图中计算机野外数据采集技术研究的现状和存在的问题入手, 在确定地质填图空间数据表达的基础上, 遵循传统地质填图的规律, 在不约束地质学家地质思维的前提下, 既能满足计算机处理的需要, 又能保证地质工作者取全、取准各项地质观测数据, 在描述各类地质信息空间关系的基础上, 创建了数字地质填图过程标准化和规范化的PRB数字填图技术, 并对构成PRB数字填图技术、PRB数据模型、PRB基本过程、PRB基本过程组合的规则、PRB过程的公共机制、PRB过程基本程式、PRB数据操作、PRB字典、三级PRB体系、PRB数据流“栈”、PRB数据质量定量评价体系的PRB数字填图技术与方法体系进行了讨论.基于该项技术开发的数字填图系统和集GPS一体化的野外数据采集设备已在野外填图中推广应用, 实践效果很好.本文是在实践的基础上, 通过对已有研究资料的进一步分析、总结而完成的.   相似文献   

16.
大数据思维是直接从数据入手的一种新的思维方式,其本质是减少甚至完全屏蔽人为因素干扰,让数据说话。以往三维成矿预测中指标体系的建立多采用经验分析法,以地质模型和先验知识指导控矿特征变量取值,其准确性易受到人为影响。本文基于大数据思维,使用数据驱动方法对三维成矿预测中的找矿指标体系进行探索性研究,在钟姑矿田选择4 个大中型典型矿床,直接采用三维空间分析方法对地层和岩体的控矿地质体进行特征分析,通过计算z 轴方向三维距离场、分析岩体顶面隆起凹陷程度形态因素,确定各控矿要素与矿体之间的相关关系,获取定量指标。本研究改变了以往主观经验指导找矿的思路,尝试采用空间数据挖掘方法进行客观数据分析提出找矿指标,提高了找矿指标体系建立的科学性,此方法得到的定量指标体系可直接参与三维找矿预测模型的计算。  相似文献   

17.
1:25万区域地质调查修测的核心任务是挖掘、利用前人资料和对前人资料的二次开发。在1:25万玉林市幅数字地质填图试点的过程中.总结出一套基于数字填图系统的前人地质资料利用与数据采集的工作方法。其工作流程和工作步骤可分为6个阶段:①前期准备阶段;②室内地质资料录八阶段;③野外数字地质调查阶段;④室内资料整理阶段;⑤图件编制阶段;⑥成果提交阶段。该工作方法与传统的地质调查方法相比,提高了地质调查的工作效率和质量,已基本上达到了在1:252万区调修测区推广应用的“实战性”要求。  相似文献   

18.
吕霞  李健强  龚爱华  刘畅  李丰丹 《地质通报》2015,34(7):1323-1332
目前中国地质调查网格结点体系已基本形成,初步实现门户的自治,结点资源与门户资源的共享与协同。随着信息技术的发展,以及云GIS、大数据、北斗等技术在网格平台中的开展、应用,从网格平台基于云架构体系升级入手,阐述了基于云架构非结构化地质数据存储与管理、快速搭建地质调查业务系统中间件和野外地质调查工作管理与安全保障服务等一系列关键技术的研究与实现,为网格平台的下一步发展提供了研究基础。  相似文献   

19.
地质大数据存储技术   总被引:5,自引:1,他引:4  
李婧  陈建平  王翔 《地质通报》2015,34(8):1589-1594
在大数据时代背景下,地质大数据的研究及大数据相关技术为实现地质工作的现代化发展和信息化提供了有效的支撑。而当代大数据发展趋势,就是海量数据的存储及越来越多的事物的数据存在形式。通过梳理大数据处理的关键技术,总结归纳了大数据背景下现有存储技术及数据库的类型。在地质大数据和地质云架构的基础上,讨论适合当前地质大数据的存储技术,地质数据具有多源、多元、异构、时空性、方向性、相关性、随机性、模糊性、非线性等特征。因此,对于存储与管理方式的选择应该是具体问题具体分析,建立多技术支持下的大数据架构,才能满足地质大数据的应用需求。  相似文献   

设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号