【摘要】：地質(zhì)調(diào)查數(shù)據(jù)主要由結(jié)構(gòu)化和非結(jié)構(gòu)化多樣性的數(shù)據(jù)構(gòu)成。由非結(jié)構(gòu)化多樣性數(shù)據(jù)文件組成的報(bào)告,由于技術(shù)原因,長(zhǎng)期以來(lái)一直以傳統(tǒng)的目錄文件方式進(jìn)行存儲(chǔ)。這種存儲(chǔ)方式導(dǎo)致數(shù)據(jù)的查詢(xún)、統(tǒng)計(jì)、更新等操作不但低效,而且非常不利于檢索、查詢(xún)、挖掘等應(yīng)用,使得數(shù)據(jù)服務(wù)能力極低。通過(guò)把Hadoop生態(tài)體系融入中國(guó)地質(zhì)調(diào)查云平臺(tái)架構(gòu),基于Hadoop HDFS和HBase存儲(chǔ)架構(gòu),建立非結(jié)構(gòu)化地質(zhì)數(shù)據(jù)基礎(chǔ)內(nèi)容庫(kù)存儲(chǔ)組織模式,采用Lucene全文搜索引擎架和地質(zhì)領(lǐng)域本體詞庫(kù)構(gòu)建快速隨機(jī)訪問(wèn)的索引文件機(jī)制,改變了多樣化、碎片化的復(fù)雜地質(zhì)調(diào)查非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)、閱讀、搜索和應(yīng)用模式,為智能地質(zhì)調(diào)查提供精確、快速服務(wù)奠定基礎(chǔ)。
[Abstract]:Geological survey data are mainly composed of structured and unstructured data. The report composed of unstructured diversity data files has been stored in traditional directory files for a long time due to technical reasons. This storage method not only leads to inefficient operation of data query, statistics and update, but also is not conducive to the application of retrieval, query and mining, which makes the ability of data service extremely low. By integrating the Hadoop ecosystem into the cloud platform of China Geological Survey, and based on the storage structure of Hadoop HDFS and HBase, the organization model of unstructured geological data basic content repository is established. The Lucene full-text search engine frame and geological domain ontology lexicon are used to construct the fast random access index file mechanism, which changes the storage, reading, searching and application mode of diversified and fragmented unstructured data of complex geological survey. Provide accurate and fast service for intelligent geological survey.
【作者單位】： 中國(guó)地質(zhì)調(diào)查局發(fā)展研究中心;國(guó)土資源部地質(zhì)信息技術(shù)重點(diǎn)實(shí)驗(yàn)室;武漢中地?cái)?shù)碼科技有限公司;中國(guó)地質(zhì)調(diào)查局西安地質(zhì)調(diào)查中心;
【基金】：中國(guó)地質(zhì)調(diào)查局項(xiàng)目(編號(hào):12120115073201、1212011120436、1212011120449)
【分類(lèi)號(hào)】：P628.1

【參考文獻(xiàn)】

相關(guān)期刊論文 前8條

1 吳信才;徐世武;萬(wàn)波;吳亮;;新一代的軟件結(jié)構(gòu)T-C-V結(jié)構(gòu)[J];地球科學(xué)(中國(guó)地質(zhì)大學(xué)學(xué)報(bào));2014年02期

2 王風(fēng);楊璐璐;;基于Hadoop軟件框架下海量數(shù)據(jù)集群處理的探究[J];長(zhǎng)沙通信職業(yè)技術(shù)學(xué)院學(xué)報(bào);2013年04期

3 陳吉榮;樂(lè)嘉錦;;基于Hadoop生態(tài)系統(tǒng)的大數(shù)據(jù)解決方案綜述[J];計(jì)算機(jī)工程與科學(xué);2013年10期

4 涂新莉;劉波;林偉偉;;大數(shù)據(jù)研究綜述[J];計(jì)算機(jī)應(yīng)用研究;2014年06期

5 任樹(shù)懷;;LUCENE搜索算法剖析及優(yōu)化研究[J];圖書(shū)館雜志;2014年12期

6 李超嶺;楊東來(lái);李豐丹;劉暢;劉修國(guó);于慶文;呂霞;;中國(guó)數(shù)字地質(zhì)調(diào)查系統(tǒng)的基本構(gòu)架及其核心技術(shù)的實(shí)現(xiàn)[J];地質(zhì)通報(bào);2008年07期

7 劉智慧;張泉靈;;大數(shù)據(jù)技術(shù)研究綜述[J];浙江大學(xué)學(xué)報(bào)(工學(xué)版);2014年06期

8 張智;龔宇;;分布式存儲(chǔ)系統(tǒng)HBase關(guān)鍵技術(shù)研究[J];現(xiàn)代計(jì)算機(jī)(專(zhuān)業(yè)版);2014年32期

【共引文獻(xiàn)】

相關(guān)期刊論文 前10條

1 王蓓蓓;;淺談面向?qū)ο蠹夹g(shù)在1:5萬(wàn)戰(zhàn)略性礦產(chǎn)遠(yuǎn)景調(diào)查地質(zhì)圖空間數(shù)據(jù)庫(kù)建設(shè)中的應(yīng)用[J];出國(guó)與就業(yè)(就業(yè)版);2011年12期

2 倪平澤;劉修國(guó);李超嶺;李豐丹;;3D礦床建模技術(shù)在數(shù)字礦產(chǎn)勘查中的應(yīng)用[J];地球科學(xué)(中國(guó)地質(zhì)大學(xué)學(xué)報(bào));2010年03期

3 單永杰;;數(shù)字礦產(chǎn)遠(yuǎn)景調(diào)查原始資料歸檔探討[J];甘肅地質(zhì);2011年02期

4 劉暢;劉園園;李健強(qiáng);;北斗衛(wèi)星技術(shù)在數(shù)字地質(zhì)調(diào)查系統(tǒng)中的集成開(kāi)發(fā)與應(yīng)用[J];地質(zhì)力學(xué)學(xué)報(bào);2012年03期

5 高光大;王永志;屈紅剛;繆謹(jǐn)勵(lì);宋越;;礦產(chǎn)資源領(lǐng)域三項(xiàng)基本國(guó)情調(diào)查成果數(shù)據(jù)的綜合集成與應(yīng)用[J];吉林大學(xué)學(xué)報(bào)(地球科學(xué)版);2013年04期

6 王芳琴;武雪梅;金萍秀;孫金鳳;張亞紅;;DGSS及其相關(guān)軟件在礦產(chǎn)勘查中的應(yīng)用[J];甘肅地質(zhì);2014年01期

7 曾玉珠;吳小東;;本科計(jì)算機(jī)專(zhuān)業(yè)培養(yǎng)云計(jì)算應(yīng)用型人才實(shí)踐[J];電腦編程技巧與維護(hù);2014年08期

8 肖筱華;周棟;;大數(shù)據(jù)技術(shù)及標(biāo)準(zhǔn)發(fā)展研究[J];信息技術(shù)與標(biāo)準(zhǔn)化;2014年04期

9 常海防;;基于Hadoop的運(yùn)營(yíng)商流量經(jīng)營(yíng)分析系統(tǒng)建設(shè)方案[J];電信工程技術(shù)與標(biāo)準(zhǔn)化;2014年07期

10 胡宇舟;范濱;顧學(xué)道;繆力;;基于Hadoop的云計(jì)算在清分系統(tǒng)中的應(yīng)用[J];電子世界;2014年13期

相關(guān)會(huì)議論文 前2條

1 李天楓;姚欣;王勁松;;大規(guī)模網(wǎng)絡(luò)異常流量實(shí)時(shí)云監(jiān)測(cè)平臺(tái)研究[A];第29次全國(guó)計(jì)算機(jī)安全學(xué)術(shù)交流會(huì)論文集[C];2014年

2 周婕;鄒游;;大數(shù)據(jù)背景下的城鄉(xiāng)規(guī)劃研究思考[A];第十七屆中國(guó)科協(xié)年會(huì)——分16　大數(shù)據(jù)與城鄉(xiāng)治理研討會(huì)論文集[C];2015年

相關(guān)博士學(xué)位論文 前1條

1 倪平澤;銅礦床地質(zhì)統(tǒng)計(jì)學(xué)模型構(gòu)建及其應(yīng)用模式研究[D];中國(guó)地質(zhì)大學(xué);2010年

相關(guān)碩士學(xué)位論文 前10條

1 王明;西藏羅布莎鉻鐵礦床地質(zhì)特征及三維模型的建立和應(yīng)用[D];中國(guó)地質(zhì)大學(xué)（北京）;2010年

2 楊程;基于地質(zhì)統(tǒng)計(jì)學(xué)的金堆城鉬礦礦床品位分布研究[D];西安建筑科技大學(xué);2010年

3 張建鏗;基于MapGIS的礦產(chǎn)資源儲(chǔ)量動(dòng)態(tài)計(jì)算模塊的研究和實(shí)現(xiàn)[D];中南大學(xué);2012年

4 郭浩;面向數(shù)字地質(zhì)調(diào)查的移動(dòng)GIS平臺(tái)關(guān)鍵技術(shù)研究[D];北京林業(yè)大學(xué);2013年

5 裴艷云;基于GeoGIS的數(shù)字地質(zhì)調(diào)查系統(tǒng)的研建[D];北京林業(yè)大學(xué);2013年

6 楊麗;地質(zhì)平/剖面圖自動(dòng)成圖系統(tǒng)研究與實(shí)現(xiàn)[D];中南大學(xué);2013年

7 郝增勇;基于Hadoop用戶(hù)行為分析系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[D];北京交通大學(xué);2014年

8 張夏旭;基于Hadoop的多星表存儲(chǔ)與交叉證認(rèn)的設(shè)計(jì)與實(shí)現(xiàn)[D];山東大學(xué);2014年

9 趙玉龍;基于Hadoop的海量小文件處理性能研究與優(yōu)化[D];內(nèi)蒙古科技大學(xué);2014年

10 趙靜;云計(jì)算平臺(tái)Hadoop負(fù)載均衡研究[D];河北工程大學(xué);2014年

【二級(jí)參考文獻(xiàn)】

相關(guān)期刊論文 前10條

1 孫其博;劉杰;黎，

本文編號(hào)：2359968