【摘要】：地質(zhì)調(diào)查數(shù)據(jù)主要由結(jié)構(gòu)化和非結(jié)構(gòu)化多樣性的數(shù)據(jù)構(gòu)成。由非結(jié)構(gòu)化多樣性數(shù)據(jù)文件組成的報告,由于技術(shù)原因,長期以來一直以傳統(tǒng)的目錄文件方式進行存儲。這種存儲方式導(dǎo)致數(shù)據(jù)的查詢、統(tǒng)計、更新等操作不但低效,而且非常不利于檢索、查詢、挖掘等應(yīng)用,使得數(shù)據(jù)服務(wù)能力極低。通過把Hadoop生態(tài)體系融入中國地質(zhì)調(diào)查云平臺架構(gòu),基于Hadoop HDFS和HBase存儲架構(gòu),建立非結(jié)構(gòu)化地質(zhì)數(shù)據(jù)基礎(chǔ)內(nèi)容庫存儲組織模式,采用Lucene全文搜索引擎架和地質(zhì)領(lǐng)域本體詞庫構(gòu)建快速隨機訪問的索引文件機制,改變了多樣化、碎片化的復(fù)雜地質(zhì)調(diào)查非結(jié)構(gòu)化數(shù)據(jù)的存儲、閱讀、搜索和應(yīng)用模式,為智能地質(zhì)調(diào)查提供精確、快速服務(wù)奠定基礎(chǔ)。
[Abstract]:Geological survey data are mainly composed of structured and unstructured data. The report composed of unstructured diversity data files has been stored in traditional directory files for a long time due to technical reasons. This storage method not only leads to inefficient operation of data query, statistics and update, but also is not conducive to the application of retrieval, query and mining, which makes the ability of data service extremely low. By integrating the Hadoop ecosystem into the cloud platform of China Geological Survey, and based on the storage structure of Hadoop HDFS and HBase, the organization model of unstructured geological data basic content repository is established. The Lucene full-text search engine frame and geological domain ontology lexicon are used to construct the fast random access index file mechanism, which changes the storage, reading, searching and application mode of diversified and fragmented unstructured data of complex geological survey. Provide accurate and fast service for intelligent geological survey.
【作者單位】： 中國地質(zhì)調(diào)查局發(fā)展研究中心;國土資源部地質(zhì)信息技術(shù)重點實驗室;武漢中地數(shù)碼科技有限公司;中國地質(zhì)調(diào)查局西安地質(zhì)調(diào)查中心;
【基金】：中國地質(zhì)調(diào)查局項目(編號:12120115073201、1212011120436、1212011120449)
【分類號】：P628.1

【參考文獻】

相關(guān)期刊論文 前8條

1 吳信才;徐世武;萬波;吳亮;;新一代的軟件結(jié)構(gòu)T-C-V結(jié)構(gòu)[J];地球科學(xué)(中國地質(zhì)大學(xué)學(xué)報);2014年02期

2 王風;楊璐璐;;基于Hadoop軟件框架下海量數(shù)據(jù)集群處理的探究[J];長沙通信職業(yè)技術(shù)學(xué)院學(xué)報;2013年04期

3 陳吉榮;樂嘉錦;;基于Hadoop生態(tài)系統(tǒng)的大數(shù)據(jù)解決方案綜述[J];計算機工程與科學(xué);2013年10期

4 涂新莉;劉波;林偉偉;;大數(shù)據(jù)研究綜述[J];計算機應(yīng)用研究;2014年06期

5 任樹懷;;LUCENE搜索算法剖析及優(yōu)化研究[J];圖書館雜志;2014年12期

6 李超嶺;楊東來;李豐丹;劉暢;劉修國;于慶文;呂霞;;中國數(shù)字地質(zhì)調(diào)查系統(tǒng)的基本構(gòu)架及其核心技術(shù)的實現(xiàn)[J];地質(zhì)通報;2008年07期

7 劉智慧;張泉靈;;大數(shù)據(jù)技術(shù)研究綜述[J];浙江大學(xué)學(xué)報(工學(xué)版);2014年06期

8 張智;龔宇;;分布式存儲系統(tǒng)HBase關(guān)鍵技術(shù)研究[J];現(xiàn)代計算機(專業(yè)版);2014年32期

【共引文獻】

相關(guān)期刊論文 前10條

1 王蓓蓓;;淺談面向?qū)ο蠹夹g(shù)在1:5萬戰(zhàn)略性礦產(chǎn)遠景調(diào)查地質(zhì)圖空間數(shù)據(jù)庫建設(shè)中的應(yīng)用[J];出國與就業(yè)(就業(yè)版);2011年12期

2 倪平澤;劉修國;李超嶺;李豐丹;;3D礦床建模技術(shù)在數(shù)字礦產(chǎn)勘查中的應(yīng)用[J];地球科學(xué)(中國地質(zhì)大學(xué)學(xué)報);2010年03期

3 單永杰;;數(shù)字礦產(chǎn)遠景調(diào)查原始資料歸檔探討[J];甘肅地質(zhì);2011年02期

4 劉暢;劉園園;李健強;;北斗衛(wèi)星技術(shù)在數(shù)字地質(zhì)調(diào)查系統(tǒng)中的集成開發(fā)與應(yīng)用[J];地質(zhì)力學(xué)學(xué)報;2012年03期

5 高光大;王永志;屈紅剛;繆謹勵;宋越;;礦產(chǎn)資源領(lǐng)域三項基本國情調(diào)查成果數(shù)據(jù)的綜合集成與應(yīng)用[J];吉林大學(xué)學(xué)報(地球科學(xué)版);2013年04期

6 王芳琴;武雪梅;金萍秀;孫金鳳;張亞紅;;DGSS及其相關(guān)軟件在礦產(chǎn)勘查中的應(yīng)用[J];甘肅地質(zhì);2014年01期

7 曾玉珠;吳小東;;本科計算機專業(yè)培養(yǎng)云計算應(yīng)用型人才實踐[J];電腦編程技巧與維護;2014年08期

8 肖筱華;周棟;;大數(shù)據(jù)技術(shù)及標準發(fā)展研究[J];信息技術(shù)與標準化;2014年04期

9 常海防;;基于Hadoop的運營商流量經(jīng)營分析系統(tǒng)建設(shè)方案[J];電信工程技術(shù)與標準化;2014年07期

10 胡宇舟;范濱;顧學(xué)道;繆力;;基于Hadoop的云計算在清分系統(tǒng)中的應(yīng)用[J];電子世界;2014年13期

相關(guān)會議論文 前2條

1 李天楓;姚欣;王勁松;;大規(guī)模網(wǎng)絡(luò)異常流量實時云監(jiān)測平臺研究[A];第29次全國計算機安全學(xué)術(shù)交流會論文集[C];2014年

2 周婕;鄒游;;大數(shù)據(jù)背景下的城鄉(xiāng)規(guī)劃研究思考[A];第十七屆中國科協(xié)年會——分16　大數(shù)據(jù)與城鄉(xiāng)治理研討會論文集[C];2015年

相關(guān)博士學(xué)位論文 前1條

1 倪平澤;銅礦床地質(zhì)統(tǒng)計學(xué)模型構(gòu)建及其應(yīng)用模式研究[D];中國地質(zhì)大學(xué);2010年

相關(guān)碩士學(xué)位論文 前10條

1 王明;西藏羅布莎鉻鐵礦床地質(zhì)特征及三維模型的建立和應(yīng)用[D];中國地質(zhì)大學(xué)（北京）;2010年

2 楊程;基于地質(zhì)統(tǒng)計學(xué)的金堆城鉬礦礦床品位分布研究[D];西安建筑科技大學(xué);2010年

3 張建鏗;基于MapGIS的礦產(chǎn)資源儲量動態(tài)計算模塊的研究和實現(xiàn)[D];中南大學(xué);2012年

4 郭浩;面向數(shù)字地質(zhì)調(diào)查的移動GIS平臺關(guān)鍵技術(shù)研究[D];北京林業(yè)大學(xué);2013年

5 裴艷云;基于GeoGIS的數(shù)字地質(zhì)調(diào)查系統(tǒng)的研建[D];北京林業(yè)大學(xué);2013年

6 楊麗;地質(zhì)平/剖面圖自動成圖系統(tǒng)研究與實現(xiàn)[D];中南大學(xué);2013年

7 郝增勇;基于Hadoop用戶行為分析系統(tǒng)設(shè)計與實現(xiàn)[D];北京交通大學(xué);2014年

8 張夏旭;基于Hadoop的多星表存儲與交叉證認的設(shè)計與實現(xiàn)[D];山東大學(xué);2014年

9 趙玉龍;基于Hadoop的海量小文件處理性能研究與優(yōu)化[D];內(nèi)蒙古科技大學(xué);2014年

10 趙靜;云計算平臺Hadoop負載均衡研究[D];河北工程大學(xué);2014年

【二級參考文獻】

相關(guān)期刊論文 前10條

1 孫其博;劉杰;黎，

本文編號：2359967