本文選題：分布式存儲與計算 + 八叉樹　； 參考：《石油地球物理勘探》2017年04期

【摘要】：隨著三維地震數(shù)據(jù)采集、油氣田開發(fā)等系列新技術(shù)帶來的快速數(shù)據(jù)更新,大數(shù)據(jù)背景下三維數(shù)據(jù)體的高效存儲與處理分析變得越來越復(fù)雜。在參考GFS(Google File System,谷歌文件系統(tǒng))設(shè)計理念和消化其關(guān)鍵分布式處理技術(shù)的基礎(chǔ)上,本文設(shè)計了PetroV(Petroleum Valuation,勘探部署決策一體化軟件系統(tǒng))最新軟件架構(gòu)并研發(fā)了系列大數(shù)據(jù)存儲與分析的關(guān)鍵軟件技術(shù)。利用三維空間下八叉樹結(jié)構(gòu)與編碼的快速空間定位和多分辨率機(jī)制,實現(xiàn)對三維大數(shù)據(jù)體的結(jié)構(gòu)分層、分塊存儲與二級內(nèi)存緩存框架,支持并發(fā)訪問和不同分辨率流式顯示。由數(shù)據(jù)存取客戶端、元數(shù)據(jù)服務(wù)和子數(shù)據(jù)塊存取服務(wù)組成的八叉樹分布式存儲框架,屏蔽了基于八叉樹切分后子體數(shù)據(jù)塊在上百臺計算機(jī)的后臺冗余或備份存儲事實,實現(xiàn)了幾乎與單機(jī)文件系統(tǒng)接口一致的分布式文件存取接口;由任務(wù)執(zhí)行客戶端、任務(wù)管理服務(wù)和面向地震、數(shù)字巖心或測井?dāng)?shù)據(jù)的系列專業(yè)解釋算法服務(wù)組成的分布式大數(shù)據(jù)分析框架,利用八叉樹分塊存儲的特點實現(xiàn)"分而治之"并行編程模型,顯著降低并行編程模型實現(xiàn)的復(fù)雜度。大數(shù)據(jù)下PetroV軟件體系架構(gòu)設(shè)計及衍生的系列專業(yè)軟件版本,最終目的是希望能夠推動應(yīng)用導(dǎo)向與新技術(shù)發(fā)展深度結(jié)合,持續(xù)追求卓越,增強(qiáng)自主創(chuàng)新能力。
[Abstract]:With the rapid data updating brought by a series of new technologies such as 3D seismic data acquisition, oil and gas field development, the efficient storage and processing of 3D data under the background of big data has become more and more complicated. Based on the GFS(Google File system (Google File system) design concept and the digestion of its key distributed processing technologies, This paper designs the latest software architecture of PetroV(Petroleum validation (integrated software system for exploration and deployment decision) and develops a series of key software technologies for big data storage and analysis. Using the fast spatial location and multi-resolution mechanism of octree structure and coding in three-dimensional space, the structure of 3D big data is layered, block storage and two-level memory cache framework are implemented, concurrent access and different resolution streaming display are supported. The octree distributed storage framework, which consists of data access client, metadata service and sub-data block access service, shields the background redundancy or backup storage of data blocks in hundreds of computers based on octree segmentation. The distributed file access interface, which is almost identical to the single machine file system interface, is implemented by the task execution client, the task management service and the earthquake oriented, The distributed big data analysis framework composed of a series of professional interpretation algorithms for digital core or logging data is used to realize the parallel programming model of "divide-and-conquer" by using the characteristics of octree block storage. The complexity of parallel programming model implementation is significantly reduced. The final purpose of PetroV software architecture design and its derivative series of professional software versions under big data is to promote the deep combination of application orientation and new technology development, to continuously pursue excellence, and to enhance the ability of independent innovation.
【作者單位】： 中國石化石油勘探開發(fā)研究院;
【基金】：國家頁巖油重大專項(2017ZX05049001-007) 中科院A類戰(zhàn)略性先導(dǎo)科技專項(XDAXX010405)聯(lián)合資助
【分類號】：P618.13;P631.4

【參考文獻(xiàn)】

相關(guān)期刊論文 前5條

1 盛秀杰;金之鈞;彭成;曹晉;;PetroV軟件架構(gòu)設(shè)計中的一些思考與實現(xiàn)[J];石油地球物理勘探;2015年04期

2 王宏琳;羅國安;;國產(chǎn)地震處理解釋軟件的發(fā)展[J];石油地球物理勘探;2013年02期

3 孟小峰;慈祥;;大數(shù)據(jù)管理:概念、技術(shù)與挑戰(zhàn)[J];計算機(jī)研究與發(fā)展;2013年01期

4 趙長海;晏海華;王宏琳;史曉華;王雷;;面向地震數(shù)據(jù)處理的并行與分布式編程框架[J];石油地球物理勘探;2010年01期

5 熊翥;我國物探技術(shù)的進(jìn)步及展望[J];石油地球物理勘探;2003年05期

相關(guān)碩士學(xué)位論文 前1條

1 白鑫;基于八叉樹結(jié)構(gòu)的大規(guī)模地震數(shù)據(jù)的快速加載機(jī)制[D];吉林大學(xué);2013年

【共引文獻(xiàn)】

相關(guān)期刊論文 前10條

1 葉鵬;丁鼎;張雪英;;大數(shù)據(jù)驅(qū)動的旅游突發(fā)事件應(yīng)急管理體系研究[J];電子政務(wù);2017年08期

2 葉榮偉;康乾;黃一鳴;;面向大數(shù)據(jù)的安全配置核查工具研究與實現(xiàn)[J];電信工程技術(shù)與標(biāo)準(zhǔn)化;2017年08期

3 盛秀杰;金之鈞;彭成;;PetroV分布式數(shù)據(jù)存儲與分析框架設(shè)計[J];石油地球物理勘探;2017年04期

4 吳彩虹;;大數(shù)據(jù)時代對隱私權(quán)的影響與對策[J];法制與社會;2017年21期

5 劉國慶;;基于云計算的煤礦職業(yè)危害監(jiān)管系統(tǒng)研究[J];能源與環(huán)保;2017年07期

6 林旺群;高晨旭;陶克;鄧波;包陽;;面向特定領(lǐng)域大數(shù)據(jù)平臺架構(gòu)及標(biāo)準(zhǔn)化研究[J];大數(shù)據(jù);2017年04期

7 包從開;黃永峰;廖旺堅;余輝;;基于NOSQL的微博圖數(shù)據(jù)管理存儲平臺設(shè)計與實現(xiàn)[J];計算機(jī)與數(shù)字工程;2017年07期

8 黃國勝;;創(chuàng)新推動森林資源監(jiān)測發(fā)展的思考[J];林業(yè)資源管理;2017年03期

9 胡柳;王梅;鄧杰;葉靜;趙正偉;;大數(shù)據(jù)環(huán)境下的隱私保護(hù)研究[J];電子科技;2017年07期

10 楊芳;金琪;邢麗平;楊代才;;基于Cassandra的實時氣象數(shù)據(jù)分布式存儲系統(tǒng)[J];陜西氣象;2017年04期

相關(guān)碩士學(xué)位論文 前3條

1 董卉;地震數(shù)據(jù)處理與相干體斷層識別研究[D];吉林大學(xué);2016年

2 魏宇;三維地震數(shù)據(jù)處理及剖面抽取算法研究[D];吉林大學(xué);2014年

3 侯忠民;三維體數(shù)據(jù)興趣區(qū)域提取技術(shù)及其應(yīng)用的研究[D];吉林大學(xué);2014年

【二級參考文獻(xiàn)】

相關(guān)期刊論文 前7條

1 盛秀杰;金之鈞;鄢琦;肖曄;謝國軍;徐京新;;成藏體系油氣資源評價中的統(tǒng)計方法體系[J];石油與天然氣地質(zhì);2013年06期

2 王宏琳;羅國安;;國產(chǎn)地震處理解釋軟件的發(fā)展[J];石油地球物理勘探;2013年02期

3 盛秀杰;梅廉夫;;油氣勘探和開發(fā)領(lǐng)域中間件的設(shè)計及實現(xiàn)[J];石油地球物理勘探;2010年04期

4 王宏琳;陳繼紅;;地球物理軟件集成環(huán)境研究[J];石油地球物理勘探;2010年02期

5 張軍華,仝兆岐;地震資料處理中的并行計算機(jī)技術(shù)(綜述)[J];物探化探計算技術(shù);2002年01期

6 馬在田;;高階有限差分偏移[J];石油地球物理勘探;1982年01期

7 王宏琳;;CYBER地震系統(tǒng)軟件改進(jìn)[J];石油地球物理勘探;1980年01期

相關(guān)碩士學(xué)位論文 前1條

1 王玉娟;大地震數(shù)據(jù)體的存儲優(yōu)化及抽取算法研究[D];中國海洋大學(xué);2009年

【相似文獻(xiàn)】

相關(guān)期刊論文 前2條

1 畢林;王李管;陳建宏;馮興隆;;基于八叉樹的復(fù)雜地質(zhì)體塊段模型建模技術(shù)[J];中國礦業(yè)大學(xué)學(xué)報;2008年04期

2 ;[J];;年期

，

本文編號：1896385