本文關(guān)鍵詞：云海大數(shù)據(jù)一體機體系結(jié)構(gòu)和關(guān)鍵技術(shù)

  更多相關(guān)文章： 大數(shù)據(jù)一體機 可擴展性 可定制性 混合型軟件架構(gòu) 大數(shù)據(jù)行業(yè)應(yīng)用

【摘要】：為了彌補從大數(shù)據(jù)技術(shù)到行業(yè)應(yīng)用之間的鴻溝,針對當前行業(yè)用戶對大數(shù)據(jù)處理平臺的持續(xù)擴展、一體化和多樣性需求,提出了大數(shù)據(jù)一體機的可擴展性、可定制性和多類型處理模型,并基于此設(shè)計了云海大數(shù)據(jù)一體機.該一體機采用兼顧橫向和縱向可擴展的體系結(jié)構(gòu),并采用硬件可定制化設(shè)計和混合型軟件架構(gòu)支持多種大數(shù)據(jù)應(yīng)用類型.在此基礎(chǔ)上,針對HDFS元數(shù)據(jù)服務(wù)瓶頸問題、MapReduce負載傾斜問題、HBase的跨域問題,介紹了在云海大數(shù)據(jù)一體機中采用的多元數(shù)據(jù)服務(wù)、負載均衡和跨數(shù)據(jù)中心大表技術(shù).在電信、金融和環(huán)保行業(yè)實際案例中的應(yīng)用和測試表明,上述體系結(jié)構(gòu)和關(guān)鍵技術(shù)是可行和有效的.
【作者單位】： 高效能服務(wù)器和存儲技術(shù)國家重點實驗室;浪潮電子信息產(chǎn)業(yè)股份有限公司;
【關(guān)鍵詞】： 大數(shù)據(jù)一體機 可擴展性 可定制性 混合型軟件架構(gòu) 大數(shù)據(jù)行業(yè)應(yīng)用
【基金】：國家“八六三”高技術(shù)研究發(fā)展計劃基金項目(2015AA050203) “核高基”國家科技重大專項(2013ZX01039002)~~
【分類號】：TP311.13
【正文快照】： 隨著信息時代云計算、物聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)等技術(shù)的快速發(fā)展,數(shù)據(jù)已經(jīng)滲透到每一個行業(yè)領(lǐng)域,成為重要的生產(chǎn)因素,而數(shù)據(jù)的海量累積逐漸被公認為是與水、石油、天然氣同等重要的國家戰(zhàn)略資源,將推動生產(chǎn)力發(fā)展和創(chuàng)新[1].IDC(InternationalData Corporation)預(yù)測[2],2020年以前全

【相似文獻】

中國期刊全文數(shù)據(jù)庫 前10條

1 張德群;龍建國;;現(xiàn)代作戰(zhàn)實驗仿真體系結(jié)構(gòu)探討[J];軍事運籌與系統(tǒng)工程;2005年04期

2 傅興鋼;RISC體系結(jié)構(gòu)上的編譯時增強并行性代碼重組[J];小型微型計算機系統(tǒng);1990年09期

3 蔡衛(wèi)東;新一代計算機信息處理體系結(jié)構(gòu)——客戶機/服務(wù)器[J];情報探索;1994年04期

4 朱虹,馮玉才;一種多媒體數(shù)據(jù)庫管理系統(tǒng)的體系結(jié)構(gòu)[J];計算機研究與發(fā)展;1998年01期

5 周艷萍;張淑娟;;淺析物聯(lián)網(wǎng)體系結(jié)構(gòu)的設(shè)計與實現(xiàn)[J];信息通信;2014年01期

6 ;體系結(jié)構(gòu)[J];個人電腦;2001年11期

7 葉鈺,應(yīng)時,李偉齋,張韜;面向服務(wù)體系結(jié)構(gòu)及其系統(tǒng)構(gòu)建研究[J];計算機應(yīng)用研究;2005年02期

8 周莉;養(yǎng)路費征收管理系統(tǒng)中異構(gòu)體系結(jié)構(gòu)的實現(xiàn)[J];電子器件;2005年01期

9 李清;陳禹六;;通用企業(yè)/集成系統(tǒng)參考體系結(jié)構(gòu)研究[J];中國電子科學(xué)研究院學(xué)報;2008年03期

10 張慧敏;;基于體系結(jié)構(gòu)的軟件開發(fā)研究[J];吉林工程技術(shù)師范學(xué)院學(xué)報;2011年12期

中國重要會議論文全文數(shù)據(jù)庫 前10條

1 王翠茹;高麗鮮;;元數(shù)據(jù)集成體系結(jié)構(gòu)的研究[A];2009全國計算機網(wǎng)絡(luò)與通信學(xué)術(shù)會議論文集[C];2009年

2 李俊超;張占月;甘朝虹;楊欣;;C~4ISR體系結(jié)構(gòu)設(shè)計方法研究[A];2013第一屆中國指揮控制大會論文集[C];2013年

3 楚旺;錢德沛;;基于體系結(jié)構(gòu)的軟件生產(chǎn)線開發(fā)方法的形式化框架[A];2005年全國理論計算機科學(xué)學(xué)術(shù)年會論文集[C];2005年

4 林欣;余道杰;周長林;;以只讀存儲體系結(jié)構(gòu)提升計算機系統(tǒng)的病毒免疫能力[A];教育部中南地區(qū)高等學(xué)校電子電氣基礎(chǔ)課教學(xué)研究會第二十屆學(xué)術(shù)年會會議論文集（下冊）[C];2010年

5 劉大昕;邵濱;;DKBSA—Ⅰ:基于總線式網(wǎng)絡(luò)的分布式知識庫系統(tǒng)體系結(jié)構(gòu)[A];第九屆全國數(shù)據(jù)庫學(xué)術(shù)會議論文集(上)[C];1990年

6 鄒荃孫;薛勁松;牛孟漁;陳惠仁;;機械行業(yè)CIMS(計算機集成制造系統(tǒng))體系結(jié)構(gòu)[A];1994中國控制與決策學(xué)術(shù)年會論文集[C];1994年

7 孫冰;張忠平;劉國華;;DLMW:一種開放式科學(xué)數(shù)據(jù)庫體系結(jié)構(gòu)[A];2005年全國理論計算機科學(xué)學(xué)術(shù)年會論文集[C];2005年

8 梁博;;某施工企業(yè)管理信息系統(tǒng)及其實施策略[A];計算機技術(shù)在工程建設(shè)中的應(yīng)用——第十三屆全國工程建設(shè)計算機應(yīng)用學(xué)術(shù)會議論文集[C];2006年

9 Songer,A.D.;Young,R.;Davis,K.;;在AEC/IEC領(lǐng)域可持續(xù)lT實施的社會體系結(jié)構(gòu)[A];勘察設(shè)計企業(yè)信息化建設(shè)研討會資料匯編[C];2003年

10 蘇志勇;李必信;;基于體系結(jié)構(gòu)的Web服務(wù)可靠性建模[A];第五屆中國測試學(xué)術(shù)會議論文集[C];2008年

中國重要報紙全文數(shù)據(jù)庫 前6條

1 清華大學(xué)國家CIMS工程技術(shù)研究中心 葛正宇 熊光楞 范文慧;PDM的“骨架”——體系結(jié)構(gòu)[N];計算機世界;2002年

2 國家信息化專家委員會委員 高新民;完善推進體制和體系架構(gòu)[N];人民郵電;2008年

3 ;突破五道“關(guān)”[N];計算機世界;2003年

4 北京大學(xué)計算機科學(xué)技術(shù)系 麻志毅 蔣嚴冰;UML 2.0之路：快車道還是繞行？[N];計算機世界;2001年

5 北京大學(xué)計算機科學(xué)技術(shù)系 蔣嚴冰 邵維忠;UML 2001：標準化的《奧德賽》史詩[N];計算機世界;2001年

6 本報記者 那罡;Check Point 專注是成功的關(guān)鍵[N];中國計算機報;2008年

中國博士學(xué)位論文全文數(shù)據(jù)庫 前10條

1 朱玄;基于憶阻器的存儲加密體系結(jié)構(gòu)技術(shù)[D];國防科學(xué)技術(shù)大學(xué);2014年

2 鄒丹;面向異構(gòu)體系結(jié)構(gòu)的稀疏矩陣算法研究[D];國防科學(xué)技術(shù)大學(xué);2013年

3 李長云;基于體系結(jié)構(gòu)的軟件動態(tài)演化研究[D];浙江大學(xué);2005年

4 姜軍;可執(zhí)行體系結(jié)構(gòu)及DoDAF的可執(zhí)行化方法研究[D];國防科學(xué)技術(shù)大學(xué);2008年

5 蔣哲遠;基于Web服務(wù)的特定領(lǐng)域軟件體系結(jié)構(gòu)及其關(guān)鍵技術(shù)研究[D];合肥工業(yè)大學(xué);2006年

6 吳小珍;GPDM系統(tǒng)的體系結(jié)構(gòu)及其實施關(guān)鍵技術(shù)研究[D];武漢科技大學(xué);2008年

7 劉奕明;基于體系結(jié)構(gòu)、特征驅(qū)動的軟件動態(tài)演化方法研究[D];復(fù)旦大學(xué);2008年

8 杜靜;流體系結(jié)構(gòu)的編譯技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2008年

9 張琳琳;支持面向方面SA設(shè)計的MDSoC建模方法研究[D];武漢大學(xué);2009年

10 常軼松;面積帶寬優(yōu)化的嵌入式GPU可編程著色器體系結(jié)構(gòu)研究[D];天津大學(xué);2013年

，

本文編號：1104328