【摘要】：信息技術(shù)的不斷發(fā)展使得現(xiàn)代社會環(huán)境下生產(chǎn)和生活過程中產(chǎn)生的各類信息和數(shù)據(jù)越來越多,對信息存儲的容量要求也日益增大,存儲系統(tǒng)的規(guī)模已經(jīng)在向著PB以及更高級別的方向發(fā)展,海量存儲系統(tǒng)就在這種條件下應(yīng)運而生,它對數(shù)據(jù)實行條帶化的分割方式,有效的對信息數(shù)據(jù)進行了組織和存儲,良好充分的利用了設(shè)備的存儲空間,同時采用并行化的文件系統(tǒng)和訪問協(xié)議,能夠在保證低開銷和低延遲的情況下為外界提供強大的并發(fā)訪問的能力。此外,為了保證數(shù)據(jù)和系統(tǒng)安全,還實現(xiàn)了信息備份和冗余。負載均衡以及數(shù)據(jù)遷移等功能。 我們需要實時了解海量存儲系統(tǒng)的運行狀態(tài),因此需要設(shè)置一套監(jiān)控系統(tǒng)來對它的節(jié)點和服務(wù)進行監(jiān)視。海量存儲系統(tǒng)有其自身的很多特點:首先是節(jié)點擴張,系統(tǒng)無法預料到什么時候在什么地方會有新的節(jié)點被加進來或者被移除出去,監(jiān)控系統(tǒng)需要對節(jié)點的存在與否做到自動發(fā)現(xiàn),其次是節(jié)點失效,單個節(jié)點的小概率事件在超大規(guī)模的海量存儲系統(tǒng)中就會變得普遍存在,監(jiān)控系統(tǒng)需要在節(jié)點發(fā)生故障時對系統(tǒng)進行報警,還要易于擴展,監(jiān)控系統(tǒng)對海量存儲系統(tǒng)中新加入的系統(tǒng)服務(wù)和狀態(tài)能夠及時的表現(xiàn)出來,此外還有低開銷等要求,保證監(jiān)控組件的運行不會占用太多的資源,不會影響到海量存儲系統(tǒng)本身。經(jīng)過深入考慮和對比,最終選擇出了一個適用于海量存儲系統(tǒng)的監(jiān)控模型。 之后針對海量存儲系統(tǒng)的實際情況,找到和發(fā)現(xiàn)模型自身還存在的缺陷和不足,從擴展性�？煽啃�。管理性。安全性。功能性。以及系統(tǒng)開銷六大方面對模型進行了優(yōu)化和改進,經(jīng)過完善的模型可以為海量存儲系統(tǒng)提供更加全面而且可靠的服務(wù),系統(tǒng)節(jié)點組織更為方便,監(jiān)控信息的存儲與訪問更加安全,系統(tǒng)功能更為強大,同時通過內(nèi)部結(jié)構(gòu)的優(yōu)化使得監(jiān)控系統(tǒng)造成的運行時開銷可以進一步的減少,最后驗證了模型的正確性,改進后的模型為海量存儲系統(tǒng)的運行提供了一個可靠的保障。
【圖文】：

圖 2-1 海量存Figure 2-1 Framework上圖即為海量存儲系統(tǒng)的一個示意端為數(shù)據(jù)節(jié)點和管理節(jié)點 應(yīng)用服務(wù)器給給管理節(jié)點，管理節(jié)點進行處理和查后將信息回饋給服務(wù)器，然后服務(wù)器就需要的數(shù)據(jù)和內(nèi)容 這樣做可以大大降時更加有效的利用節(jié)點的計算資源，提鍵也最重要的一個設(shè)計就是并行存儲的訪問協(xié)議兩部分 并行文件系統(tǒng)將元數(shù)訪問文件信息的時候才與元數(shù)據(jù)服務(wù)器據(jù)節(jié)點上進行，這就大大的減輕了元數(shù)來自外接的請求 同時它使得數(shù)據(jù)在存?zhèn)浯娣乓恍〔糠值奈募䞍?nèi)容，這樣做就實現(xiàn)并發(fā)的訪問和讀寫，提高系統(tǒng)處理

圖 2-2 海量存儲系統(tǒng)訪問協(xié)議Figure 2-2 Access Protocal of Mass Storage System數(shù)據(jù)冗余就是通常所講的數(shù)據(jù)備份，一份數(shù)據(jù)在存儲節(jié)點上不能只有一份拷貝，這樣會存在丟失數(shù)據(jù)的風險 很多情況比如說節(jié)點失效或者數(shù)據(jù)遭到意外破壞的情況下就將造成永久的損壞而無法復原 因此，數(shù)據(jù)冗余就是將數(shù)據(jù)進行多個備份，備份的空間可以選擇其他數(shù)據(jù)節(jié)點，同時可以將數(shù)據(jù)分散備份，這樣不論哪個節(jié)點失效，受損的數(shù)據(jù)都可以最大限度的恢復過來，提高系統(tǒng)的可靠性 狀態(tài)監(jiān)測的意思是要在運行過程中實時監(jiān)測海量存儲系統(tǒng)的運行時狀態(tài)，以便發(fā)現(xiàn)問題及時修正或者根據(jù)系統(tǒng)的運行情況作出合理的判斷 監(jiān)測項目一般包括系統(tǒng) CPU 內(nèi)存使用情況 節(jié)點空間利用率 tcp/ip 的連接等 狀態(tài)監(jiān)測是海量存儲系統(tǒng)的一塊很重要的內(nèi)容，我們通過運行軟件將實時數(shù)據(jù)收集起來，同時繪制成各種各樣的圖表，以方便系統(tǒng)管理員的查看，而且在系統(tǒng)出現(xiàn)故障或者運行不良時要發(fā)出報警通知管理員進行處理
【學位授予單位】：上海交通大學
【學位級別】：碩士
【學位授予年份】：2012
【分類號】：TP333

【共引文獻】

相關(guān)期刊論文 前2條

1 胡新海;;云存儲數(shù)據(jù)縮減技術(shù)研究[J];長春工程學院學報(自然科學版);2012年02期

2 白英彩;金崇英;;海量存儲系統(tǒng)的研究與應(yīng)用[J];軟件產(chǎn)業(yè)與工程;2010年05期

相關(guān)會議論文 前1條

1 趙曉南;李戰(zhàn)懷;曾雷杰;張曉;;分級存儲管理技術(shù)研究[A];2010年第16屆全國信息存儲技術(shù)大會（IST2010）論文集[C];2010年

相關(guān)碩士學位論文 前3條

1 朱俊潔;海量存儲系統(tǒng)中高可用服務(wù)管理的設(shè)計與實現(xiàn)[D];上海交通大學;2011年

2 張夏添;基于IP-SAN的數(shù)字圖書館的實現(xiàn)[D];南昌大學;2012年

3 何磊;虛擬磁帶庫中重復數(shù)據(jù)刪除技術(shù)的研究與設(shè)計[D];西南交通大學;2013年

，

本文編號：2537877