基于hadoop影視碎片云存儲的設計與實現(xiàn)
發(fā)布時間:2017-12-19 18:34
本文關鍵詞:基于hadoop影視碎片云存儲的設計與實現(xiàn) 出處:《山東大學》2015年碩士論文 論文類型:學位論文
更多相關文章: 云計算 Hadoop HDFS 影視碎片 碎片索引 多線程
【摘要】:近年來,隨著計算機技術的高速發(fā)展、互聯(lián)帶寬的提高、網(wǎng)絡用戶的增加、以及數(shù)碼產(chǎn)品的普及,互聯(lián)網(wǎng)視頻點播應用、視頻共享應用等以星火燎原之勢大規(guī)模發(fā)展。國內(nèi)外著名視頻網(wǎng)站如You tube、Hulu、優(yōu)酷土豆等在大環(huán)境下應用而生。當前視頻服務已向多終端快速發(fā)展,視頻數(shù)據(jù)已達到海量,而且數(shù)據(jù)量正在迅速的增長。今天,如何為多終端用戶提供優(yōu)質的視頻服務以及海量視頻數(shù)據(jù)存儲已成為各大視頻互聯(lián)網(wǎng)公司研究的熱門技術,廣電行業(yè)也爭相投入這場數(shù)據(jù)與服務的盛宴中來。自Google發(fā)表的三大論文之后,IT界便掀起了云計算熱潮。著名的開源云計算框架Hadoop也橫空出世。Hadoop云平臺的開源特性不僅為云計算研究降低了成本,而且Hadoop分布式文件解決了海量數(shù)據(jù)的高效、穩(wěn)定的存儲。本文的主要目的是設計和實現(xiàn)一種基于海量影視碎片數(shù)據(jù)云存儲的普適分布式系統(tǒng)。首先對Hadoop分布式框架概念以及原理做了詳細的闡述,并詳細描述了Hadoop HDFS工作原理,為全文海量存儲奠定了基礎。其次,研究并分析了當前針對HDFS小文件存儲問題業(yè)界常用方案,并根據(jù)項目實際現(xiàn)狀構思適合應用背景的海量影視碎片存儲的方法與思想。最后根據(jù)HDFS影視碎片存儲設計文件索引并采用多線程并發(fā)技術提高影視文件系統(tǒng)的延遲與吞吐。在文章的最后,通過具體的項目實例進行試驗驗證。并根據(jù)試驗數(shù)據(jù)得出最終結論。
【學位授予單位】:山東大學
【學位級別】:碩士
【學位授予年份】:2015
【分類號】:TP333
【參考文獻】
中國期刊全文數(shù)據(jù)庫 前2條
1 田秀霞;周耀君;畢忠勤;彭源;;基于Hadoop架構的分布式計算和存儲技術及其應用[J];上海電力學院學報;2011年01期
2 ;集群存儲應對新媒體時代[J];中國數(shù)字電視;2008年07期
,本文編號:1309011
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/1309011.html
最近更新
教材專著