商務(wù)智能ETL過程優(yōu)化及質(zhì)量控制在航空預(yù)警中的應(yīng)用研究
發(fā)布時間:2021-07-03 15:04
我國在商務(wù)智能和航空預(yù)警方面的應(yīng)用研究才十幾個年頭,但其作用卻是不容小窺的。目前商務(wù)智能在航空業(yè)已有一定的應(yīng)用,然而要實現(xiàn)航空預(yù)警的準(zhǔn)確性和及時性還有很長的一段路要走;且航空預(yù)警的成功在很大程度上保障了乘客和飛行員的生命和財產(chǎn)安全。本文首先對航空預(yù)警和商務(wù)智能相關(guān)內(nèi)容及理論進行分析研究,綜述了商務(wù)智能、ETL技術(shù)和航空預(yù)警的研究現(xiàn)狀。其次,給出商務(wù)智能的通用體系架構(gòu),研究商務(wù)智能與其關(guān)鍵技術(shù)ETL之間的關(guān)系,并分析商務(wù)智能應(yīng)用于航空預(yù)警的作用。由此確立論文的研究方向和內(nèi)容框架,研究方向為商務(wù)智能ETL過程優(yōu)化及其質(zhì)量控制在航空預(yù)警中的應(yīng)用研究;內(nèi)容框架為先對構(gòu)建商務(wù)智能的難點問題進行深入研究,并給出優(yōu)化方案。再結(jié)合航空預(yù)警領(lǐng)域的實際情況給出航空預(yù)警商務(wù)智能的總體架構(gòu),并針對商務(wù)智能實施的難點問題給出適用于航空預(yù)警領(lǐng)域的ETL過程設(shè)計和質(zhì)量控制方案。構(gòu)建商務(wù)智能的難點問題——ETL實施過程和質(zhì)量控制。這兩個難點問題的優(yōu)化和處理方案具體體現(xiàn)為:(1)對ETL實施過程的優(yōu)化進行研究。從ETL實施過程的整體進行ETL流程的改進,首先提出ETL統(tǒng)一處理平臺的建立,增加系統(tǒng)資源間的交互性和共享性;...
【文章來源】:武漢理工大學(xué)湖北省 211工程院校 教育部直屬院校
【文章頁數(shù)】:63 頁
【學(xué)位級別】:碩士
【部分圖文】:
統(tǒng)一ETL處理平臺架構(gòu)
武漢理工大學(xué)碩士學(xué)位論文3.1.3統(tǒng)一ETL處理平臺的功能在給出統(tǒng)一ETL處理平臺架構(gòu)的基礎(chǔ)上,進一步討論該平臺可以實現(xiàn)的功能。下面我們主要從統(tǒng)一E幾處理平臺的E幾數(shù)據(jù)處理和任務(wù)調(diào)度兩個方面進行描述。3.1.3.1ETL數(shù)據(jù)處理功能統(tǒng)一ETL處理平臺的建立可以提供強大、復(fù)雜的數(shù)據(jù)處理功能來滿足業(yè)務(wù)系統(tǒng)的數(shù)據(jù)加工需求。對于ETL處理功能,可以從數(shù)據(jù)加工處理、數(shù)據(jù)傳輸處理、數(shù)據(jù)質(zhì)量檢查等方面進行說明。(1)數(shù)據(jù)加工處理可考慮數(shù)據(jù)接入、數(shù)據(jù)處理和數(shù)據(jù)供給三方面進行衡量。統(tǒng)一ETL處理平臺提供了如下圖3-2所示的數(shù)據(jù)加工處理功能。尸一..一~-.…,~~一~…ETL數(shù)據(jù)處理區(qū)功!!11…J……J|,!l‘:,。,l!.…口,.!1。:l||!..…|!…!,|11..…口.。:|l!︸
行處理、數(shù)據(jù)并行處理和管道并行處理。任務(wù)并行處理主要實現(xiàn)多個獨立的任務(wù)并行處理。數(shù)據(jù)并行處理是指將單個任務(wù)中的獨立數(shù)據(jù)元組進行并行運行。管道并行l(wèi)’ll處理是將單個任務(wù)劃分為多個順序執(zhí)行的步驟,然后按照流水線方式處理數(shù)據(jù)元組,實現(xiàn)多個步驟的并行處理。在對并對ETL并行技術(shù)深入研究的基礎(chǔ)上,考察航空預(yù)警業(yè)ETL處理技術(shù)的實際情況。得出如下結(jié)論:(1)ETL任務(wù)并行處理是最基本、最易理解的數(shù)據(jù)處理方式,目前行業(yè)應(yīng)用最為廣泛、實施難道最低的并行處理技術(shù)。(2)對于數(shù)據(jù)并行處理和管道并行處理主要是從源數(shù)據(jù)入手,先考慮數(shù)據(jù)的分割問題,然后討論具體作業(yè)在加工過程中的落地情況。主要是通過對ETL具體工具的設(shè)計來實現(xiàn)。3.2.1ETL的邏輯架構(gòu)在實現(xiàn)ETL并行機制前,首先需要規(guī)劃任務(wù)的接收、調(diào)度和處理過程。基于統(tǒng)一ETL處理平臺構(gòu)建的目的,給出其相應(yīng)的ETL邏輯架構(gòu)圖如圖3一3所示:
【參考文獻(xiàn)】:
期刊論文
[1]操作型商業(yè)智能綜述[J]. 陳磊,董碧丹,張峰. 計算機工程與設(shè)計. 2010(07)
[2]基于元數(shù)據(jù)驅(qū)動的ETL架構(gòu)設(shè)計[J]. 張忠平,趙瑞珍. 計算機應(yīng)用與軟件. 2009(06)
[3]并行ETL過程的研究與實現(xiàn)[J]. 許力,牟曉光,馬云存. 計算機工程與應(yīng)用. 2009(13)
[4]ETL技術(shù)在商業(yè)智能中的應(yīng)用[J]. 尤欣. 電腦應(yīng)用技術(shù). 2008 (03)
[5]基于數(shù)據(jù)倉庫和OLAP的民航災(zāi)害預(yù)警決策支持系統(tǒng)[J]. 李柯. 西南交通大學(xué)學(xué)報. 2007(04)
[6]ETL執(zhí)行的流水線優(yōu)化[J]. 韓京宇,徐立臻,董逸生. 小型微型計算機系統(tǒng). 2005(06)
[7]商業(yè)智能的核心技術(shù)及體系結(jié)構(gòu)研究[J]. 劉業(yè)政,胡劍. 合肥工業(yè)大學(xué)學(xué)報(自然科學(xué)版). 2004(08)
[8]航空公司交通災(zāi)害預(yù)警指標(biāo)體系的構(gòu)建[J]. 羅帆,佘廉,顧必沖. 武漢理工大學(xué)學(xué)報(交通科學(xué)與工程版). 2004(03)
[9]航空港安全管理系統(tǒng)[J]. 周仁軍. 中國民用航空. 2003(11)
[10]中國民航飛行標(biāo)準(zhǔn)管理信息系統(tǒng)[J]. 靳洪艷. 民航經(jīng)濟與技術(shù). 1999(11)
博士論文
[1]商務(wù)智能中的利潤挖掘研究[D]. 徐秀娟.吉林大學(xué) 2008
碩士論文
[1]商業(yè)智能在股票信息系統(tǒng)中的應(yīng)用與研究[D]. 蘇盾.武漢理工大學(xué) 2009
[2]商務(wù)智能在電子商務(wù)中的應(yīng)用研究[D]. 陳進寶.北京郵電大學(xué) 2008
[3]基于商務(wù)智能技術(shù)的企業(yè)商務(wù)過程優(yōu)化研究[D]. 陳祖濤.武漢理工大學(xué) 2007
[4]ETL工作流的建模及優(yōu)化[D]. 丁左明.上海師范大學(xué) 2007
[5]ETL過程中的數(shù)據(jù)清洗技術(shù)研究與應(yīng)用[D]. 劉哲.沈陽航空工業(yè)學(xué)院 2007
[6]ETL執(zhí)行過程的優(yōu)化研究[D]. 吳遠(yuǎn)紅.東南大學(xué) 2006
[7]供電企業(yè)管理信息系統(tǒng)的構(gòu)建[D]. 張紅潔.南京理工大學(xué) 2006
[8]ETL過程改進的研究[D]. 張超.東南大學(xué) 2006
[9]民航災(zāi)害預(yù)警管理信息系統(tǒng)的研究[D]. 陳凱.武漢理工大學(xué) 2005
[10]數(shù)據(jù)倉庫中數(shù)據(jù)質(zhì)量控制問題研究[D]. 熊霞.武漢大學(xué) 2004
本文編號:3262814
【文章來源】:武漢理工大學(xué)湖北省 211工程院校 教育部直屬院校
【文章頁數(shù)】:63 頁
【學(xué)位級別】:碩士
【部分圖文】:
統(tǒng)一ETL處理平臺架構(gòu)
武漢理工大學(xué)碩士學(xué)位論文3.1.3統(tǒng)一ETL處理平臺的功能在給出統(tǒng)一ETL處理平臺架構(gòu)的基礎(chǔ)上,進一步討論該平臺可以實現(xiàn)的功能。下面我們主要從統(tǒng)一E幾處理平臺的E幾數(shù)據(jù)處理和任務(wù)調(diào)度兩個方面進行描述。3.1.3.1ETL數(shù)據(jù)處理功能統(tǒng)一ETL處理平臺的建立可以提供強大、復(fù)雜的數(shù)據(jù)處理功能來滿足業(yè)務(wù)系統(tǒng)的數(shù)據(jù)加工需求。對于ETL處理功能,可以從數(shù)據(jù)加工處理、數(shù)據(jù)傳輸處理、數(shù)據(jù)質(zhì)量檢查等方面進行說明。(1)數(shù)據(jù)加工處理可考慮數(shù)據(jù)接入、數(shù)據(jù)處理和數(shù)據(jù)供給三方面進行衡量。統(tǒng)一ETL處理平臺提供了如下圖3-2所示的數(shù)據(jù)加工處理功能。尸一..一~-.…,~~一~…ETL數(shù)據(jù)處理區(qū)功!!11…J……J|,!l‘:,。,l!.…口,.!1。:l||!..…|!…!,|11..…口.。:|l!︸
行處理、數(shù)據(jù)并行處理和管道并行處理。任務(wù)并行處理主要實現(xiàn)多個獨立的任務(wù)并行處理。數(shù)據(jù)并行處理是指將單個任務(wù)中的獨立數(shù)據(jù)元組進行并行運行。管道并行l(wèi)’ll處理是將單個任務(wù)劃分為多個順序執(zhí)行的步驟,然后按照流水線方式處理數(shù)據(jù)元組,實現(xiàn)多個步驟的并行處理。在對并對ETL并行技術(shù)深入研究的基礎(chǔ)上,考察航空預(yù)警業(yè)ETL處理技術(shù)的實際情況。得出如下結(jié)論:(1)ETL任務(wù)并行處理是最基本、最易理解的數(shù)據(jù)處理方式,目前行業(yè)應(yīng)用最為廣泛、實施難道最低的并行處理技術(shù)。(2)對于數(shù)據(jù)并行處理和管道并行處理主要是從源數(shù)據(jù)入手,先考慮數(shù)據(jù)的分割問題,然后討論具體作業(yè)在加工過程中的落地情況。主要是通過對ETL具體工具的設(shè)計來實現(xiàn)。3.2.1ETL的邏輯架構(gòu)在實現(xiàn)ETL并行機制前,首先需要規(guī)劃任務(wù)的接收、調(diào)度和處理過程。基于統(tǒng)一ETL處理平臺構(gòu)建的目的,給出其相應(yīng)的ETL邏輯架構(gòu)圖如圖3一3所示:
【參考文獻(xiàn)】:
期刊論文
[1]操作型商業(yè)智能綜述[J]. 陳磊,董碧丹,張峰. 計算機工程與設(shè)計. 2010(07)
[2]基于元數(shù)據(jù)驅(qū)動的ETL架構(gòu)設(shè)計[J]. 張忠平,趙瑞珍. 計算機應(yīng)用與軟件. 2009(06)
[3]并行ETL過程的研究與實現(xiàn)[J]. 許力,牟曉光,馬云存. 計算機工程與應(yīng)用. 2009(13)
[4]ETL技術(shù)在商業(yè)智能中的應(yīng)用[J]. 尤欣. 電腦應(yīng)用技術(shù). 2008 (03)
[5]基于數(shù)據(jù)倉庫和OLAP的民航災(zāi)害預(yù)警決策支持系統(tǒng)[J]. 李柯. 西南交通大學(xué)學(xué)報. 2007(04)
[6]ETL執(zhí)行的流水線優(yōu)化[J]. 韓京宇,徐立臻,董逸生. 小型微型計算機系統(tǒng). 2005(06)
[7]商業(yè)智能的核心技術(shù)及體系結(jié)構(gòu)研究[J]. 劉業(yè)政,胡劍. 合肥工業(yè)大學(xué)學(xué)報(自然科學(xué)版). 2004(08)
[8]航空公司交通災(zāi)害預(yù)警指標(biāo)體系的構(gòu)建[J]. 羅帆,佘廉,顧必沖. 武漢理工大學(xué)學(xué)報(交通科學(xué)與工程版). 2004(03)
[9]航空港安全管理系統(tǒng)[J]. 周仁軍. 中國民用航空. 2003(11)
[10]中國民航飛行標(biāo)準(zhǔn)管理信息系統(tǒng)[J]. 靳洪艷. 民航經(jīng)濟與技術(shù). 1999(11)
博士論文
[1]商務(wù)智能中的利潤挖掘研究[D]. 徐秀娟.吉林大學(xué) 2008
碩士論文
[1]商業(yè)智能在股票信息系統(tǒng)中的應(yīng)用與研究[D]. 蘇盾.武漢理工大學(xué) 2009
[2]商務(wù)智能在電子商務(wù)中的應(yīng)用研究[D]. 陳進寶.北京郵電大學(xué) 2008
[3]基于商務(wù)智能技術(shù)的企業(yè)商務(wù)過程優(yōu)化研究[D]. 陳祖濤.武漢理工大學(xué) 2007
[4]ETL工作流的建模及優(yōu)化[D]. 丁左明.上海師范大學(xué) 2007
[5]ETL過程中的數(shù)據(jù)清洗技術(shù)研究與應(yīng)用[D]. 劉哲.沈陽航空工業(yè)學(xué)院 2007
[6]ETL執(zhí)行過程的優(yōu)化研究[D]. 吳遠(yuǎn)紅.東南大學(xué) 2006
[7]供電企業(yè)管理信息系統(tǒng)的構(gòu)建[D]. 張紅潔.南京理工大學(xué) 2006
[8]ETL過程改進的研究[D]. 張超.東南大學(xué) 2006
[9]民航災(zāi)害預(yù)警管理信息系統(tǒng)的研究[D]. 陳凱.武漢理工大學(xué) 2005
[10]數(shù)據(jù)倉庫中數(shù)據(jù)質(zhì)量控制問題研究[D]. 熊霞.武漢大學(xué) 2004
本文編號:3262814
本文鏈接:http://sikaile.net/jingjilunwen/jtysjj/3262814.html
最近更新
教材專著