金融大數(shù)據(jù)分析服務(wù)的模型及應(yīng)用研究
發(fā)布時(shí)間:2021-11-22 07:45
隨著金融領(lǐng)域數(shù)據(jù)量的爆炸式持續(xù)增長(zhǎng),如何充分挖掘大數(shù)據(jù)的有效價(jià)值,如何及時(shí)快速處理大數(shù)據(jù)計(jì)算任務(wù),從而為用戶(hù)提供高價(jià)值高時(shí)效的服務(wù),已經(jīng)成為了當(dāng)前需要深入研究的問(wèn)題。在大數(shù)據(jù)時(shí)代,金融分析服務(wù)的處理模型和采用技術(shù)都面臨新挑戰(zhàn),亟需進(jìn)一步研究滿(mǎn)足服務(wù)價(jià)值和時(shí)效兩方面需求的服務(wù)模型、組合方法與大數(shù)據(jù)處理技術(shù)。本文首先設(shè)計(jì)金融大數(shù)據(jù)分析服務(wù)的模型、處理流程、系統(tǒng)框架,然后開(kāi)展多視角學(xué)習(xí)的組合方法和任務(wù)調(diào)度關(guān)鍵技術(shù)的研究,最后在此基礎(chǔ)上實(shí)現(xiàn)一個(gè)證券大數(shù)據(jù)分析服務(wù)系統(tǒng)。主要工作內(nèi)容如下:1)構(gòu)建金融大數(shù)據(jù)分析服務(wù)模型。以提供準(zhǔn)確及時(shí)的服務(wù)為目標(biāo),根據(jù)分層遞階思想設(shè)計(jì)出了四層服務(wù)模型。通過(guò)研究分析即服務(wù)(AnalysisasaService,AaaS)的相關(guān)概念,對(duì)各層功能進(jìn)行了形式化定義,并從中發(fā)現(xiàn)后續(xù)研究方向。此外,優(yōu)化了業(yè)務(wù)流程和系統(tǒng)架構(gòu),也分析了系統(tǒng)實(shí)現(xiàn)所需的關(guān)鍵技術(shù)。2)提升服務(wù)價(jià)值的方法研究,采用多視角學(xué)習(xí)方法的分析服務(wù)組合。針對(duì)傳統(tǒng)分析服務(wù)面臨大數(shù)據(jù)價(jià)值密度低、特征維度高的問(wèn)題,提出了多視角線(xiàn)性判別分析算法(Multi-view Linear Discriminant Analysi...
【文章來(lái)源】:西北大學(xué)陜西省 211工程院校
【文章頁(yè)數(shù)】:80 頁(yè)
【學(xué)位級(jí)別】:碩士
【部分圖文】:
論文組織結(jié)構(gòu)圖
根據(jù)相關(guān)技術(shù)算法進(jìn)行分析、計(jì)算數(shù)據(jù),在用戶(hù)調(diào)用時(shí)提供了數(shù)據(jù)分析結(jié)果的服務(wù)。??可以分為兩種服務(wù)模式:在線(xiàn)大數(shù)據(jù)分析服務(wù)模式和離線(xiàn)大數(shù)據(jù)分析服務(wù)模式,如下??圖3?(a)?(b)所示。??實(shí)時(shí)翻??用戶(hù)?I??響應(yīng)內(nèi)存??時(shí)久化??——*——??可視化結(jié)果^—分析結(jié)果^^磁盤(pán)?????????圖3?(a)在線(xiàn)大數(shù)據(jù)服務(wù)模式??9??
?^??圖3?(b)離線(xiàn)大數(shù)據(jù)服務(wù)模式??由圖3?(a)可知,在線(xiàn)大數(shù)據(jù)服務(wù)請(qǐng)求實(shí)時(shí)服務(wù),指對(duì)不斷采集的實(shí)時(shí)數(shù)據(jù)進(jìn)??行處理,適合實(shí)時(shí)性要求高、數(shù)據(jù)吞吐量略小的場(chǎng)景。這種模式下,數(shù)據(jù)進(jìn)入系統(tǒng)是??一般不會(huì)被存儲(chǔ),而是在內(nèi)存中直接計(jì)算得到結(jié)果,最后以可視化的形式返回用戶(hù)界??面。同時(shí),由圖3?(b)可知,離線(xiàn)大數(shù)據(jù)服務(wù)請(qǐng)求模式是先將實(shí)時(shí)數(shù)據(jù)與歷史數(shù)據(jù)??存儲(chǔ)起來(lái),等需要的時(shí)候才重新讀取數(shù)據(jù)進(jìn)行計(jì)算,更適合于實(shí)時(shí)性要求不高,對(duì)數(shù)??據(jù)進(jìn)行深度挖掘的場(chǎng)景。??2.?2服務(wù)模型??本文借助商空間理論[3()]中分層遞階思想[31]來(lái)設(shè)計(jì)金融大數(shù)據(jù)分析服務(wù)模型,這??種分層遞階思想是將復(fù)雜問(wèn)題逐層細(xì)分,直到找到最易求解的子問(wèn)題,通過(guò)逐個(gè)解決??子問(wèn)題來(lái)求得復(fù)雜問(wèn)題的解。采用分層遞階思想降低了模型的難度和復(fù)雜度,另有以??下三方面優(yōu)點(diǎn):1)復(fù)雜問(wèn)題求解簡(jiǎn)單化。能夠分割出問(wèn)題的多個(gè)層次以求得快速解??決
【參考文獻(xiàn)】:
期刊論文
[1]CCF大專(zhuān)委2016年大數(shù)據(jù)發(fā)展趨勢(shì)預(yù)測(cè)——解讀和行動(dòng)建議[J]. 潘柱廷,程學(xué)旗,袁曉如,周濤,靳小龍. 大數(shù)據(jù). 2016(01)
[2]基于特征表示的金融多元時(shí)間序列數(shù)據(jù)分析[J]. 萬(wàn);,李海林. 統(tǒng)計(jì)與決策. 2015(23)
[3]分布式系統(tǒng)下的DAG任務(wù)調(diào)度研究綜述[J]. 田國(guó)忠,肖創(chuàng)柏. 計(jì)算機(jī)工程與科學(xué). 2015(05)
[4]基于異構(gòu)CMP的改進(jìn)蟻群優(yōu)化任務(wù)調(diào)度策略[J]. 李靜梅,張大虎,吳艷霞. 計(jì)算機(jī)工程與應(yīng)用. 2015(18)
[5]一種基于多視圖數(shù)據(jù)的半監(jiān)督特征選擇和聚類(lèi)算法[J]. 汪荊琪,徐林莉. 數(shù)據(jù)采集與處理. 2015(01)
[6]大數(shù)據(jù)分析服務(wù)平臺(tái)實(shí)踐[J]. 丁賢. 電腦知識(shí)與技術(shù). 2015(01)
[7]大數(shù)據(jù)分析的方法及其在情報(bào)研究中的適用性初探[J]. 江信昱,王柏弟. 圖書(shū)與情報(bào). 2014(05)
[8]基于組件的大數(shù)據(jù)分析服務(wù)平臺(tái)[J]. 趙薇,劉杰,葉丹. 計(jì)算機(jī)科學(xué). 2014(09)
[9]大數(shù)據(jù)環(huán)境下基于云的分析即服務(wù)平臺(tái)研究[J]. 張鼐,張英,杜云,李英劍. 情報(bào)探索. 2014(08)
[10]基于任務(wù)復(fù)制的多關(guān)鍵路徑任務(wù)調(diào)度算法[J]. 李靜梅,尤曉非,韓啟龍. 計(jì)算機(jī)工程與設(shè)計(jì). 2014(05)
博士論文
[1]云環(huán)境下大數(shù)據(jù)服務(wù)及其關(guān)鍵技術(shù)研究[D]. 林文敏.南京大學(xué) 2015
[2]商空間的;P(guān)鍵技術(shù)及問(wèn)題求解研究[D]. 陳潔.安徽大學(xué) 2014
[3]大數(shù)據(jù)服務(wù)若干關(guān)鍵技術(shù)研究[D]. 韓晶.北京郵電大學(xué) 2013
碩士論文
[1]基于分層遞階的網(wǎng)絡(luò)結(jié)構(gòu)洞占據(jù)者挖掘研究[D]. 崔平平.安徽大學(xué) 2016
[2]科學(xué)大數(shù)據(jù)云分析服務(wù)的性能優(yōu)化技術(shù)研究[D]. 邱能俊.貴州大學(xué) 2015
本文編號(hào):3511249
【文章來(lái)源】:西北大學(xué)陜西省 211工程院校
【文章頁(yè)數(shù)】:80 頁(yè)
【學(xué)位級(jí)別】:碩士
【部分圖文】:
論文組織結(jié)構(gòu)圖
根據(jù)相關(guān)技術(shù)算法進(jìn)行分析、計(jì)算數(shù)據(jù),在用戶(hù)調(diào)用時(shí)提供了數(shù)據(jù)分析結(jié)果的服務(wù)。??可以分為兩種服務(wù)模式:在線(xiàn)大數(shù)據(jù)分析服務(wù)模式和離線(xiàn)大數(shù)據(jù)分析服務(wù)模式,如下??圖3?(a)?(b)所示。??實(shí)時(shí)翻??用戶(hù)?I??響應(yīng)內(nèi)存??時(shí)久化??——*——??可視化結(jié)果^—分析結(jié)果^^磁盤(pán)?????????圖3?(a)在線(xiàn)大數(shù)據(jù)服務(wù)模式??9??
?^??圖3?(b)離線(xiàn)大數(shù)據(jù)服務(wù)模式??由圖3?(a)可知,在線(xiàn)大數(shù)據(jù)服務(wù)請(qǐng)求實(shí)時(shí)服務(wù),指對(duì)不斷采集的實(shí)時(shí)數(shù)據(jù)進(jìn)??行處理,適合實(shí)時(shí)性要求高、數(shù)據(jù)吞吐量略小的場(chǎng)景。這種模式下,數(shù)據(jù)進(jìn)入系統(tǒng)是??一般不會(huì)被存儲(chǔ),而是在內(nèi)存中直接計(jì)算得到結(jié)果,最后以可視化的形式返回用戶(hù)界??面。同時(shí),由圖3?(b)可知,離線(xiàn)大數(shù)據(jù)服務(wù)請(qǐng)求模式是先將實(shí)時(shí)數(shù)據(jù)與歷史數(shù)據(jù)??存儲(chǔ)起來(lái),等需要的時(shí)候才重新讀取數(shù)據(jù)進(jìn)行計(jì)算,更適合于實(shí)時(shí)性要求不高,對(duì)數(shù)??據(jù)進(jìn)行深度挖掘的場(chǎng)景。??2.?2服務(wù)模型??本文借助商空間理論[3()]中分層遞階思想[31]來(lái)設(shè)計(jì)金融大數(shù)據(jù)分析服務(wù)模型,這??種分層遞階思想是將復(fù)雜問(wèn)題逐層細(xì)分,直到找到最易求解的子問(wèn)題,通過(guò)逐個(gè)解決??子問(wèn)題來(lái)求得復(fù)雜問(wèn)題的解。采用分層遞階思想降低了模型的難度和復(fù)雜度,另有以??下三方面優(yōu)點(diǎn):1)復(fù)雜問(wèn)題求解簡(jiǎn)單化。能夠分割出問(wèn)題的多個(gè)層次以求得快速解??決
【參考文獻(xiàn)】:
期刊論文
[1]CCF大專(zhuān)委2016年大數(shù)據(jù)發(fā)展趨勢(shì)預(yù)測(cè)——解讀和行動(dòng)建議[J]. 潘柱廷,程學(xué)旗,袁曉如,周濤,靳小龍. 大數(shù)據(jù). 2016(01)
[2]基于特征表示的金融多元時(shí)間序列數(shù)據(jù)分析[J]. 萬(wàn);,李海林. 統(tǒng)計(jì)與決策. 2015(23)
[3]分布式系統(tǒng)下的DAG任務(wù)調(diào)度研究綜述[J]. 田國(guó)忠,肖創(chuàng)柏. 計(jì)算機(jī)工程與科學(xué). 2015(05)
[4]基于異構(gòu)CMP的改進(jìn)蟻群優(yōu)化任務(wù)調(diào)度策略[J]. 李靜梅,張大虎,吳艷霞. 計(jì)算機(jī)工程與應(yīng)用. 2015(18)
[5]一種基于多視圖數(shù)據(jù)的半監(jiān)督特征選擇和聚類(lèi)算法[J]. 汪荊琪,徐林莉. 數(shù)據(jù)采集與處理. 2015(01)
[6]大數(shù)據(jù)分析服務(wù)平臺(tái)實(shí)踐[J]. 丁賢. 電腦知識(shí)與技術(shù). 2015(01)
[7]大數(shù)據(jù)分析的方法及其在情報(bào)研究中的適用性初探[J]. 江信昱,王柏弟. 圖書(shū)與情報(bào). 2014(05)
[8]基于組件的大數(shù)據(jù)分析服務(wù)平臺(tái)[J]. 趙薇,劉杰,葉丹. 計(jì)算機(jī)科學(xué). 2014(09)
[9]大數(shù)據(jù)環(huán)境下基于云的分析即服務(wù)平臺(tái)研究[J]. 張鼐,張英,杜云,李英劍. 情報(bào)探索. 2014(08)
[10]基于任務(wù)復(fù)制的多關(guān)鍵路徑任務(wù)調(diào)度算法[J]. 李靜梅,尤曉非,韓啟龍. 計(jì)算機(jī)工程與設(shè)計(jì). 2014(05)
博士論文
[1]云環(huán)境下大數(shù)據(jù)服務(wù)及其關(guān)鍵技術(shù)研究[D]. 林文敏.南京大學(xué) 2015
[2]商空間的;P(guān)鍵技術(shù)及問(wèn)題求解研究[D]. 陳潔.安徽大學(xué) 2014
[3]大數(shù)據(jù)服務(wù)若干關(guān)鍵技術(shù)研究[D]. 韓晶.北京郵電大學(xué) 2013
碩士論文
[1]基于分層遞階的網(wǎng)絡(luò)結(jié)構(gòu)洞占據(jù)者挖掘研究[D]. 崔平平.安徽大學(xué) 2016
[2]科學(xué)大數(shù)據(jù)云分析服務(wù)的性能優(yōu)化技術(shù)研究[D]. 邱能俊.貴州大學(xué) 2015
本文編號(hào):3511249
本文鏈接:http://sikaile.net/kejilunwen/ruanjiangongchenglunwen/3511249.html
最近更新
教材專(zhuān)著