金融領(lǐng)域多通道信息監(jiān)控系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)
發(fā)布時(shí)間:2022-07-10 13:59
近年來(lái)金融風(fēng)險(xiǎn)事件頻發(fā),造成的后果也愈加嚴(yán)重,及時(shí)獲取風(fēng)險(xiǎn)信息意味著有更充足的時(shí)間采取應(yīng)對(duì)措施。互聯(lián)網(wǎng)作為當(dāng)前金融信息傳播的主要渠道,具有實(shí)時(shí)性高、覆蓋內(nèi)容廣的特點(diǎn),然而在信息爆炸的時(shí)代,已經(jīng)無(wú)法單純依靠人工來(lái)獲取和處理信息,因此金融機(jī)構(gòu)和從業(yè)人員迫切需要一種高效靈活的方法,對(duì)給定的多網(wǎng)絡(luò)渠道的金融信息進(jìn)行實(shí)時(shí)監(jiān)控,從大量信息中及時(shí)獲取相關(guān)風(fēng)險(xiǎn)信息,提前采取措施規(guī)避風(fēng)險(xiǎn)。本文針對(duì)當(dāng)前金融信息獲取效率低下的問(wèn)題開(kāi)展了研究,設(shè)計(jì)并實(shí)現(xiàn)了一個(gè)金融領(lǐng)域多通道信息監(jiān)控系統(tǒng)。主要研究?jī)?nèi)容如下:(1)對(duì)金融領(lǐng)域多通道信息監(jiān)控系統(tǒng)進(jìn)行需求分析并設(shè)計(jì)系統(tǒng)架構(gòu),將系統(tǒng)分為多通道的信息采集子系統(tǒng)、金融風(fēng)險(xiǎn)事件抽取子系統(tǒng)、信息實(shí)時(shí)監(jiān)控子系統(tǒng)三大部分;(2)設(shè)計(jì)多通道的信息采集子系統(tǒng),本文基于Scrapy設(shè)計(jì)和實(shí)現(xiàn)分布式爬蟲(chóng)工具,通過(guò)定義配置文件和解析模版來(lái)定制爬蟲(chóng),通過(guò)Celery分布式任務(wù)隊(duì)列實(shí)現(xiàn)分布式抓取,通過(guò)基于Redis的哈希壓縮去重方法和布隆過(guò)濾器去重方法,解決了分布式爬蟲(chóng)系統(tǒng)的URL去重問(wèn)題,并設(shè)計(jì)依賴(lài)URL去重的增量抓取和斷點(diǎn)續(xù)爬;(3)設(shè)計(jì)金融風(fēng)險(xiǎn)事件抽取子系統(tǒng),本文設(shè)計(jì)和實(shí)現(xiàn)了基于觸發(fā)詞擴(kuò)展...
【文章頁(yè)數(shù)】:73 頁(yè)
【學(xué)位級(jí)別】:碩士
【部分圖文】:
圖2-1?HTML頁(yè)面D0M樹(shù)結(jié)構(gòu)??2.1.4?爬蟲(chóng)框架Scrapy??
圖2-2?Scrapy架構(gòu)??數(shù)據(jù)流由Scrapy?engine?(執(zhí)行引擎)控制,過(guò)程如下:??1)引擎找到爬蟲(chóng)對(duì)應(yīng)Spider,從中獲取待爬Request送給調(diào)度器進(jìn)行調(diào)度,??
圖3-2多通道信息監(jiān)控系統(tǒng)架構(gòu)圖??根據(jù)系統(tǒng)需求分析及系統(tǒng)設(shè)計(jì)目標(biāo),本論文設(shè)計(jì)系統(tǒng)的整體架構(gòu)如圖3-2所??
【參考文獻(xiàn)】:
期刊論文
[1]神經(jīng)網(wǎng)絡(luò)事件抽取技術(shù)綜述[J]. 秦彥霞,張民,鄭德權(quán). 智能計(jì)算機(jī)與應(yīng)用. 2018(03)
[2]面向事件抽取的深度與主動(dòng)聯(lián)合學(xué)習(xí)方法[J]. 邱盈盈,洪宇,周文瑄,姚建民,朱巧明. 中文信息學(xué)報(bào). 2018(06)
[3]基于深度信念網(wǎng)絡(luò)的事件識(shí)別[J]. 張亞軍,劉宗田,周文. 電子學(xué)報(bào). 2017(06)
[4]基于語(yǔ)義的中文事件觸發(fā)詞抽取聯(lián)合模型[J]. 李培峰,周?chē)?guó)棟,朱巧明. 軟件學(xué)報(bào). 2016(02)
[5]Redis數(shù)據(jù)庫(kù)特性分析[J]. 馬豫星. 物聯(lián)網(wǎng)技術(shù). 2015(03)
[6]Redis在高速緩存系統(tǒng)中的應(yīng)用[J]. 曾超宇,李金香. 微型機(jī)與應(yīng)用. 2013(12)
[7]基于Bloom Filter的海量數(shù)據(jù)分布式快速匹配算法研究[J]. 羅理,劉響光,胡振,周姣,張剛偉,李啟平. 計(jì)算機(jī)與數(shù)字工程. 2011(03)
[8]事件抽取技術(shù)的回顧與展望[J]. 許旭陽(yáng),韓永峰,宋文政. 信息工程大學(xué)學(xué)報(bào). 2011(01)
[9]面向資源的RESTful Web應(yīng)用研究[J]. 潘冰. 微計(jì)算機(jī)應(yīng)用. 2010(07)
[10]網(wǎng)絡(luò)爬蟲(chóng)技術(shù)的研究[J]. 孫立偉,何國(guó)輝,吳禮發(fā). 電腦知識(shí)與技術(shù). 2010(15)
博士論文
[1]中文事件抽取關(guān)鍵技術(shù)研究[D]. 譚紅葉.哈爾濱工業(yè)大學(xué) 2008
碩士論文
[1]面向建材信息的網(wǎng)絡(luò)爬蟲(chóng)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D]. 于懷寶.北京交通大學(xué) 2015
[2]網(wǎng)絡(luò)金融數(shù)據(jù)分析系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D]. 臧凱源.北京交通大學(xué) 2015
[3]中文命名實(shí)體識(shí)別方法研究[D]. 廖先桃.哈爾濱工業(yè)大學(xué) 2006
[4]基于條件隨機(jī)場(chǎng)的中文命名實(shí)體識(shí)別[D]. 向曉雯.廈門(mén)大學(xué) 2006
本文編號(hào):3657810
【文章頁(yè)數(shù)】:73 頁(yè)
【學(xué)位級(jí)別】:碩士
【部分圖文】:
圖2-1?HTML頁(yè)面D0M樹(shù)結(jié)構(gòu)??2.1.4?爬蟲(chóng)框架Scrapy??
圖2-2?Scrapy架構(gòu)??數(shù)據(jù)流由Scrapy?engine?(執(zhí)行引擎)控制,過(guò)程如下:??1)引擎找到爬蟲(chóng)對(duì)應(yīng)Spider,從中獲取待爬Request送給調(diào)度器進(jìn)行調(diào)度,??
圖3-2多通道信息監(jiān)控系統(tǒng)架構(gòu)圖??根據(jù)系統(tǒng)需求分析及系統(tǒng)設(shè)計(jì)目標(biāo),本論文設(shè)計(jì)系統(tǒng)的整體架構(gòu)如圖3-2所??
【參考文獻(xiàn)】:
期刊論文
[1]神經(jīng)網(wǎng)絡(luò)事件抽取技術(shù)綜述[J]. 秦彥霞,張民,鄭德權(quán). 智能計(jì)算機(jī)與應(yīng)用. 2018(03)
[2]面向事件抽取的深度與主動(dòng)聯(lián)合學(xué)習(xí)方法[J]. 邱盈盈,洪宇,周文瑄,姚建民,朱巧明. 中文信息學(xué)報(bào). 2018(06)
[3]基于深度信念網(wǎng)絡(luò)的事件識(shí)別[J]. 張亞軍,劉宗田,周文. 電子學(xué)報(bào). 2017(06)
[4]基于語(yǔ)義的中文事件觸發(fā)詞抽取聯(lián)合模型[J]. 李培峰,周?chē)?guó)棟,朱巧明. 軟件學(xué)報(bào). 2016(02)
[5]Redis數(shù)據(jù)庫(kù)特性分析[J]. 馬豫星. 物聯(lián)網(wǎng)技術(shù). 2015(03)
[6]Redis在高速緩存系統(tǒng)中的應(yīng)用[J]. 曾超宇,李金香. 微型機(jī)與應(yīng)用. 2013(12)
[7]基于Bloom Filter的海量數(shù)據(jù)分布式快速匹配算法研究[J]. 羅理,劉響光,胡振,周姣,張剛偉,李啟平. 計(jì)算機(jī)與數(shù)字工程. 2011(03)
[8]事件抽取技術(shù)的回顧與展望[J]. 許旭陽(yáng),韓永峰,宋文政. 信息工程大學(xué)學(xué)報(bào). 2011(01)
[9]面向資源的RESTful Web應(yīng)用研究[J]. 潘冰. 微計(jì)算機(jī)應(yīng)用. 2010(07)
[10]網(wǎng)絡(luò)爬蟲(chóng)技術(shù)的研究[J]. 孫立偉,何國(guó)輝,吳禮發(fā). 電腦知識(shí)與技術(shù). 2010(15)
博士論文
[1]中文事件抽取關(guān)鍵技術(shù)研究[D]. 譚紅葉.哈爾濱工業(yè)大學(xué) 2008
碩士論文
[1]面向建材信息的網(wǎng)絡(luò)爬蟲(chóng)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D]. 于懷寶.北京交通大學(xué) 2015
[2]網(wǎng)絡(luò)金融數(shù)據(jù)分析系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D]. 臧凱源.北京交通大學(xué) 2015
[3]中文命名實(shí)體識(shí)別方法研究[D]. 廖先桃.哈爾濱工業(yè)大學(xué) 2006
[4]基于條件隨機(jī)場(chǎng)的中文命名實(shí)體識(shí)別[D]. 向曉雯.廈門(mén)大學(xué) 2006
本文編號(hào):3657810
本文鏈接:http://sikaile.net/jingjilunwen/huobiyinxinglunwen/3657810.html
最近更新
教材專(zhuān)著