MQ多線(xiàn)程處理算法實(shí)現(xiàn)大數(shù)據(jù)處理的設(shè)計(jì)及實(shí)現(xiàn)
發(fā)布時(shí)間:2020-12-12 15:47
隨著大數(shù)據(jù)時(shí)代的到來(lái),銀行業(yè)的傳統(tǒng)集中式開(kāi)發(fā)部署模式已經(jīng)無(wú)法適應(yīng)于現(xiàn)代大數(shù)據(jù)量數(shù)據(jù)加工及存儲(chǔ),再加上銀行對(duì)靜態(tài)大數(shù)據(jù)進(jìn)行利用的濃烈興趣,行業(yè)內(nèi)智能化、自動(dòng)化、大數(shù)據(jù)化的趨勢(shì)使金融系統(tǒng)迎來(lái)了轉(zhuǎn)型升級(jí)的時(shí)期,各行也積極開(kāi)展大數(shù)據(jù)及智能化平臺(tái)。同時(shí)由于數(shù)據(jù)量的增長(zhǎng),對(duì)于消息中間件的要求也在不斷提高,如何能提高可靠性、處理效率,使系統(tǒng)間信息傳輸更加穩(wěn)定、快速,是金融系統(tǒng)對(duì)消息中間件的主要要求。作為銀行業(yè)大數(shù)據(jù)量數(shù)據(jù)的一種,征信信息近些年已經(jīng)越來(lái)越受到金融及銀行業(yè)的關(guān)注,它貫穿于客戶(hù)的整個(gè)業(yè)務(wù)周期,對(duì)客戶(hù)征信信息的監(jiān)控可以有效的控制風(fēng)險(xiǎn)。據(jù)在銀行業(yè)內(nèi)的調(diào)查,銀行很多業(yè)務(wù)如個(gè)貸、信用卡、客戶(hù)識(shí)別、公司授信等均需要使用征信信息進(jìn)行客戶(hù)的風(fēng)險(xiǎn)把控。面對(duì)大數(shù)據(jù)量的征信信息需求,如何能夠正確、快速的處理、存儲(chǔ)并且有效的使用這些征信信息,是銀行業(yè)在這方面急需解決的課題。本文從大數(shù)據(jù)征信信息的處理、存儲(chǔ)及使用入手,以銀行對(duì)征信信息管理和使用的實(shí)際業(yè)務(wù)需求出發(fā),探討在大數(shù)據(jù)環(huán)境下金融系統(tǒng)對(duì)數(shù)據(jù)處理、中間件消息傳遞以及數(shù)據(jù)挖掘的方法。提出采用分布式技術(shù)提高系統(tǒng)的可靠性,并運(yùn)用其高擴(kuò)展性解決對(duì)大數(shù)據(jù)的加工,使用IB...
【文章來(lái)源】:上海交通大學(xué)上海市 211工程院校 985工程院校 教育部直屬院校
【文章頁(yè)數(shù)】:88 頁(yè)
【學(xué)位級(jí)別】:碩士
【部分圖文】:
MQ消息中間件的集群技術(shù)效果圖
圖.3-9 MQ 消息中間件的集群技術(shù)效果圖Fig.3-9 MQ multiple instances impression drawing當(dāng)收到其他系統(tǒng)發(fā)送的請(qǐng)求后,網(wǎng)關(guān)隊(duì)列管理器通過(guò)集群通道將發(fā)到各個(gè)成員隊(duì)列管理器的集群隊(duì)列中,應(yīng)用程序讀取相應(yīng)分成員隊(duì)列管理器的集群隊(duì)列獲取數(shù)據(jù),將數(shù)據(jù)進(jìn)行分流處理。展示了集群將任務(wù)分發(fā)至隊(duì)列中的。
收入信息兩項(xiàng)進(jìn)行征信指標(biāo)計(jì)算,并與客戶(hù)不良狀況進(jìn)行匹配,獲得指標(biāo)與不良關(guān)系的聚類(lèi)結(jié)果,用于自動(dòng)校準(zhǔn)基于年齡、收入的征信指標(biāo)參數(shù)值。圖.3-12 智能校準(zhǔn)示例Fig.3-12 Example of intelligent calibration
【參考文獻(xiàn)】:
期刊論文
[1]大數(shù)據(jù)基礎(chǔ)存儲(chǔ)系統(tǒng)技術(shù)研究[J]. 王瑞通,李煒春. 計(jì)算機(jī)技術(shù)與發(fā)展. 2017(08)
[2]大數(shù)據(jù)挖掘在銀行業(yè)務(wù)領(lǐng)域的應(yīng)用[J]. 李小慶. 金融科技時(shí)代. 2017(05)
[3]Hadoop和Spark在實(shí)驗(yàn)室中部署與性能評(píng)估[J]. 薛志云,何軍,張丹陽(yáng),曹維焯. 實(shí)驗(yàn)室研究與探索. 2015(11)
[4]以大數(shù)據(jù)技術(shù)實(shí)現(xiàn)對(duì)公不良(逾期)貸款的預(yù)警[J]. 祁奇. 中國(guó)金融電腦. 2015(09)
[5]互聯(lián)網(wǎng)金融中的大數(shù)據(jù)征信體系構(gòu)建[J]. 趙海蕾,鄧?guó)Q茂,汪桂霞. 經(jīng)濟(jì)視角(上旬刊). 2015(04)
[6]基于Storm和Hadoop的大數(shù)據(jù)處理架構(gòu)的研究[J]. 靳永超,吳懷谷. 現(xiàn)代計(jì)算機(jī)(專(zhuān)業(yè)版). 2015(04)
[7]大數(shù)據(jù)系統(tǒng)和分析技術(shù)綜述[J]. 程學(xué)旗,靳小龍,王元卓,郭嘉豐,張鐵贏,李國(guó)杰. 軟件學(xué)報(bào). 2014(09)
[8]大數(shù)據(jù)的教育應(yīng)用研究綜述[J]. 劉鳳娟. 現(xiàn)代教育技術(shù). 2014(08)
[9]安全大數(shù)據(jù)的“7個(gè)V”——大數(shù)據(jù)基礎(chǔ)問(wèn)題與信息安全的交叉探究[J]. 潘柱廷. 中國(guó)信息安全. 2013(09)
[10]大數(shù)據(jù)存儲(chǔ)技術(shù)和標(biāo)準(zhǔn)化[J]. 李海波,程耀東. 信息技術(shù)與標(biāo)準(zhǔn)化. 2013(05)
碩士論文
[1]商業(yè)銀行信用卡客戶(hù)數(shù)據(jù)異常識(shí)別建模與實(shí)證分析[D]. 柏巍.南京大學(xué) 2014
本文編號(hào):2912849
【文章來(lái)源】:上海交通大學(xué)上海市 211工程院校 985工程院校 教育部直屬院校
【文章頁(yè)數(shù)】:88 頁(yè)
【學(xué)位級(jí)別】:碩士
【部分圖文】:
MQ消息中間件的集群技術(shù)效果圖
圖.3-9 MQ 消息中間件的集群技術(shù)效果圖Fig.3-9 MQ multiple instances impression drawing當(dāng)收到其他系統(tǒng)發(fā)送的請(qǐng)求后,網(wǎng)關(guān)隊(duì)列管理器通過(guò)集群通道將發(fā)到各個(gè)成員隊(duì)列管理器的集群隊(duì)列中,應(yīng)用程序讀取相應(yīng)分成員隊(duì)列管理器的集群隊(duì)列獲取數(shù)據(jù),將數(shù)據(jù)進(jìn)行分流處理。展示了集群將任務(wù)分發(fā)至隊(duì)列中的。
收入信息兩項(xiàng)進(jìn)行征信指標(biāo)計(jì)算,并與客戶(hù)不良狀況進(jìn)行匹配,獲得指標(biāo)與不良關(guān)系的聚類(lèi)結(jié)果,用于自動(dòng)校準(zhǔn)基于年齡、收入的征信指標(biāo)參數(shù)值。圖.3-12 智能校準(zhǔn)示例Fig.3-12 Example of intelligent calibration
【參考文獻(xiàn)】:
期刊論文
[1]大數(shù)據(jù)基礎(chǔ)存儲(chǔ)系統(tǒng)技術(shù)研究[J]. 王瑞通,李煒春. 計(jì)算機(jī)技術(shù)與發(fā)展. 2017(08)
[2]大數(shù)據(jù)挖掘在銀行業(yè)務(wù)領(lǐng)域的應(yīng)用[J]. 李小慶. 金融科技時(shí)代. 2017(05)
[3]Hadoop和Spark在實(shí)驗(yàn)室中部署與性能評(píng)估[J]. 薛志云,何軍,張丹陽(yáng),曹維焯. 實(shí)驗(yàn)室研究與探索. 2015(11)
[4]以大數(shù)據(jù)技術(shù)實(shí)現(xiàn)對(duì)公不良(逾期)貸款的預(yù)警[J]. 祁奇. 中國(guó)金融電腦. 2015(09)
[5]互聯(lián)網(wǎng)金融中的大數(shù)據(jù)征信體系構(gòu)建[J]. 趙海蕾,鄧?guó)Q茂,汪桂霞. 經(jīng)濟(jì)視角(上旬刊). 2015(04)
[6]基于Storm和Hadoop的大數(shù)據(jù)處理架構(gòu)的研究[J]. 靳永超,吳懷谷. 現(xiàn)代計(jì)算機(jī)(專(zhuān)業(yè)版). 2015(04)
[7]大數(shù)據(jù)系統(tǒng)和分析技術(shù)綜述[J]. 程學(xué)旗,靳小龍,王元卓,郭嘉豐,張鐵贏,李國(guó)杰. 軟件學(xué)報(bào). 2014(09)
[8]大數(shù)據(jù)的教育應(yīng)用研究綜述[J]. 劉鳳娟. 現(xiàn)代教育技術(shù). 2014(08)
[9]安全大數(shù)據(jù)的“7個(gè)V”——大數(shù)據(jù)基礎(chǔ)問(wèn)題與信息安全的交叉探究[J]. 潘柱廷. 中國(guó)信息安全. 2013(09)
[10]大數(shù)據(jù)存儲(chǔ)技術(shù)和標(biāo)準(zhǔn)化[J]. 李海波,程耀東. 信息技術(shù)與標(biāo)準(zhǔn)化. 2013(05)
碩士論文
[1]商業(yè)銀行信用卡客戶(hù)數(shù)據(jù)異常識(shí)別建模與實(shí)證分析[D]. 柏巍.南京大學(xué) 2014
本文編號(hào):2912849
本文鏈接:http://sikaile.net/jingjilunwen/huobiyinxinglunwen/2912849.html
最近更新
教材專(zhuān)著