改進的C4.5算法在期貨數(shù)據(jù)挖掘中的研究
【圖文】:
2017,53(11)K≤0,這個取值區(qū)間正好與L1的取值區(qū)間[0,+∞)隔開且相鄰。圖1中分別顯示了不同K值下L2的曲線圖,從下到上,K的取值分別為-1、-0.7、-0.5、-0.3、-0.1。從圖中可以看出K取值越接近于-1,曲線L2越陡峭,,離L3越近;反之越趨近于0,曲線愈加平滑,離x軸愈近。從圖1中也容易觀察到曲線L2與L1相比,L2要平滑得多,因此可以通過訓(xùn)練K取不同值,進而用帶加權(quán)參數(shù)K的x′來弱化某些強關(guān)聯(lián)屬性的信息熵,以達到提高弱關(guān)聯(lián)屬性在決策樹全局范圍的分類能力。以下就C4.5-K算法通過訓(xùn)練K進而構(gòu)建決策樹的流程進行闡述。2.4改進算法的決策樹構(gòu)建過程在構(gòu)建決策樹[11-13]的過程中,C4.5-K算法首先需要取一初始K值,并判斷所處理的屬性是離散屬性還是連續(xù)屬性,若為離散屬性則按照公式(1)得到相應(yīng)的信息熵;若為連續(xù)屬性,首先對連續(xù)屬性的數(shù)據(jù)進行排序,通過公式(2)計算其信息熵,根據(jù)C4.5算法計算其信息增益,再采用公式(3)計算該屬性的信息增益率。然后通過比對按不同屬性計算的信息增益率值的大小,確定優(yōu)先分裂的屬性。按照上述步驟獲得決策樹后,當(dāng)出現(xiàn)生成的決策樹模型誤差率大于指定閾值時,可通過調(diào)整加權(quán)參數(shù)K的取值,進行反復(fù)實驗來使得生成的決策樹模型和樣本實際數(shù)據(jù)逐漸逼近,使訓(xùn)練誤差率降到最低,最終達到提高決策樹預(yù)測準(zhǔn)確性的目的。其相應(yīng)的流程圖如圖2所示。3實驗與分析為了驗證C4.5-K算法的準(zhǔn)確性和有效性,以下將以雞蛋期貨歷史數(shù)據(jù)為例進行訓(xùn)練建模。期貨原始數(shù)據(jù)項主要包括合約種類、開盤價、收盤價、最高價、最低價、漲跌1、結(jié)算價、漲跌2、交易日期、持倉量、成交量等屬性。3.1數(shù)據(jù)預(yù)處理為了方便后續(xù)的數(shù)據(jù)挖掘,首先需要對期貨原始數(shù)據(jù)進行預(yù)處理[14-15],有關(guān)處理內(nèi)容
2017,53(11)K≤0,這個取值區(qū)間正好與L1的取值區(qū)間[0,+∞)隔開且相鄰。圖1中分別顯示了不同K值下L2的曲線圖,從下到上,K的取值分別為-1、-0.7、-0.5、-0.3、-0.1。從圖中可以看出K取值越接近于-1,曲線L2越陡峭,離L3越近;反之越趨近于0,曲線愈加平滑,離x軸愈近。從圖1中也容易觀察到曲線L2與L1相比,L2要平滑得多,因此可以通過訓(xùn)練K取不同值,進而用帶加權(quán)參數(shù)K的x′來弱化某些強關(guān)聯(lián)屬性的信息熵,以達到提高弱關(guān)聯(lián)屬性在決策樹全局范圍的分類能力。以下就C4.5-K算法通過訓(xùn)練K進而構(gòu)建決策樹的流程進行闡述。2.4改進算法的決策樹構(gòu)建過程在構(gòu)建決策樹[11-13]的過程中,C4.5-K算法首先需要取一初始K值,并判斷所處理的屬性是離散屬性還是連續(xù)屬性,若為離散屬性則按照公式(1)得到相應(yīng)的信息熵;若為連續(xù)屬性,首先對連續(xù)屬性的數(shù)據(jù)進行排序,通過公式(2)計算其信息熵,根據(jù)C4.5算法計算其信息增益,再采用公式(3)計算該屬性的信息增益率。然后通過比對按不同屬性計算的信息增益率值的大小,確定優(yōu)先分裂的屬性。按照上述步驟獲得決策樹后,當(dāng)出現(xiàn)生成的決策樹模型誤差率大于指定閾值時,可通過調(diào)整加權(quán)參數(shù)K的取值,進行反復(fù)實驗來使得生成的決策樹模型和樣本實際數(shù)據(jù)逐漸逼近,使訓(xùn)練誤差率降到最低,最終達到提高決策樹預(yù)測準(zhǔn)確性的目的。其相應(yīng)的流程圖如圖2所示。3實驗與分析為了驗證C4.5-K算法的準(zhǔn)確性和有效性,以下將以雞蛋期貨歷史數(shù)據(jù)為例進行訓(xùn)練建模。期貨原始數(shù)據(jù)項主要包括合約種類、開盤價、收盤價、最高價、最低價、漲跌1、結(jié)算價、漲跌2、交易日期、持倉量、成交量等屬性。3.1數(shù)據(jù)預(yù)處理為了方便后續(xù)的數(shù)據(jù)挖掘,首先需要對期貨原始數(shù)據(jù)進行預(yù)處理[14-15],有關(guān)處理內(nèi)容
【相似文獻】
相關(guān)期刊論文 前10條
1 香麗蕓;淺談數(shù)據(jù)挖掘及其應(yīng)用[J];昌吉師專學(xué)報;2001年02期
2 鄭雪燕,張杰明,岳洋;數(shù)據(jù)挖掘語言[J];計算機時代;2001年11期
3 劉明晶;數(shù)據(jù)挖掘[J];華南金融電腦;2001年04期
4 張偉;劉勇國;彭軍;廖曉峰;吳中福;;數(shù)據(jù)挖掘發(fā)展研究[J];計算機科學(xué);2001年07期
5 鐘曉;馬少平;張鈸;俞瑞釗;;數(shù)據(jù)挖掘綜述[J];模式識別與人工智能;2001年01期
6 朱建平,張潤楚;數(shù)據(jù)挖掘的發(fā)展及其特點[J];統(tǒng)計與決策;2002年07期
7 傅嵐;在數(shù)據(jù)海洋中打撈信息數(shù)據(jù)挖掘[J];科技廣場;2002年11期
8 李峻;數(shù)據(jù)挖掘,企業(yè)洞察先機的“慧眼”[J];中國計算機用戶;2002年48期
9 羅可,蔡碧野,卜勝賢,謝中科;數(shù)據(jù)挖掘及其發(fā)展研究[J];計算機工程與應(yīng)用;2002年14期
10 ;2002數(shù)據(jù)挖掘研討班[J];計算機工程;2002年06期
相關(guān)會議論文 前10條
1 史東輝;蔡慶生;張春陽;;一種新的數(shù)據(jù)挖掘多策略方法研究[A];第十七屆全國數(shù)據(jù)庫學(xué)術(shù)會議論文集(研究報告篇)[C];2000年
2 張弦;;數(shù)據(jù)挖掘在農(nóng)業(yè)中的應(yīng)用[A];紀(jì)念中國農(nóng)業(yè)工程學(xué)會成立30周年暨中國農(nóng)業(yè)工程學(xué)會2009年學(xué)術(shù)年會(CSAE 2009)論文集[C];2009年
3 魏順平;;教育數(shù)據(jù)挖掘:現(xiàn)狀與趨勢[A];信息化、工業(yè)化融合與服務(wù)創(chuàng)新——第十三屆計算機模擬與信息技術(shù)學(xué)術(shù)會議論文集[C];2011年
4 關(guān)清平;沉培輝;;概率網(wǎng)絡(luò)在數(shù)據(jù)挖掘上的應(yīng)用[A];科技、工程與經(jīng)濟社會協(xié)調(diào)發(fā)展——中國科協(xié)第五屆青年學(xué)術(shù)年會論文集[C];2004年
5 丁瑾;;基于Web數(shù)據(jù)挖掘的綜述[A];山西省科學(xué)技術(shù)情報學(xué)會學(xué)術(shù)年會論文集[C];2004年
6 聶茹;田森平;;Web數(shù)據(jù)挖掘及其在電子商務(wù)中的應(yīng)用[A];中南六。▍^(qū))自動化學(xué)會第24屆學(xué)術(shù)年會會議論文集[C];2006年
7 李菊;王軍;;數(shù)據(jù)挖掘在客戶關(guān)系管理的應(yīng)用[A];計算機技術(shù)與應(yīng)用進展·2007——全國第18屆計算機技術(shù)與應(yīng)用(CACIS)學(xué)術(shù)會議論文集[C];2007年
8 肖陽;李啟賢;;數(shù)據(jù)挖掘在中國鋼鐵行業(yè)中的應(yīng)用[A];中國計量協(xié)會冶金分會2012年會暨能源計量與節(jié)能降耗經(jīng)驗交流會論文集[C];2012年
9 楊磊;王貴成;汪勇;張占勝;;SQL Server 2005在數(shù)據(jù)挖掘中的應(yīng)用[A];2009年中國智能自動化會議論文集(第二分冊)[C];2009年
10 謝中;邱玉輝;;面向商務(wù)網(wǎng)站有效性的數(shù)據(jù)挖掘方法[A];第十八屆全國數(shù)據(jù)庫學(xué)術(shù)會議論文集(技術(shù)報告篇)[C];2001年
相關(guān)重要報紙文章 前10條
1 □中國電信股份有限公司北京研究院 張舒博 □北京郵電大學(xué)計算機科學(xué)與技術(shù)學(xué)院 牛琨;走出數(shù)據(jù)挖掘的誤區(qū)[N];人民郵電;2006年
2 《網(wǎng)絡(luò)世界》記者 王瑩;數(shù)據(jù)挖掘保險業(yè)的新藍海[N];網(wǎng)絡(luò)世界;2012年
3 劉俊麗;基于地理化的網(wǎng)絡(luò)數(shù)據(jù)挖掘與分析提升投資有效性[N];人民郵電;2014年
4 ;數(shù)據(jù)挖掘:如何挖出效益?[N];中國計算機報;2004年
5 任中華;財務(wù)數(shù)據(jù)挖掘六步走[N];中國計算機報;2007年
6 電腦商報記者 謝濤;數(shù)據(jù)挖掘:未來政府信息化的重要環(huán)節(jié)[N];電腦商報;2007年
7 吳勇毅;軟件選型:數(shù)據(jù)挖掘是重點[N];中國冶金報;2009年
8 本報特約撰稿 許麗萍;數(shù)據(jù)挖掘:軟件應(yīng)用的新境界[N];計算機世界;2009年
9 謝立宏博士;企業(yè)的“黃金眼”數(shù)據(jù)挖掘決策支持[N];中國計算機報;2002年
10 吳勇毅;危機下,數(shù)據(jù)挖掘與提供信息決策是關(guān)健[N];中國冶金報;2009年
相關(guān)博士學(xué)位論文 前10條
1 于自強;海量流數(shù)據(jù)挖掘相關(guān)問題研究[D];山東大學(xué);2015年
2 張馨;全基因組SNP芯片應(yīng)用于CNV和L0H分析的軟件比對與數(shù)據(jù)挖掘[D];復(fù)旦大學(xué);2011年
3 李秋虹;基于MapReduce的大規(guī)模數(shù)據(jù)挖掘技術(shù)研究[D];復(fù)旦大學(xué);2013年
4 白曉明;基于數(shù)據(jù)挖掘的復(fù)合材料宏—細觀力學(xué)模型研究[D];哈爾濱工業(yè)大學(xué);2016年
5 吳賢;社會化數(shù)據(jù)挖掘中的若干問題研究[D];上海交通大學(xué);2015年
6 楊博;基于GPU異構(gòu)體系結(jié)構(gòu)的大規(guī)模圖數(shù)據(jù)挖掘關(guān)鍵技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2015年
7 馮驥;自然鄰居思想概念及其在數(shù)據(jù)挖掘領(lǐng)域的應(yīng)用[D];重慶大學(xué);2016年
8 李榮;生物信息數(shù)據(jù)挖掘若干關(guān)鍵問題研究與應(yīng)用[D];復(fù)旦大學(xué);2004年
9 李玉華;面向服務(wù)的數(shù)據(jù)挖掘關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2006年
10 吳少智;時間序列數(shù)據(jù)挖掘在生物醫(yī)學(xué)中的應(yīng)用研究[D];電子科技大學(xué);2010年
相關(guān)碩士學(xué)位論文 前10條
1 林仁紅;基于數(shù)據(jù)挖掘的機遇識別與評價研究[D];首都經(jīng)濟貿(mào)易大學(xué);2007年
2 張彥俊;游戲運營中的數(shù)據(jù)挖掘[D];復(fù)旦大學(xué);2011年
3 焦亞召;基于多核函數(shù)FCM算法在數(shù)據(jù)挖掘聚類中的應(yīng)用研究[D];昆明理工大學(xué);2015年
4 王杰鋒;物聯(lián)網(wǎng)能耗數(shù)據(jù)智能分析及其應(yīng)用平臺設(shè)計[D];江南大學(xué);2015年
5 戴陽陽;基于數(shù)據(jù)挖掘的金融時間序列預(yù)測研究與應(yīng)用[D];江南大學(xué);2015年
6 石思優(yōu);基于主題模型的醫(yī)療數(shù)據(jù)挖掘研究[D];廣東技術(shù)師范學(xué)院;2015年
7 陳丹;移動互聯(lián)網(wǎng)信令挖掘?qū)崿F(xiàn)智慧營銷的設(shè)計與實現(xiàn)應(yīng)用研究[D];華南理工大學(xué);2015年
8 陳思;基于數(shù)據(jù)挖掘的大學(xué)生客戶識別模型的研究[D];昆明理工大學(xué);2015年
9 位長帥;基于客戶數(shù)據(jù)挖掘的電信客戶關(guān)系管理研究[D];西南交通大學(xué);2015年
10 言炯;數(shù)據(jù)挖掘在高考錄取因素分析中的應(yīng)用研究[D];蘇州大學(xué);2015年
本文編號:2553958
本文鏈接:http://sikaile.net/kejilunwen/ruanjiangongchenglunwen/2553958.html