在"互聯(lián)網(wǎng)+"和"中國制造2025"的推動下,傳統(tǒng)制造業(yè)正面臨著銷售與制造模式發(fā)生重大變化的嚴(yán)峻挑戰(zhàn)。本文針對大數(shù)據(jù)處理技術(shù)存在的問題開展研究工作,提出了基于高維數(shù)據(jù)降維的半結(jié)構(gòu)化數(shù)據(jù)清洗方法和基于圖論最短路徑求解的決策方法,并在此基礎(chǔ)上開發(fā)了機(jī)械零部件采購系統(tǒng)。本文的主要內(nèi)容如下:第一章,緒論。首先介紹了大數(shù)據(jù)技術(shù)在不同行業(yè)中的應(yīng)用及潛在價值,概述了數(shù)據(jù)清洗技術(shù)和基于圖論的最短路徑問題的國內(nèi)外研究現(xiàn)狀;針對大數(shù)據(jù)應(yīng)用過程中存在的數(shù)據(jù)質(zhì)量問題和海量數(shù)據(jù)下的決策問題,提出了相應(yīng)的解決方案;最后簡要說明了本文的研究內(nèi)容和組織架構(gòu)。第二章提出了基于高維數(shù)據(jù)降維的半結(jié)構(gòu)化數(shù)據(jù)清洗方法。根據(jù)半結(jié)構(gòu)化數(shù)據(jù)和XML文檔特點(diǎn)建立了樹模型,并提出了相似路徑。將相似路徑與向量空間模型結(jié)合,提出了XML文檔向量化表示方法;在主成分分析法與XML文檔向量化表示方法的綜合基礎(chǔ)上,提出了半結(jié)構(gòu)化數(shù)據(jù)降維方法,并以淘寶網(wǎng)上的梅花聯(lián)軸器為例,驗(yàn)證了方法的可行性。第三章提出了基于圖論最短路徑求解的決策方法。在介紹圖論基礎(chǔ)知識的基礎(chǔ)上,建立了基于鄰接矩陣表示法的圖模型;分析比較三種經(jīng)典的最短路徑算法優(yōu)缺點(diǎn),提出了基于限制...

【文章頁數(shù)】：86 頁

【學(xué)位級別】：碩士

【部分圖文】：

圖１．１全球大數(shù)據(jù)市場規(guī)模１１１??下圖１．２為２０１５年大數(shù)據(jù)在各行業(yè)應(yīng)用占比的分布圖

?麵基礎(chǔ)架巧■軟化■服務(wù)??圖１．１全球大數(shù)據(jù)市場規(guī)模１１１??下圖１．２為２０１５年大數(shù)據(jù)在各行業(yè)應(yīng)用占比的分布圖。從＇圖中可Ｗ看出，大??數(shù)據(jù)在零售業(yè)、金融業(yè)和智慧城市建設(shè)王大行業(yè)上的泣用已經(jīng)遠(yuǎn)超其他行業(yè)。行業(yè)??應(yīng)用存在巨大的差異的原因在于不同行業(yè)應(yīng)用大數(shù)據(jù)的潛在價值不同。....

圖１．２?２０１５年大數(shù)據(jù)各行業(yè)應(yīng)用占比ｍ??下圍１．３給出了金融業(yè)、ＩＴ行業(yè)、醫(yī)巧行業(yè)和制造業(yè)應(yīng)用大數(shù)據(jù)技術(shù)潛在價值??

？?麵基礎(chǔ)架巧■軟化■服務(wù)??圖１．１全球大數(shù)據(jù)市場規(guī)模１１１??下圖１．２為２０１５年大數(shù)據(jù)在各行業(yè)應(yīng)用占比的分布圖。從＇圖中可Ｗ看出，大??數(shù)據(jù)在零售業(yè)、金融業(yè)和智慧城市建設(shè)王大行業(yè)上的泣用已經(jīng)遠(yuǎn)超其他行業(yè)。行業(yè)??應(yīng)用存在巨大的差異的原因在于不同行業(yè)應(yīng)用大數(shù)據(jù)的潛在價值不同....

圖１．３四大行業(yè)應(yīng)用大數(shù)據(jù)技術(shù)潛在價值．??在醫(yī)療行業(yè)，度Ｍ么司最新的Ｗａｔｓｏｎ技術(shù)可Ｗ收集大量和患者的病情相關(guān)的?＊??Ｓ‘??

？?麵基礎(chǔ)架巧■軟化■服務(wù)??圖１．１全球大數(shù)據(jù)市場規(guī)模１１１??下圖１．２為２０１５年大數(shù)據(jù)在各行業(yè)應(yīng)用占比的分布圖。從＇圖中可Ｗ看出，大??數(shù)據(jù)在零售業(yè)、金融業(yè)和智慧城市建設(shè)王大行業(yè)上的泣用已經(jīng)遠(yuǎn)超其他行業(yè)。行業(yè)??應(yīng)用存在巨大的差異的原因在于不同行業(yè)應(yīng)用大數(shù)據(jù)的潛在價值不同....

圖２．２非結(jié)構(gòu)化數(shù)據(jù)

＜ｅｎｃｒｙｐｔ：ｅ?過＞０＜／ｅｎｃｒｙｐｔ：ｅｄ＞??－＜／ｐｌｕｇｘｎＩｎｆ?Ｑ＞??圖２．３半結(jié)構(gòu)化數(shù)據(jù)??２．２．２?ＸＭＬ的產(chǎn)生背景??ＸＭＬ（?Ｅｘｔｅｎ加ｌｅ?Ｍａｒｋｕｐ?Ｌａｎｇｕａｇｅ）是一種可拓展標(biāo)巧語言，它的前身是ＳＧＭＬ??（Ｓｔａｎｄａｒｄ?Ｇｅｎｅ....

本文編號：3929861