我國(guó)是世界中藥材資源大國(guó),也是中藥材貿(mào)易大國(guó)。中藥材的開(kāi)發(fā)和有效利用在我國(guó)已有幾千年的歷史,是作為人民防病治病的主要武器,對(duì)保障人民健康和民族繁衍起著不可忽視的作用,中藥材產(chǎn)業(yè)成為國(guó)民經(jīng)濟(jì)重要支柱之一。中藥材種植不僅影響其質(zhì)量,同時(shí)也影響整個(gè)產(chǎn)業(yè)的正常發(fā)展。種植作為中藥材產(chǎn)業(yè)的最前端,需要收集更多的相關(guān)信息,縱然隨著網(wǎng)絡(luò)技術(shù)的發(fā)展和廣泛應(yīng)用,網(wǎng)上存在著大量的中藥材產(chǎn)業(yè)的信息,但這些信息存在源頭多、數(shù)據(jù)雜、采集難的問(wèn)題,缺乏合理的梳理歸類(lèi);即便是統(tǒng)計(jì)數(shù)據(jù),各系統(tǒng)之間也相互獨(dú)立,形成―數(shù)據(jù)孤島‖,不能實(shí)現(xiàn)數(shù)據(jù)共享。基于上述問(wèn)題,本文利用Scrapy爬蟲(chóng)技術(shù),對(duì)我國(guó)常用大宗中藥材種植相關(guān)的數(shù)據(jù),如:種植年份、地域、面積、產(chǎn)量、交易價(jià)格等方面的多源異構(gòu)的數(shù)據(jù)進(jìn)行收集整理,通過(guò)數(shù)據(jù)的交互,采用Django Web網(wǎng)絡(luò)開(kāi)發(fā)框架,設(shè)計(jì)并實(shí)現(xiàn)了基于B/S構(gòu)架的大宗中藥材種植可視化系統(tǒng),并利用該系統(tǒng)進(jìn)行了大量規(guī)律分析,實(shí)現(xiàn)了快速尋找這些大數(shù)據(jù)背后的規(guī)律,為中藥材種植產(chǎn)業(yè)服務(wù)。主要研究結(jié)果包括:(1)系統(tǒng)功能需求分析。對(duì)系統(tǒng)進(jìn)行了功能需求分析,確定了系統(tǒng)的5大功能需求:數(shù)據(jù)采集需求、數(shù)據(jù)處理需求、數(shù)據(jù)存儲(chǔ)...

【文章頁(yè)數(shù)】：69 頁(yè)

【學(xué)位級(jí)別】：碩士

【部分圖文】：

圖1-1農(nóng)業(yè)統(tǒng)計(jì)數(shù)據(jù)可視化系統(tǒng)

懈慕??傭?嶸?嘣?畔⒖墑踴?鬧憊郾澩錟芰Γ?⒐菇??多因子風(fēng)險(xiǎn)評(píng)估的信息可視化數(shù)據(jù)挖掘流程，使信息可視化數(shù)據(jù)挖掘技術(shù)成為石油勘探開(kāi)發(fā)多學(xué)科與信息科學(xué)技術(shù)相結(jié)合的新途徑。王怡（2015）構(gòu)建了農(nóng)業(yè)文本信息檢索可視化平臺(tái)，該系統(tǒng)通過(guò)數(shù)據(jù)抽娶清洗、整理和中文分詞等技術(shù)對(duì)農(nóng)業(yè)Web文獻(xiàn)....

圖1-2基于電力大數(shù)據(jù)的居民用電量預(yù)測(cè)和可視化交互平臺(tái)（圖片來(lái)源：向翰丞.基于電力大數(shù)據(jù)的居民電量預(yù)測(cè)和可視化平臺(tái)設(shè)計(jì)

西南大學(xué)碩士學(xué)位論文v6如圖1-2所示。該可視化交互平臺(tái)利用了Tableau數(shù)據(jù)分析展示軟件，通過(guò)研究某地區(qū)電力行業(yè)海量數(shù)據(jù)，實(shí)現(xiàn)了居民用電量的監(jiān)測(cè)和預(yù)測(cè)管理，但該平臺(tái)對(duì)數(shù)據(jù)的可視化內(nèi)容較少，且可視化圖表展現(xiàn)內(nèi)容較少。圖1-2基于電力大數(shù)據(jù)的居民用電量預(yù)測(cè)和可視化交互平臺(tái)（圖片來(lái)....

圖4-1爬蟲(chóng)框架目錄結(jié)構(gòu)

第4章數(shù)據(jù)采集系統(tǒng)設(shè)計(jì)17第4章數(shù)據(jù)采集系統(tǒng)設(shè)計(jì)4.1使用Scrapy創(chuàng)建項(xiàng)目為了獲取中藥材數(shù)據(jù)，需要搭建Scrapy爬蟲(chóng)框架，通過(guò)其快速便利的功能采集所需要的網(wǎng)絡(luò)數(shù)據(jù)。要使用Scrapy框架創(chuàng)建項(xiàng)目，需要通過(guò)命令來(lái)創(chuàng)建。在安裝完成Scrapy的工具包后，執(zhí)行如下指令：scrap....

圖4-2用戶代理Fig.4-2User-Agent

西南大學(xué)碩士學(xué)位論文18因?yàn)閞obots.txt是遵循Robot協(xié)議的一個(gè)文件，它保存在網(wǎng)站的服務(wù)器中，它的作用是告訴搜索引擎爬蟲(chóng)，本網(wǎng)站哪些目錄下的網(wǎng)頁(yè)不允許進(jìn)行爬取收錄。在Scrapy啟動(dòng)后，爬蟲(chóng)會(huì)在第一時(shí)間訪問(wèn)網(wǎng)站的robots.txt文件，然后決定該網(wǎng)站的爬取范圍。這樣就....

本文編號(hào)：3906176