筆者基于Python設(shè)計(jì)并實(shí)現(xiàn)了面向豆瓣網(wǎng)站分類瀏覽下藝術(shù)家標(biāo)簽的數(shù)據(jù)采集及清洗系統(tǒng),完成了對(duì)該標(biāo)簽下全部歌手及其歌曲的數(shù)據(jù)爬取和清洗。通過爬取豆瓣音樂網(wǎng)分類瀏覽下的藝術(shù)家欄目,分析豆瓣音樂的詳細(xì)信息,了解當(dāng)下熱門音樂以及音樂人,統(tǒng)計(jì)音樂人的歌曲總數(shù)、評(píng)價(jià)等詳細(xì)信息,并對(duì)爬取到的數(shù)據(jù)進(jìn)行數(shù)據(jù)清洗,具有一定的商業(yè)價(jià)值。 

【文章來源】：信息與電腦(理論版). 2019,31(18)

【文章頁(yè)數(shù)】：3 頁(yè)

【文章目錄】：
0 引言
1 數(shù)據(jù)采集
    1.1 第一層鏈接設(shè)計(jì)與實(shí)現(xiàn)
    1.2 第二層鏈接設(shè)計(jì)與實(shí)現(xiàn)
    1.3 應(yīng)對(duì)反爬策略
    1.4 數(shù)據(jù)的保存
2 數(shù)據(jù)清洗
    2.1 數(shù)據(jù)清洗的作用
    2.2 設(shè)計(jì)需求
    2.3 具體實(shí)現(xiàn)
        2.3.1 清洗數(shù)據(jù)
        2.3.2 分組聚合
        2.3.3 數(shù)據(jù)統(tǒng)計(jì)
3 結(jié)語


【參考文獻(xiàn)】：
期刊論文
[1]統(tǒng)計(jì)調(diào)查中數(shù)據(jù)清洗的應(yīng)用探討[J]. 魏瑤.  市場(chǎng)研究. 2019(07)
[2]主題網(wǎng)絡(luò)爬蟲研究綜述[J]. 于娟,劉強(qiáng).  計(jì)算機(jī)工程與科學(xué). 2015(02)



本文編號(hào)：3238218