本文關(guān)鍵詞：基于Python的網(wǎng)絡(luò)爬蟲技術(shù)

  更多相關(guān)文章： Python 網(wǎng)絡(luò)爬蟲 源代碼

【摘要】：基于Python的網(wǎng)絡(luò)爬蟲可以方便地抓取網(wǎng)頁信息,以豆瓣網(wǎng)站為例,實(shí)現(xiàn)了基于Python網(wǎng)絡(luò)爬蟲抓取豆瓣影視信息的過程。
【作者單位】： 武昌理工學(xué)院信息工程學(xué)院;
【關(guān)鍵詞】： Python 網(wǎng)絡(luò)爬蟲 源代碼
【基金】：湖北省教育廳科研計(jì)劃項(xiàng)目(B2015281)
【分類號】：TP391.1;TP393.092
【正文快照】： 1基于P ython的網(wǎng)絡(luò)爬蟲網(wǎng)絡(luò)爬蟲又稱網(wǎng)絡(luò)蜘蛛,或網(wǎng)絡(luò)機(jī)器人。網(wǎng)絡(luò)爬蟲通過網(wǎng)頁的鏈接地址來查找網(wǎng)頁內(nèi)容,并直接返回給用戶所需要的數(shù)據(jù),不需要人工操縱瀏覽器獲取。Python是一個(gè)廣泛使用的腳本語言,其自帶了urllib、urllib2等爬蟲最基本的庫,Scrapy網(wǎng)絡(luò)爬蟲是基于Python語言

【相似文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前10條

1 姚競;;面向項(xiàng)目的“Python程序設(shè)計(jì)”教學(xué)實(shí)踐與研究[J];福建電腦;2009年07期

2 透明;;關(guān)于Python[J];程序員;2002年03期

3 王寧,汪飛星;基于Python開發(fā)氣象服務(wù)器運(yùn)行系統(tǒng)界面[J];微機(jī)發(fā)展;2003年07期

4 湯韜;;Python庫簡介[J];程序員;2006年06期

5 高昂;;Python近況全接觸[J];程序員;2009年04期

6 郭芬;劉明;;Python垃圾收集器原理研究及應(yīng)用[J];信息技術(shù);2009年07期

7 王麗;;Python的元類編程研究[J];電腦編程技巧與維護(hù);2011年06期

8 李愛寧;唐勇;孫曉輝;劉昕彤;;基于Python語言的3DES算法優(yōu)化[J];計(jì)算機(jī)系統(tǒng)應(yīng)用;2011年08期

9 曾浩;;Python在其它語言中的應(yīng)用研究[J];大眾科技;2012年07期

10 鞠文飛;曾智銳;;使用Python開發(fā)跨平臺的單詞助記程序[J];電腦編程技巧與維護(hù);2012年24期

中國重要會議論文全文數(shù)據(jù)庫 前5條

1 ;Development of Python-based ArcGIS Tools for Spatially Balanced Forest Sampling Design[A];Information Technology and Computer Science—Proceedings of 2012 National Conference on Information Technology and Computer Science[C];2012年

2 伊鵬躍;于哲峰;汪海;;基于Abaqus/Python的三維復(fù)合材料層壓板有限元建模參數(shù)化開發(fā)[A];第17屆全國復(fù)合材料學(xué)術(shù)會議（復(fù)合材料結(jié)構(gòu)設(shè)計(jì)與性能表征分論壇）論文集[C];2012年

3 黃佳聰;高俊峰;;基于Python編程語言的空間動(dòng)態(tài)模型集成[A];自然地理學(xué)與生態(tài)安全學(xué)術(shù)論文摘要集[C];2012年

4 于文麗;;基于Python的空間自相關(guān)模式研究[A];中國地理學(xué)會百年慶典學(xué)術(shù)論文摘要集[C];2009年

5 郭霞;關(guān)志東;劉遂;陳萍;劉佳;王欣晶;邱太文;;基于Python的Abaqus二次開發(fā)在層壓板修理模擬中的應(yīng)用[A];計(jì)算機(jī)輔助工程及其理論研討會2013(CAETS2013)論文集[C];2013年

中國重要報(bào)紙全文數(shù)據(jù)庫 前6條

1 高壽福;無所不能的靈蛇——Python[N];中華讀書報(bào);2001年

2 ·特約作者 鄒肇輝;BT編程的王者[N];電腦報(bào);2005年

3 易水;IT新詞集錦（403）[N];計(jì)算機(jī)世界;2004年

4 本報(bào)記者 蒙克;顛覆傳統(tǒng)數(shù)據(jù)庫的“玩具”[N];網(wǎng)絡(luò)世界;2009年

5 ;Ruby on Rails[N];計(jì)算機(jī)世界;2006年

6 周蓉蓉;中低端Unix直指Linux[N];計(jì)算機(jī)世界;2006年

中國碩士學(xué)位論文全文數(shù)據(jù)庫 前10條

1 張正陽;基于Python的戶外通訊設(shè)備連接關(guān)系的挖掘研究[D];蘇州大學(xué);2015年

2 魏武斌;基于Python的灌區(qū)水情采集系統(tǒng)開發(fā)[D];西北農(nóng)林科技大學(xué);2015年

3 趙強(qiáng);用于PCB版圖審查的Python腳本子系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[D];西安電子科技大學(xué);2014年

4 鄺洪勝;基于Python的電商導(dǎo)購APP設(shè)計(jì)與實(shí)現(xiàn)[D];華南理工大學(xué);2015年

5 代紅震;基于STAF和Python混合編程的自動(dòng)化測試系統(tǒng)的研究和實(shí)現(xiàn)[D];南京郵電大學(xué);2015年

6 劉志凱;基于Web的Python編程環(huán)境研究[D];新疆農(nóng)業(yè)大學(xué);2015年

7 趙明洪;Python程序設(shè)計(jì)題的查重研究[D];新疆農(nóng)業(yè)大學(xué);2015年

8 曹明君;基于Visual Studio與Python平臺開發(fā)有限元分析結(jié)果自動(dòng)后處理系統(tǒng)[D];青島理工大學(xué);2015年

9 周健;Python虛擬機(jī)內(nèi)存管理的研究[D];南京大學(xué);2014年

10 王衡;PaaS平臺上Python沙箱研究[D];南京大學(xué);2014年

，

本文編號：994466