亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全，請及時綁定郵箱和手機立即綁定

Python開發簡單爬蟲

螞蟻帥帥 全棧工程師
難度初級
時長 1小時14分
學習人數
綜合評分9.67
646人評價 查看評價
9.9 內容實用
9.6 簡潔易懂
9.5 邏輯清晰
很棒 贊一個

最新回答 / 喬幫主
最好是在邊看的時候，邊敲下代碼，這樣最好
不錯。期待后續課程
太厲害了。
謝謝大家的支持，評論看的我眼淚汪汪~~~~(>_<)~~~~
用Python3的童鞋看這里
import urllib.parse
...
new_full_url = urllib.parse.urljoin(url, new_url)
已經看完回到前面評論一下,
能把一個不簡單的內容講到簡單, 能讓一個對爬蟲0基礎的人入手
可見講師功力之深厚,
十分感謝慕課這個爬蟲課程 和講師的細細講解
講師用的Python2, 如果有童鞋用的Python3, 發現導包和方法不適用的話可以看對應下面課程的評論, 我把需要Python3 轉換的都寫評論里了
大家加油
總換爬蟲入了個門了, 十分感謝講師
有點意思了
用Python3的童鞋請看這里 受評論字數限制分開發(3)
print('第三種方法')
cj = http.cookiejar.CookieJar()
opener = request.build_opener(request.HTTPCookieProcessor(cj))
request.install_opener(opener)
response3 = request.urlopen(url)
print(response3.getcode())
print(cj)
print(response3.read())
用Python3的童鞋請看這里 受評論字數限制分開發(2)
print('第二種方法')
req = request.Request(url)
req.add_header('user-agent', 'Mozilla/5.0')
response2 = request.urlopen(req)
print(response2.getcode())
print(len(response2.read()))
用Python3的童鞋請看這里 受評論字數限制分開發(1)
from urllib import request
import http.cookiejar

url = 'http://www.baidu.com'
print('第一種方法:')
response1 = request.urlopen(url)
print(response1.getcode())
print(len(response1.read()))
老師的Request對象的add_data方法寫錯了吧，參數不對
首頁上一頁196197198199200201202下一頁尾頁
課程須知
本課程是Python語言開發的高級課程 1、Python編程語法； 2、HTML語言基礎知識； 3、正則表達式基礎知識；
老師告訴你能學到什么？
1、爬蟲技術的含義和存在價值 2、爬蟲技術架構 3、組成爬蟲的關鍵模塊：URL管理器、HTML下載器和HTML解析器 4、實戰抓取百度百科1000個詞條頁面數據的抓取策略設定、實戰代碼編寫、爬蟲實例運行 5、一套極簡的可擴展爬蟲代碼，修改本代碼，你就能抓取任何互聯網網頁！

微信掃碼，參與3人拼團

微信客服

購課補貼
聯系客服咨詢優惠詳情

 幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

 公眾號

掃描二維碼
關注慕課網微信公眾號
友情提示：

您好，此課程屬于遷移課程，您已購買該課程，無需重復購買，感謝您對慕課網的支持！

本次提問將花費2個積分

你的積分不足，無法發表

為什么扣積分？

本次提問將花費2個積分

繼續發表請點擊 "確定"

為什么扣積分？

舉報

0/150
提交
取消