久草热这里只有精品,天天躁日日躁狠狠躁中东,中文期刊一区二区三区

首頁免費課 Python開發簡單爬蟲問答

Python開發簡單爬蟲

全部評論問答未解決精華

為什么解析后的url要放進url管理器里？

已采納回答 / Lovins

添加到 url管理器中才能循環訪問 url，爬取相關數據。如果不添加進去，只會爬取 root_url的數據了。

1 回答 1370 瀏覽 7-2 調度程序

2017-12-22

mac 下pycharm的快捷鍵導入、創建都沒用...

最新回答 / weibo_笙簫笑竹_0

我也遇到這個問題，請問怎么解決，我用的是pycharm

6 回答 3043 瀏覽 7-2 調度程序

2017-12-14

這個軟件是什么，怎么下載

已采納回答 / 慕雪7168328

切換到python的Scripts目錄下面，用pip install bs4安裝

1 回答 911 瀏覽 6-4 BeautifulSoup實例測試

2017-12-01

為什么我只有初始的url，而且output.html里也是空的

已采納回答 / 辜東明

斷點跑一下看看是哪一步出現了問題。

2 回答 1054 瀏覽 7-6 HTML輸出器

2017-11-29

運行出現問題

已采納回答 / guchao_0001

obj_spider.craw(root_url)小寫試試

2 回答 1190 瀏覽 7-2 調度程序

2017-11-19

爬蟲報錯：Do you need to install a parser library?

已采納回答 / Hello_see_you

將html_parser 改成 html.parser試試，我的能運行成功了

3 回答 12552 瀏覽

2017-11-16

找不到urllib2

已采納回答 / 慕粉1459244680

那個寫法是Python2的，Python3的是urllib.request

2 回答 869 瀏覽 5-2 Python爬蟲urlib2下載器網頁的三種方法

2017-10-18

代碼count=count+1報錯

已采納回答 / 尹佩凡

不是count的問題, break 要放在 while 循環里面

1 回答 714 瀏覽 7-2 調度程序

2017-10-11

爬蟲失敗，failed

已采納回答 / 醉客

說明有地方出錯了，你先把異常處理的try塊去掉運行，把錯誤改完了再加上去

2 回答 1510 瀏覽 8-1 課程總結

2017-10-10

python爬蟲

已采納回答 / xixiyingyi

因為爬的數目少（才1000條....），理論上全部百科的網頁都可以獲取到，但是全部百科網頁的數目是你無法想象的。我爬到了各種各樣的百科信息，包括計算機、學校、人命......，你可以把爬的數量count設置為1億試試......

2 回答 1463 瀏覽 7-1 Python爬蟲實例-分析目標

2017-10-09

init() missing 1 required positional argument: 'arg' 該怎么解決？

已采納回答 / Noah_________

還是需要看看你的代碼，這種情況一般是實例化部分的代碼有問題相關的庫或者依賴成分版本過低，升級或者重新下最新的重裝

1 回答 2930 瀏覽 7-2 調度程序

2017-10-02

url正則匹配

已采納回答 / wzrzt

應該只是需要把后面的文字拼上去就好了,沒有 lemmaid的就沒有，可能需要分兩種情況，你試一下。<...圖片...><...圖片...>

3 回答 1620 瀏覽 7-5 HTML解析器html_parser

2017-09-25

類的實例化問題

已采納回答 / majorinche

url_manager本身是自建的一個模塊啊，UrlManager()才是類的實例后面的HtmlOutputer是另一個模塊的的實例程序開始有import url_manager這個語句來導入這個模塊的，跟import re一個意思

1 回答 801 瀏覽 7-2 調度程序

2017-09-23

關于下劃線問題

已采納回答 / 慕UI7442310

因為class是python里面的關鍵字“類”，如果這里使用關鍵字class會被python認為是一個類，從而會產生歧義進而報錯，所以加一個下劃線與class區分能避免此類錯誤！

1 回答 1183 瀏覽 6-4 BeautifulSoup實例測試

2017-09-22

python3 NoneType object is not callable怎么解決

最贊回答 / qq_Vanillasky_1

后面不用追加 () 就行了

7 回答 38811 瀏覽 7-7 開始運行爬蟲和爬取結果展示

2017-09-21

首頁上一頁 1 2 3 4 5 6 7 下一頁尾頁

該課程已下架

課程須知: 本課程是Python語言開發的高級課程 1、Python編程語法； 2、HTML語言基礎知識； 3、正則表達式基礎知識；

老師告訴你能學到什么？: 1、爬蟲技術的含義和存在價值 2、爬蟲技術架構 3、組成爬蟲的關鍵模塊：URL管理器、HTML下載器和HTML解析器 4、實戰抓取百度百科1000個詞條頁面數據的抓取策略設定、實戰代碼編寫、爬蟲實例運行 5、一套極簡的可擴展爬蟲代碼，修改本代碼，你就能抓取任何互聯網網頁！

微信掃碼，參與3人拼團

熱搜

最近搜索清空

Python開發簡單爬蟲