關于爬取到的圖片
為什么爬下來的圖片是原網頁中按照最熱排序的,而手動打開原網頁卻是自動按最新排序的
#??Python?3.6.1
#?????????????????????????----By??Wang
import?re
import?urllib.request
req=urllib.request.urlopen('http://www.xianlaiwan.cn/course/list')
buf=req.read()
buf=buf.decode('utf-8')
listurl=re.findall(r'src=.+?\.jpg',buf)
i=0
for?url?in?listurl:
??????url=re.search(r'http:.+?\.jpg',url)
??????f=open(str(i)+'.jpg','wb')
??????req=urllib.request.urlopen(url.group())
??????buf=req.read()
??????f.write(buf)
??????f.close()
??????i+=1
2017-09-04
這個涉及寫的時候URL重定向類似的問題,沒影響的,是網頁本身的問題,和你爬的沒關系。