關于爬取到的圖片
為什么爬下來的圖片是原網頁中按照最熱排序的,而手動打開原網頁卻是自動按最新排序的
#??Python?3.6.1
#?????????????????????????----By??Wang
import?re
import?urllib.request
req=urllib.request.urlopen('http://www.xianlaiwan.cn/course/list')
buf=req.read()
buf=buf.decode('utf-8')
listurl=re.findall(r'src=.+?\.jpg',buf)
i=0
for?url?in?listurl:
??????url=re.search(r'http:.+?\.jpg',url)
??????f=open(str(i)+'.jpg','wb')
??????req=urllib.request.urlopen(url.group())
??????buf=req.read()
??????f.write(buf)
??????f.close()
??????i+=1
2017-09-05
我猜,打開最新的鏈接是這樣的http://www.xianlaiwan.cn/course/list?sort=last,如果鏈接沒有參數sort=last的話,慕課網就默認返回的是最熱的顯示內容吧,畢竟通過最熱,可以讓用戶更好的找到當前熱門的自己喜歡的課程吧