關于爬取到的圖片
為什么爬下來的圖片是原網頁中按照最熱排序的,而手動打開原網頁卻是自動按最新排序的
#??Python?3.6.1 #?????????????????????????----By??Wang import?re import?urllib.request req=urllib.request.urlopen('http://www.xianlaiwan.cn/course/list') buf=req.read() buf=buf.decode('utf-8') listurl=re.findall(r'src=.+?\.jpg',buf) i=0 for?url?in?listurl: ??????url=re.search(r'http:.+?\.jpg',url) ??????f=open(str(i)+'.jpg','wb') ??????req=urllib.request.urlopen(url.group()) ??????buf=req.read() ??????f.write(buf) ??????f.close() ??????i+=1
2017-09-05
我猜,打開最新的鏈接是這樣的http://www.xianlaiwan.cn/course/list?sort=last,如果鏈接沒有參數sort=last的話,慕課網就默認返回的是最熱的顯示內容吧,畢竟通過最熱,可以讓用戶更好的找到當前熱門的自己喜歡的課程吧