亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定
已解決430363個問題,去搜搜看,總會有你想問的

superagent爬取網站出現重定向問題

superagent爬取網站出現重定向問題

收到一只叮咚 2018-11-24 19:16:21
用superagent爬網頁,遇到重定向,拿不到重定向后的響應體,該如何解決,如何獲取重定向后的網頁我想獲取501頁面的res,但是他跳轉到37018頁面,導致我拿到501頁面的空res。測試了爬取不到的網頁,發現有2種情況一開始進入網頁響應碼是200,過一小會刷新變成304一進入響應碼從301重定向到200,過一小會刷新變成304測試了能爬取到的網頁,發現有2種情況一進入響應碼從301重定向到200,過一小會刷新變成304一開始進入網頁響應碼是200,過一小會刷新變成304啊,我擦,那就沒什么區別啦,小白不知道這跟我爬不到內容有沒有關系,orz再再補充問題不在重定向,而在于我的正則表達式匹配問題
查看完整描述

1 回答

?
POPMUISE

TA貢獻1765條經驗 獲得超5個贊

你都不看官方文檔的嗎?

By default up to 5 redirects will be followed, however you may specify
this with the res.redirects(n) method:

request
  .get('/some.png')
  .redirects(2)
  .end(callback);


查看完整回答
反對 回復 2018-12-17
  • 1 回答
  • 0 關注
  • 1151 瀏覽
慕課專欄
更多

添加回答

舉報

0/150
提交
取消
微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號