1、爬蟲: nodejs怎么爬ajax的post請求的異步加載的內容?一個頁面異步加載新出的內容怎么抓???一般的get請求: www.xxxx.com/page=xxxget請求可以通過page+1這樣加。比如控制頁數,抓10頁get異步請求比如張大媽的發現http://faxian.smzdm.com/json_more?type=new×ort=1487861419通過前幾頁,替換計算最后一個數字,實現抓取N頁情況2、post方式而post請求,比如知乎的,一個問題下,‘更多’那個button是個post請求https://www.zhihu.com/node/QuestionAnswerListV2post也有url,但是無參數,直接訪問可能就404。我嘗試過分析 response返回的 json字符,{"r":0, "msg": (里面是新增的div的html代碼,沒有規律)
}3、請問第2點說的post方式有沒有辦法抓?
nodejs怎么爬post請求?
汪汪一只貓
2018-10-17 17:15:45