亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定
已解決430363個問題,去搜搜看,總會有你想問的

PHP小白,在寫爬蟲練手,一般情況下跟蹤鏈接不是很難,但是如果是動態頁面就束手無策了。

PHP小白,在寫爬蟲練手,一般情況下跟蹤鏈接不是很難,但是如果是動態頁面就束手無策了。

臨摹微笑 2023-04-04 18:14:02
也許分析協議(但是怎么分析?),模擬執行JavaScript腳本(怎么弄?),……另外可能寫一個通用的爬取AJAX頁面的Spider或許是比較復雜的問題,沒有聽說或相關開源項目。下面是問題描述:比如一個頁面的下一頁(ajax函數中有一個得到url對應數據放到content標簽部分):javascript: <a href="javascript:Down(1)">下一頁</a>對應的JavaScript代碼可能是:function Down(index){    $("#pageindex").val(parseInt(index)+1);     ajaxpage(parseInt(index)+1); }function ajaxpage(index) {     $.ajax({    type:"post",     url:"class.aspx",  data:"Option=select&cid="+$("#classid").val()+"&asc="+$("#orderselect>option:selected").val()+"&keyword="+escape($("#textfield").val())+"&PI="+index,     success:function(data)     {        $("#content").html(data);     },     error: function(data) {               alert("連接超時,稍后再試!");     } }
查看完整描述

2 回答

?
明月笑刀無情

TA貢獻1828條經驗 獲得超4個贊

不懂PHP,一直在用java抓東西,說說我的做法。
對于ajax的請求,一般都會返回json或者xml格式的數據,打開網頁的時候你可以用firebug來查看后臺發送的ajax請求的格式,程序中設置請求的頭信息,有的網站還需要設置cookie信息,不然不會返回數據,cooike的信息firebug都能查得到的。然后在發送請求,一般都會成功。
技術稍微過關的網站都會設置請求的頻率限制,所以,注意發送請求的頻率。

查看完整回答
反對 回復 2023-04-07
?
達令說

TA貢獻1821條經驗 獲得超6個贊

php里面沒有這樣的擴展(至少我還沒遇到過),但是原來做java的時候有很多html引擎的實現,你可以去找一找。

查看完整回答
反對 回復 2023-04-07
  • 2 回答
  • 0 關注
  • 123 瀏覽
慕課專欄
更多

添加回答

舉報

0/150
提交
取消
微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號