我在做一個python爬蟲,使用了selenium庫和phantomjs瀏覽器。我在一個網頁中觸發了一個click事件打開了一個新的網頁,然后我用browser.page_source得到的卻是原來那個網頁非新打開網頁的源碼,請問我該如何取得新打開頁面的源碼呢?
2 回答

慕運維8079593
TA貢獻1876條經驗 獲得超5個贊
Phantomjs對js事件支持的不太好,如果必須用click事件,你可以用chrome或者firefox,然后selenium有個隱藏瀏覽器界面的模塊,這樣就是完全模擬瀏覽器操作了,連user-agent都不需要偽裝。還有,phantomjs爬蟲,再header中會顯示是phantomjs引擎的,對你的爬蟲隱藏的不是太好,需要偽裝
添加回答
舉報
0/150
提交
取消