亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定
已解決430363個問題,去搜搜看,總會有你想問的

Selenium 無法獲取頁面的所有元素

Selenium 無法獲取頁面的所有元素

慕的地8271018 2021-09-28 21:13:31
我正在使用 selenium 在agoda 上搜索并抓取頁面中的所有酒店名稱,但輸出僅返回 2 個名稱。然后我嘗試添加一行滾動到底部,現在輸出給了我前 2 個名字和后 2 個名字(從頭開始的前兩個,從底部開始的最后兩個)我不明白有什么問題,我為每一步都添加了 time.sleep() 所以整個頁面應該已經完全加載了。selenium 是否通過頁面視圖限制它只能刮掉那些可見的元素?我的代碼如下:driver.execute_script("window.scrollTo(0, document.body.scrollHeight);")time.sleep(30)def scrape():    r = requests.get(current_page)if r.status_code == requests.codes.ok:    print('start scraping!')    hotel = driver.find_elements_by_class_name('hotel-name')        hotels = []        for h in hotel:        if hotel:            hotels.append(h.text)                    print(hotels, file=open("output.txt", 'a', encoding="utf-8"))    scrape()
查看完整描述

1 回答

  • 1 回答
  • 0 關注
  • 241 瀏覽
慕課專欄
更多

添加回答

舉報

0/150
提交
取消
微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號