我試圖從頁面中提取鏈接，但只提取最后一頁的鏈接。當我在頁面中移動時，如何提取所有內容？for var in range(1, 1001): page = driver.find_element_by_xpath('//a[contains(@href,"pageNbre=%r")]' % var) driver.execute_script("arguments[0].click();", page) print('Navigating to page %r ' % var) time.sleep(3)elem = driver.find_elements_by_xpath('//*[contains(@href, "/c/")]')url_list = []for link in elem: print(link.get_attribute('href')) url_list.append(link.get_attribute('href'))df = pd.DataFrame(url_list,columns=['url'])df.to_csv('C://users//admin//desktop//urls.csv', index=False)
1 回答
慕容3067478
TA貢獻1773條經驗 獲得超3個贊
我不明白它應該如何在一個層次上縮進。
喬納，看看它應該如何：
for var in range(1, 1001):
page = driver.find_element_by_xpath('//a[contains(@href,"pageNbre=%r")]' % var)
driver.execute_script("arguments[0].click();", page)
print('Navigating to page %r ' % var)
time.sleep(3)
elem = driver.find_elements_by_xpath('//*[contains(@href, "/c/")]')
url_list = []
for link in elem:
print(link.get_attribute('href'))
url_list.append(link.get_attribute('href'))
df = pd.DataFrame(url_list,columns=['url'])
df.to_csv('C://users//admin//desktop//urls.csv', index=False)
添加回答
舉報
0/150
提交
取消