python - 如何单击迭代 Selenium 中的 Web 元素列表?
问题描述
我希望能够点击搜索结果页面上的多个链接。为此,我尝试创建一个 Web 元素列表,以查找与链接对应的搜索结果页面上的所有 xpath。然后,我希望能够单击每个 xpath 的这些链接并返回到搜索结果页面并单击列表中的下一个链接。
到目前为止,我已经能够创建一个嵌套循环,该循环会抓取页面上的所有 href 标记以创建/查找 xpath。第二级循环的目的是点击列表中该元素对应的链接,然后返回搜索页面点击列表中的下一个元素。
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
from bs4 import BeautifulSoup
import requests
driver = webdriver.Chrome('C:\\Users\\km13\\chromedriver.exe')
driver.get("http://www.congreso.gob.pe/pley-2016-2021")
WebDriverWait(driver, 50).until(EC.frame_to_be_available_and_switch_to_it((By.NAME, 'ventana02')))
soup = BeautifulSoup(driver.page_source, 'lxml')
table = soup.find('table', {'cellpadding' : '2'})
table_items = table.find_all('a')
for item in table_items:
elements = driver.find_elements_by_xpath("//a[@href='" + item.get('href') + "']")
print(elements)
for elem in elements:
elem.click()
driver.back()
此编码将单击搜索结果页面上的第一个链接,转到该链接,然后单击返回搜索结果页面。但它不会迭代到元素列表中的下一个链接。我不确定我写的循环是否有问题?
解决方案
当您单击元素和页面刷新/加载时,硒元素引用将被刷新。因此,您无法使用旧引用访问它们,当您尝试使用旧引用时,您将获得StaleElementException
.
要使用元素的最新引用,您必须在每次刷新页面时获取元素。
这是您的脚本,为了满足请求而进行了最少的更改。
for iLink in range(iLinks):
print(iLink)
link = driver.find_elements_by_xpath("(//table)[2]//td//a")[iLink]
print (link.get_attribute('href'))
# add link related logic here
link.click()
# you have to wait for the next element to display
time.sleep(1)
# click on back in browser
driver.back()
time.sleep(3)
driver.switch_to.frame('ventana02')
推荐阅读
- javascript - 在javascript中加入和拆分数组中的元素
- amazon-web-services - 阻止人们从 s3 amazon Bucket 下载文件(图像)
- java - Spring JPA Query:与数字一起使用
- javascript - 多页表格不会超过第一部分
- tensorflow - 在 TPU 上运行时出错,“NotImplementedError: TPUStrategy.run(fn, ...) does not support pure eager execution.....”
- react-native - undefined 不是一个对象(评估'route.params.id')
- java - 按薪水排序:比较器没有显示错误,但不起作用
- c# - Net Core:在洋葱架构中使用OData,将查询参数转换为Linq
- android - Flutter [第一个应用程序] 在 android studio 和 vscode 上崩溃
- flutter - 我的代码返回 [ERROR:flutter/lib/ui/ui_dart_state.cc(157)] 未处理的异常:类型 'String' 不是类型 'int' 的子类型