我对使用selenium和python进行web抓取是个新手。我试图从其中抓取数据的网页在特定的nav类中有href元素。我需要在EXAMPLE3中单击,但我找不到类名或id。
<nav class"nav-main">
<ul class="nav nav-pills nav-main" id="topMain"><li class="dropdown">
::before
<li class="dropdown">
<a>EXAMPLE1<a>
</li>
<li class="dropdown">
<a>EXAMPLE2<a>
</li>
<li class="dropdown">
<a>EXAMPLE3<a>
</li>
:after
</ul>
</nav>谢谢!
发布于 2021-09-24 09:23:22
使用Selenium的find_elements_by_css_selector()方法,您可以获取具有公共类名的所有元素并单击它们中的任何一个。下面是几行代码,它们将引导您朝着正确的方向前进:
driver = webdriver.Chrome("LOCAL_PATH_TO_CHROMEDRIVER")
driver.get("YOUR_URL")
content = driver.page_source
third_element = driver.find_elements_by_css_selector('nav ul li.dropdown a')[2]
third_element.click()或者,阅读下面的文章可能会有所帮助(该链接可以让您转到“如何使用Selenium提取静态加载的内容”一节),因为它扩展了使用Selenium访问可点击元素的相同思想:https://www.freecodecamp.org/news/how-to-scrape-websites-with-python-2/#how-to-extract-statically-loaded-content-using-selenium
https://stackoverflow.com/questions/69308175
复制相似问题