首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >Python和Selenium: Webscraping

问Python和Selenium: Webscraping
EN

Stack Overflow用户
提问于 2021-09-24 00:17:17
回答 1查看 41关注 0票数 0

我对使用selenium和python进行web抓取是个新手。我试图从其中抓取数据的网页在特定的nav类中有href元素。我需要在EXAMPLE3中单击,但我找不到类名或id。

代码语言:javascript
复制
<nav class"nav-main">
    <ul class="nav nav-pills nav-main" id="topMain"><li class="dropdown">
        ::before
        <li class="dropdown">
           <a>EXAMPLE1<a>
        </li>
        <li class="dropdown">
           <a>EXAMPLE2<a>
        </li>
        <li class="dropdown">
           <a>EXAMPLE3<a>
        </li>
           :after
      </ul>
   </nav>

谢谢!

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2021-09-24 09:23:22

使用Selenium的find_elements_by_css_selector()方法,您可以获取具有公共类名的所有元素并单击它们中的任何一个。下面是几行代码,它们将引导您朝着正确的方向前进:

代码语言:javascript
复制
driver = webdriver.Chrome("LOCAL_PATH_TO_CHROMEDRIVER")
driver.get("YOUR_URL")

content = driver.page_source

third_element = driver.find_elements_by_css_selector('nav ul li.dropdown a')[2]

third_element.click()

或者,阅读下面的文章可能会有所帮助(该链接可以让您转到“如何使用Selenium提取静态加载的内容”一节),因为它扩展了使用Selenium访问可点击元素的相同思想:https://www.freecodecamp.org/news/how-to-scrape-websites-with-python-2/#how-to-extract-statically-loaded-content-using-selenium

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/69308175

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档