回答情况：
提问时间：
问题标签：
我有一个attributeError AttributeError：'Web_scraping‘对象没有属性'_Web_scraping__headless’import osfrom scraping.browser_manager import constants as constfrom selenium.webdriver.common.byimport By
from scraping.browser
浏览 3提问于2022-09-11得票数 1
new_item[key]=item[key] print("Done Scraping
浏览 0提问于2019-12-02得票数 1
我试着在网上搜索很多网站，但其中之一是Shopify (AFAIK)支持的“莱姆犯罪”。我使用的是lxml库，但是当我尝试使用xpath转到一个元素时，我得到了一个空数组，但它实际上存在于网页中。from lxml import htmlresponse = requests.get(url)source_code = html.fromstrin
浏览 0修改于2020-07-28得票数 0
我正在努力寻找可以帮助我自动填写表单的库。有人建议我从上抓取(一个网站抓取库)。我解压缩了tar.gz，然后尝试了以下方法：Traceback (most recent call last):from setuptools import setup, find_packages有人知道怎么安装吗？
浏览 2修改于2013-07-20得票数 0
回答已采纳
我有一个代码，它可以引导我访问一个网站，并打印出每个会话的所有标题、日期和时间。 但是，如果您单击网站上的每个会话，就会有一个下拉列表中的子会话。 我想打印分会的每个标题。 下面是我拥有的代码 from selenium import webdriverimport pandas as pdimport requestssession=[]
driver.get('https://library.iaslc.org/conference-
浏览 18提问于2021-01-08得票数 0
回答已采纳
我需要从一个没有API的网站获得一些统计数据。在检查了源代码之后，我看到了用于构建统计图形的数据(我需要这些数据)。request(nodeUrl, function(error, res, body) { return ($(this).html().indexOf('Dygraph(document') >
浏览 2修改于2021-02-02得票数 0
回答已采纳
我正在尝试从纳斯达克网站上提取系统状态信息。以下是页面源代码的一部分：<h2>System Status Messages</h2><div class="genTable"><colgroup><col class="gtcol2&#
浏览 0提问于2019-01-09得票数 1
关于我不能登录的原因有什么想法吗？我一直在尝试用同样的方法通过facebook和linkedin登录，但没有成功。我使用的是最新版本的Scrapy。我正在尝试访问“消息”进行测试，但我知道它不起作用，因为它会将我重定向回登录页面……在LinkedIn上也是如此。from scrapy.spiders import BaseSpiderfrom scrapy.contrib.spiders import CrawlSpider
from linkedIn.items import Linked
浏览 2修改于2021-02-02得票数 0
经过几个小时的失败，我要来这里。我需要抓取一个动态生成的网页(使用Vue.JS制作，但我不愿意分享链接)。最有希望的解决方案是使用硒和PhantomJS。我试过这样做，我不知道为什么它不适用于谷歌： PhantomJSDriverService service = PhantomJSDriverService.CreateDefaultService();
service.IgnoreSs
浏览 0修改于2018-11-03得票数 6
回答已采纳
我正在尝试使用beautifulsoup4从网站中抓取数据，并且只检索html标记之间的信息以放入excel文档，目前我只能从页面中获取整个html数据。import urllib3import lxml
soup = BeautifulSoup(page.text, 'html.parser')
f = csv.writer(open('web_scrape.csv', 'w'))
浏览 0修改于2018-10-20得票数 0
回答已采纳
我正在刮的职位名称，公司，地点和职位摘要张贴在确实。由于公司类别中缺少数据，我需要帮助解决如何处理这些缺失的信息。company = driver.find_elements_by_class_name("company")接下来，我将遍历驱动程序的文本值，并将它们附加到列表中：for i in range(len(jobs)):最后，我将这些信息添加到熊猫DataFrame中：
df["Job Title"] = jo
浏览 3提问于2020-01-05得票数 0
我是Python初学者开发人员，我还在学习阶段。更具体地说，使用请求和bs4进行抓取。当尝试刮取以下链接时：“”import requests
url ="http://directorybtr.az.gov/listings/FirmSearchResults.asp?Zip%20Like%20%22850%25%22"res.clos
浏览 4修改于2017-11-23得票数 0
回答已采纳
我正在尝试创建“通用”Xpath，这样当我运行spider时，它将能够下载列表中每个酒店的酒店名称。//*[@id="offerPage"]/div[3]/div[1]/div[1]/div/div/div/div/div[2]/div/div[1]/h3/a这是他们如何在scrapy文档中实现的示例：
'text': quote.xpath('./span[@class="text"]/text()').extract_first(),
当您打
浏览 4修改于2018-08-22得票数 0
我正在尝试使用Selenium+Scrapy来抓取一个以恐龙方式生成的网站。我想做的是：2.-提取完成后，搜索next按钮并获取href属性。import scrapyfrom selenium.webdriver.common.by import By
from selenium.webdriver.support.ui impor
浏览 2修改于2022-03-27得票数 1
我正在尝试从这个url 中提取新的描述。html=requests.get(site)soup = BeautifulSoup(html.text,"html.parser")print (summary)描述
浏览 2修改于2020-01-21得票数 0
回答已采纳
我正在尝试抓取这个包含家谱信息的意大利网站：。我的代码运行良好，但有1300000页。我想添加一个多线程来更快地抓取数据。有人能帮帮我吗？下面是我没有使用多线程的代码：import requestsimport pandas as pd
first_page = 16999 r = requests.head(url)
general = pd.DataFrame(columns = [&
浏览 1修改于2021-10-12得票数 0
我在这个网站上搜寻有关产品的信息，如产品描述和价格。该网站使用分页来加载前20个产品，而当我进行抓取时，我的程序只获得前20个产品。我怎么才能买到所有这些产品。以下是我的代码 from urllib.request import urlopen import random
page = urlopen('https://www.olx.com.ng/'
浏览 2提问于2018-04-19得票数 0
再一次，我在BeautifulSoup中刮href有困难。我有一个页面列表，我正在抓取，我有数据，但我似乎无法得到href，即使我使用各种代码，在其他脚本工作。import requests
states = [states.strip().replace(' ', '-') for states in reader]
url = &#
浏览 0提问于2018-09-15得票数 0
回答已采纳
下面是我的代码，以获得产品名称"RENU新鲜镜头解决方案120 ML“从url..this躺在p标签.我只需要这个名字。import lxmldata = source.content
pn =
浏览 4提问于2016-12-26得票数 0
回答已采纳
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号