搜索 - 腾讯云开发者社区-腾讯云

文章/答案/技术大牛

发布

2回答

如何用python爬取数据并保存到excel？

python

利用python爬取豆瓣电影排行榜（https://movie.douban.com/chart)的数据并保存到excel中。用相同代码爬取网页豆瓣top250的数据可以爬取到excel中，但将网址及相关信息改为网页豆瓣电影排行榜中的信息时便无法爬取，也找不出问题所在。以下图片为完整代码。

浏览 496提问于2021-01-09

2回答

怎样在不使用API的前提下爬取Twitter数据？

数据挖掘、python、api、twitter、数据

由于现在Twitter API 数据爬取付费，所以我想在不使用Twitter API的情况下使用python爬取到特定关键词的Twitter数据或者Reddit数据，有什么好办法吗？

浏览 912提问于2024-01-06

1回答

使用python爬取Reddit数据出现错误？

数据挖掘、网络安全、reddit、selenium-firefoxdriver、连接

from selenium import webdriverfrom selenium.webdriver.firefox.options import Optionsimport timefrom

浏览 221提问于2024-01-11

2回答

在python中利用Reddit API爬取数据出现错误？

python、api、reddit、web-scraping、脚本

csv_file: csv_writer.writerow(['Author', 'Title', 'Content'])当运行上述脚本时出现以下错误： E:\Anaconda2\envs\my_env2\python.exe F:/GitHub/爬虫/venv/第三章：数据解析reddit.p

浏览 392提问于2024-01-05

2回答

你好可以把您那个爬取二手房价信息的那些个源代码发我一份不？

scrapy、数据分析、可视化

Scrapy爬取二手房信息+可视化数据分析谢谢

浏览 194提问于2021-12-30

0回答

能否用腾讯云函数更新小程序云数据库？

云函数、serverless、微信、小程序、小程序·云开发

小程序云函数不支持python，所以想用python写腾讯云函数爬取数据更新小程序云数据库

浏览 384提问于2020-09-10

0回答

为什么用xpath提取数据保存到数据库会带有<span class="title">xxxx</span>这样的html标签？

html、数据库、scrapy、python爬虫、title

我的本意是只想爬取xxxxx，为何标签也被爬取了呢图片

浏览 119提问于2023-08-23

0回答

ddproperty历史数据采集？

爬虫

之前从一个国外站看到过抓取泰国房产数据的抓取，https://www.barkingdata.com/?crawlers/ddproperty-crawler.html 不知道国内有没有谁搞过这个，要爬取18年之前的历史数据

浏览 209提问于2022-05-10

5回答

微信小程序如何从MySQL获取数据显示到小程序上？

云数据库 SQL Server、eclipse、小程序·云开发

我是一个研究小程序3天的新手，就是现在想做一个类似于网易新闻样式的小程序，前台从eclipse爬取数据到MySQL，然后小程序读取MySQL中的数据显示到小程序中。

浏览 7547提问于2018-05-07

回答已采纳

1回答

我有一组数据，其中包括网址，公司名称和一些其他有关公司的信息。我读取这些数据，获取URL，抓取它们，并用随机生成的UUID保存抓取的数据。问题是当我想重新抓取数据的时候。我将有一组新的数据-which可能是重复的-因此将生成一个新的UUID和一个新的记录。但这并不是我所期望的。我想要做的是看看哪些东西已经被爬取，并更新它们，而不是添加新的记录。另外，这并不是读取URL并查看URL是否已被爬取，因为公司可能会更改其URL，甚至更改其名称

浏览 1修改于2017-09-23得票数 0

4回答