回答情况：
提问时间：
问题标签：
近期发现大量网站采用相似的反爬技术，Heritrix提示412，网址http://www.xgrsks.cn/，还有湖北省编制网、检察院、政府网都采用这种，网上查不到相关办法
浏览 1128提问于2021-04-26
0回答
使用Python爬虫，怎么处理反爬机制？
python、爬虫、验证码、requests、数据
我用Python requests来请求数据，但经常出现bug，要没ip无效，要么需要验证码，怎么处理呢？
浏览 276提问于2025-07-19
2回答
如何用python爬取数据并保存到excel？
python
利用python爬取豆瓣电影排行榜（https://movie.douban.com/chart)的数据并保存到excel中。用相同代码爬取网页豆瓣top250的数据可以爬取到excel中，但将网址及相关信息改为网页豆瓣电影排行榜中的信息时便无法爬取，也找不出问题所在。以下图片为完整代码。590859A8-9A1A-4E52-8E60-AD292B16B4A8.png
<e
浏览 606提问于2021-01-09
0回答
如何在SCF内操作把图片上传到COS？
对象存储、api、云函数、serverless
我有平台给客户上载图片作为图库, 图片不大都1MB以下, 我用了云函数SCF接收客户端传上来base64格式对象,再在SCF上转为Buffer.尝试使用cos.putobject上传到对象储存cos,但反回的我爬了很多文实在搅不懂这块怎么运作. 我也看到直接在客户端用API及临时密键把图片上载到COS. 请问各位, SCF 是否不能这样操作? 还是有什么弄错了...
浏览 362提问于2020-01-02
0回答
比如，用huginn爬网这个链接：以前没问题换了其他地方的机器，电脑和ip不同，huginn照样无法正常爬取。而在同一台机器上用 下载工具甚至简单的脚本下载这个链接的网页内容，却可以实现，不知道是什么情况。
浏览 267提问于2021-09-28
0回答
如何修改程序？
程序
(data_3['p_change'][n]/100 + 1)) == int(data_3['open'][n-1]): # 若4连或4连以上一字板则打印代码及当时日期 print(code, data_3.index[n-4])s = 1 f = 1
# 筛选股
浏览 289提问于2020-10-19
0回答
scrapy怎么实现自定爬取深度？
python、scrapy
full_img_list = []
name = 'test_spider' for img in img_list: if img[0:4]yield item if a i
浏览 461提问于2020-04-13
22回答
【有奖问答】程序员有什么“反焦虑”秘籍？（已完结）
腾讯云开发者社区、程序人生、程序员、工作、开发者
你是否有一些“反焦虑”秘籍能帮你稳住心态，重启冷静模式？●活动时间：2025年4月10日～2025年4月16日，本次互动截至到2025年4月16日24时。
浏览 21929修改于2025-04-17
1回答
如何替换msbuild变量中的字符？
exec、msbuild、变量
我需要替换我要传递给msbuild 4中的exec任务的变量中的字符。具体来说，我需要替换所有出现的反斜杠。\用正斜杠/在$(MSBuildProjectDirectory)变量。
浏览 441提问于2018-02-12
回答已采纳
2回答
请教下大家在做电商/社媒数据采集时，直接用requests或者playwright都遇到过哪些反爬机制？
电商、playwright、requests、数据采集、网页爬虫
浏览 828提问于2025-09-24
1回答
我写了一个爬虫 想爬取腾讯视频的弹幕 但是总是获取不完整 求助？
python、网络安全
如问题描述：开始是视频显示有60000多条弹幕，但是我只能爬取到25000条。其中一个js包中的一个内容：{"commentid"::"6129416678651013752; uin=o1179630150; skey=@G4DR3fRZB; appid=3000501; logi
浏览 1126提问于2019-03-26
0回答
windows做API服务是否存在tcp连接限制问题导致访问丢失？
go、windows server、nginx、https、ssl
请教大佬们，我用windows，宝塔面板Nginx反代2025端口(GO语言写的实际的业务api)，做的是广告投放的监测地址，每个访问IP都是不一样的，晚上有三小时，api开无痕浏览器首次访问要三十秒，但是通过https首次访问就是需要30多秒，导致客户端三小时的数据几乎全部没传到服务器本人乃是自学的菜鸟，对专业知识了解非常的浅薄
浏览 120提问于2025-04-30
zlaq.mohurd.gov.cn/fwmh/bjxcjgl/fwmh/pages/construction_safety/qyaqscglry/qyaqscglry.html
这个网址用requests爬取查验一个叫张三22%3A%2210%22%2C%22search%22%3A%22%22%2C%22totalSearch%22%3A%22%7B%5C%22xm%5C%22%3A%5C%22%E5%BC%A0%E4%
浏览 201提问于2023-02-26
0回答
雅虎财经python中新的unable to read URL？
python、bash、bash 指令
datetime import dateimport matplotlib.pyplot as plt#设置中文字体R.dropna()miu = R.mean()*252sigma = R.std()*np.sqrt(252)#生成2022年的交易日日
浏览 247提问于2022-04-27
1回答
latex取消目录页的页眉和页角?
arabic、latex、连接、论文、模型
setlength{\cftsecnumwidth}{2em}\setlength{\cftsubsubsecnumwidth}{4em}% 全局格式\setlength{\parindent}{2em}\setCJKmainfontcftsetindents{section}{0em}{2em}\
浏览 209提问于2026-05-19
0回答
MNIST手写数字识别实现步骤？
mnist
epochs=10, validation_split=0.1)
model.save('mnist_model.h5')第三阶段：准备测试数据 img = img.resize((28, 28)) img_array = 255 - img_array # 反色处理is_correct else "❌"
print(f"
浏览 182提问于2025-10-16
0回答
R中的MSwM (马尔可夫切换模型)函数不工作？
r 语言、工作、函数、模型、异常
(MSwM)file_path <- "C:/Users/86189/Desktop/实验.xlsx" # 请注意，Windows路径的斜杠要使用正斜杠（/）或者转义的反斜杠na.omit(data) # 移除缺失数据incom_ts <- ts(data$incom, start = min(data$year), frequency = 4)
浏览 234提问于2024-12-05
0回答
初学者，这个俄罗斯方块游戏如何完善呀？
python、游戏
= 0;
fontObj = pygame.font.Font("arial.ttf", 35) # 得到字体对象self.cells = [Cell(1, 3, set.L), Cell(0, 3, set.L), def __init__(sel
浏览 232提问于2022-04-16
0回答
ai?
aiops、变量、跨域、数据、研发
欧洲杯最佳阵容评选 [参考资料:http://wiki.3yznvm.asia/arts/62568774.html]
混动奠基，有哪些黑科技[资料:http://wiki.wsbix4.83728296.html] chore: update all indirect depende
浏览 43提问于2026-09-19
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号