回答情况：
提问时间：
问题标签：
0-9]\.[1-9]--[4-9]ubuntu*)\b'dpkg -s openssl | grep -Ei '\b(Version: (1)\.[0-9]\.[1-9].([4-9]ubuntu*))\-[4-9](ubuntu)*)\b'
dpkg -s
浏览 3提问于2014-07-20得票数 1
正如我们所知道的，robots.txt帮助我们避免网络爬虫/机器人对某些网页/部分进行索引。但是使用这种方法有一定的缺点: 1.网络爬虫可能不会监听robots.txt文件；2.你将你想要保护的文件夹暴露给每个人；
还有另一种方法可以阻止你想要保护的文件夹免受爬虫的攻击吗？
浏览 0提问于2012-05-02得票数 1
我已经创建了一个爬虫，但我不想被禁止访问该网站。
有没有办法减少爬虫的攻击性，或者以某种方式隐藏它，这样就不会被“注意”，也不会给我正在爬行的提供商/网站带来问题？制作一个可接受的爬虫的ANy提示或指南？
浏览 1提问于2012-12-25得票数 2
我的网站目前正受到垃圾邮件机器人的攻击(例如: 66.249.73.*)，这导致了CPU的高使用率。谷歌/必应( Google/Bing )每秒钟爬一个网站是否很常见？我做了反向查找的I和他们似乎是有效的爬虫使用https://support.google.com/webmasters/answer/80553?hl=en。这是转诊攻击吗？有可能有人在欺骗IP吗？我能做些什么来限制爬行的数量吗？
我目前正在为爬虫创建服务器端呈现，但是对于刚刚开始随机发生
浏览 0修改于2019-04-30得票数 2
我在信息安全方面不是很有经验，但我知道一些关于注入攻击和其他基于web的攻击的基本知识。是否有一个工具/爬虫来查找整个网站的所有表单和输入字段？我需要的是一个工具，像一个安全扫描器/网站爬虫，自动扫描整个网站的表单，并生成一个有用的文件或显示概述与表单和他们的输入字段。我使用linux，并希望检查一个本地开发的网站的表单和输入字段。
浏览 0修改于2014-09-02得票数 -1
从过去的几周开始，我在我的网站上经历了机器人攻击。基本上，爬虫在网站上运行的频率很高，导致负载增加。这会导致带宽消耗，从而给其他人带来糟糕的用户体验。我想知道像谷歌、亚马逊和电子海湾这样的网站是如何防止这些事情的：
它们如何区分有用的爬虫(google/yahoo/msn)和不遵循robots.txt和其他规则的恶意爬虫？
浏览 0修改于2011-10-14得票数 0
我想添加谷歌AdSense到受保护的页面，但谷歌声称，AdSense爬虫将需要自己的登录来执行正确的爬行。。因此，我为爬虫设置了用户名/密码，将POST参数放入谷歌的设置页面，但随后意识到这在我的登录配置中是行不通的，因为ASP.NET MVC使用AntiForgeryToken来防止跨站点攻击。
浏览 2修改于2018-09-29得票数 1
回答已采纳
当我检查这个的时候，我可以看到一个像这样的帖子，上面说谷歌爬虫可能导致了攻击。当我检查访问日志时，我可以看到已经从bot本地主机(127.0.0.1)和外部ip访问了robots.txt。谁能让我确定这个附件是由于谷歌爬虫或不？
浏览 1提问于2015-01-01得票数 0
我寻找一个网络爬虫解决方案，可以是足够成熟的，可以简单地扩展。我对以下特性感兴趣..。爬虫应该能够为我探索Web的一部分，并且它应该能够决定哪些站点符合给定的标准
上面的这些事情可以一个一个地完成，而无需付出很大的努力，但我对提供可定制的、可扩展的爬虫的任何解决方案都感兴趣。
浏览 1修改于2021-02-13得票数 7
回答已采纳
我试图在我的管理仪表板页面上进行Ajax爬虫攻击。但是在消息中，显示了out of scope，浏览器也没有打开。我应该怎么做才能修复这个问题，打开浏览器并执行这个测试？
浏览 45修改于2017-09-06得票数 1
回答已采纳
这就是我试过的：这将在0位置返回错误转义\我也试过：
df.Datum.str.replace(r'^[1|2][4-9][4-9]....$', '{}-{}-{}'.format(df['Datum'][:2], df['Datum'][2
浏览 1修改于2020-05-29得票数 3
回答已采纳
许多建议不要在公共论坛上发布电子邮件地址，因为有些人可能会尝试使用一些暴力攻击等几次登录尝试，但我注意到在几个网站(即使在敏感网站处理金钱)，我可以发现它使用电子邮件-id/用户名的登录机制，他们实际上显示用户名公开我的问题是，这些网站是否容易受到广泛的暴力攻击？就像使用网络爬虫来收集大量的用户名和暴力，强制使用一个流行的密码。例如，"nopassword“是许多人常用的密码之一，而不是使用密码作为单词列表(常用方法)，攻击者可以使用从机器人获得的用户名作为单词列表，只有一个密码，比如"nop
浏览 0修改于2016-11-19得票数 0
当我为10万个域运行我的网络爬虫时，很多DNS查询都是通过UDP进行的，我的ISP阻止了我的流量，以为我在做DDoS攻击。是否可以将Linux配置为使用TCP而不是UDP来进行DNS查找查询？
浏览 0提问于2016-03-07得票数 2
回答已采纳
我正试图在Java中制作一个2d地下城爬虫风格的游戏。我已经设置好了，当按下x键时，就会有骑士攻击。我的问题是，当我按下x键时，骑士被设置为攻击，但它继续攻击，骑士能够继续杀死骷髅。
浏览 1提问于2014-01-18得票数 1
回答已采纳
我想从Python模块在Scrapy中启动一个爬虫。my_crawler -a some_arg=value -L DEBUG的本质
使用settings.py中的设置和具有my_crawler名称属性的爬虫启动爬行(我可以轻松地从测试模块实例化这个类在爬虫完成之前，我很高兴这个过程会被阻塞。管
浏览 1提问于2012-06-26得票数 9
我尝试将iifNull与regexMatch合并如下
iifNull( regexMatch(Telephone1，(\+44|0044|0|44)(7)[4-9][0-9]{8})，regexMatch(Telephone2，(\+44|0044|0|44)(7)[4-9][0-9]{8})，regexMatch(Telephone3，(\+44|0044|0|44)(7)[4-9][0-9]{8})
浏览 9提问于2022-01-23得票数 0
请注意，数据之间稍微有点奇怪的关系是一种黑客攻击，可以让内联处理多到多个关系。models.Model):该应用程序“爬虫class Crawl(models.Model):如果我试图迁移爬虫或数据
浏览 3提问于2016-11-05得票数 0
回答已采纳
我正在尝试为验证JavaScript编写一个正则表达式，它允许用户输入4-9个数字(作为字符串长度)，但用户也应该能够将该字段留空。4-9数字部分很简单：^[0-9]{4,9}$，但我在“非必填”部分遇到了困难。
我试过^[0-9]{4,9}|[0-9]{0}$，但根本不起作用。
浏览 0提问于2013-02-01得票数 2
回答已采纳
我最近收到了很多电子邮件，报告我的网站上的问题，当我回头看的时候，已经被报道为布鲁特部队的攻击。在对他们的位置进行进一步检查后。有一个好的方法来区分明显的暴力攻击和爬虫检查网站吗？
更新:所有电子邮件都是从生产网站生成的。错误报告发出空引用异常。
浏览 0修改于2017-03-01得票数 0
回答已采纳
如果我有一个网络爬虫(使用一个非补丁版本的OpenSSL)，可以诱使它连接到一个邪恶的https站点，他们能从我的进程内存中获得所有东西吗？要攻击服务器，您可以继续重新连接以获得更多的64 be块(如果我正确理解的话)，但是客户端可以被迫多次重新连接，以获得更多的块吗？
浏览 0修改于2014-04-08得票数 61
回答已采纳
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号