bot流量ERR_CONNECTION_TIMED_OUT造成的ERR_CONNECTION_TIMED_OUT限值

Question

我有一个ERR_CONNECTION_TIMED_OUT，网站在大约1.5个小时的时间内被关闭了几分钟，这是我在日志中发现的：

[Mon May 21 11:21:51.236380 2018] [mpm_worker:error] [pid 3206:tid 140035442734330] AH00287: server is within MinSpareThreads of MaxRequestWorkers, consider raising the MaxRequestWorkers setting

我去了/etc/apache2/conf/httpd.conf，发现了这个：

MaxRequestWorkers [The number specified for my server]

我昨天刚刚更换了服务器，这是网络伙伴关于问题的原因的一种理论：

由于即将进入的流量类型，即bot通信量，服务器正在攻击maxworkers。BingBot和Googlebot再次爬行你的网站，可能是因为新的服务器。您可以管理这些机器人的爬行速度，以便它们在任何给定的时间都会请求这么多。

这是合理的解释吗？我觉得很难相信。

编辑1:这听起来像是谷歌执行的拒绝服务(DDoS)攻击！

Answer 1

甚至有文章讨论bot流量如何影响网站：

• http://support.hostgator.com/articles/specialized-help/telling-google-how-often-to-crawl-your-website
• https://support.google.com/webmasters/answer/48620?hl=en
• http://support.hostgator.com/articles/specialized-help/telling-bing-how-often-to-crawl-your-website
• http://support.hostgator.com/articles/hosting-guide/lets-get-started/how-to-use-robots-txt
• http://support.hostgator.com/articles/specialized-help/technical/apache-htaccess/user-agent-blocks-mainly-for-bots

我不确定bot流量是否真的是造成我的问题的原因，但是错误消息包括以下部分：consider raising the MaxRequestWorkers setting。这就是我所做的，现在一切似乎都是正确的。

重要:如果您这样做，不要忘记阅读common.html，并记住，如果您增加MaxRequestWorkers，您将不得不相应地增加ServerLimit。文件解释了这一点。