如何阻止我的爬虫在Google Analytics中显示

Question

我有一个应用程序，检查您的网站的问题，如断开链接和搜索引擎优化问题。几周后，这个爬虫的行为就会出现在访问过的网站的Google Analytics账户中。我想要防止这种情况，因为它弄乱了我用户的GA报告。

爬虫不执行任何javascript，并具有以下用户代理: Mozilla/5.0 (兼容；Appname Crawler；+https://www.nameofmyapp.co/crawler)

我希望GA足够聪明，能够识别出这是一个爬虫。它曾经是，但自从几周以来，GA将我的爬虫的访问量算作实际访问量，即使当机器人和蜘蛛过滤选项打开时也是如此。

如何防止这种情况发生？

Answer 1

在“管理”>“查看设置”下，您可以添加一个带有要排除的UserAgent的过滤器。或者，你的机器人应该阻止GA脚本，这样你的访问应该不会被识别。

Answer 2

找到了:我的机器人正在使用Google Pagespeed API来检查页面有多快。这些请求最终在GA中结束。