回答情况：
提问时间：
问题标签：
1回答
开了ai爬虫处置，会不会影响我的网站seo?
搜索引擎、网站、爬虫、seo、EdgeOne
eo的这个ai爬虫处置，开了之后其他搜索引擎还能爬到我的网站吗，影响seo吗
浏览 59提问于2026-04-27
我最近开始学习网络爬虫，我用Ruby、和构建了一个样本爬虫来存储。我在一个可能有数十亿个链接的大型公共网站上测试这个爬虫。我只运行了大约6-7个小时的爬虫，内存显示mongod为1.38 is，Ruby进程为1.37 is。它似乎每小时增长100MB左右。
似乎我可能有一个内存泄漏？
浏览 0修改于2012-02-24得票数 7
回答已采纳
我正在编写一个网络爬虫，找到并保存在网站上的所有图像的网址。我可以毫不费力地买到这些。我需要上传这些网址，连同它们的缩略图版本，通过http请求到服务器，这将渲染图像和收集各种AI应用程序中使用的功能信息。
对于某些urls，这是没有问题的。
浏览 15提问于2017-02-17得票数 0
回答已采纳
我正在尝试为一个游戏引擎创建脚本AI，我正在开发一个有趣的游戏引擎。我决定尝试使用Groovy来创建作为GroovyClasses加载的.groovy行为文件，然后将其转换为我的behavior接口。我在每个游戏周期执行更新，脚本化的AI类将程序带入爬虫。我的问题是，有没有办法加快嵌入式groovy的速度，或者有没有更好的方法来做我正在做的事情？谢谢你的帮助。
浏览 3提问于2011-05-07得票数 1
1回答
我对Screep比较陌生，我一直致力于构建自己的基本AI系统。然而，我在最初的测试中遇到了一个问题。我有一个确定要做的作业的脚本，然后爬虫请求可用的作业。我已经能够将Job对象存储到爬虫的内存中，但稍后我无法再调用它。
浏览 14提问于2017-08-18得票数 1
四组数据转换为json 1-2=3.4=0 6-7=8=0 10-11=12=13 14-15=16=0的不同格式a:,"1-2" a:,"6-7" a:,"10-11" c:, "0" c:,"0"
浏览 5提问于2021-07-14得票数 0
回答已采纳
7 hrs", "6-7 hrs", "12-13 hrs", "14+ hrs", "6-7 hrs", "2-3 hrs",
"6-7 hrs", "4-5 hrs", "8-9 hrs", "67 hrs", "6-7 hrs", "10-11 hrs", "1
浏览 0提问于2018-02-10得票数 0
1回答
嗨，我在做一个简单的数字匹配时遇到了问题，我做错了什么：1) Always anchor to start3) Always Followed我尝试了几种方法：(不匹配)^[0-9]{6-7}_^[\d]{6}_我得到了匹配，为什么我不能在这个表达式中做可变长度？
浏览 0提问于2012-07-05得票数 2
回答已采纳
所以我想但使用适当的小于/大于或等于符号forest( ..... slab=txt ...)所以运行正常，因为"1 <= 2“是一个正确的R表达式，但这不是我想要的。我只想
浏览 0提问于2014-01-03得票数 1
当我拨打twilio号码时，电话会前转，但在放弃之前只会振铃6-7次。这是意想不到的，因为timeout属性的默认值是30秒。行为是不变的-呼叫在6-7次振铃后仍然放弃。
在放弃之前，如何将twilio呼叫前转设置为振铃时间超过6-7次？
浏览 3提问于2018-07-18得票数 0
我的数据库在服务器端有6-7个表。我只想要几个10-50的客户名单，这是通过存储过程(通过连接6-7表选择记录)我。
我创建了应用程序(用于在线和离线环境)，这是从服务器到客户端的同步表，反之亦然。但这6-7个表包含了大约67k的巨大记录。我不想同步那张6-7表。我想要同步的客户名单只为每个登录用户。
浏览 3修改于2013-08-29得票数 0
我的Jenkins安装程序有300+自动测试，并且可以访问6-7个节点。所以，当我运行Jenkins作业时，有没有办法将300+测试的负载分布到现有的6-7个节点上，并同时执行它们呢？
浏览 6提问于2022-10-15得票数 0
1回答
我是一名网页开发人员，有一个使用Python2.7构建网页爬虫的网站，并为维基百科建立了索引.所以我想用python构建一个应答引擎，它使用一个字符串变量(它是一个包含整个维基百科的巨大变量)作为信息来源，并使用AI来回答.我可以在AIML中编写这种应答代理程序吗？
如果是，请提供教程的链接，其中告诉我如何做到这一点？
浏览 2修改于2014-12-27得票数 6
我有大约6-7个不同的动作，在相同的控制器，在每个视图加载被击中。我现在是这样做的： { :age => p.age上面的代码片段是在我的控制器内的6-7操作中编写的，这相当于我需要在上面显示name和age的6-7视图。
浏览 1修改于2020-06-20得票数 0
回答已采纳
1回答
当我遇到这个设计问题时，我一直在用php构建一个刮板和爬虫。我想知道创建一个分离爬行和抓取任务的系统(大多数专业系统似乎都是这样做的)和一个在爬虫爬行时抓取任务的系统之间的权衡。
浏览 4修改于2012-04-16得票数 2
回答已采纳
display of a flipbook of 10 pages is set to double, the pages would 14-51-24-56-7有没有turn.js方面的开发经验可以帮到我？
浏览 20提问于2012-12-07得票数 2
回答已采纳
随着HTML流(例如反应18流)的兴起，我想知道爬虫是如何处理HTML的。谷歌爬虫是如何处理这个问题的？谷歌确实提到了流这里，但它没有说明谷歌爬虫如何处理HTML。
其他爬虫(DuckDuckGo，Bing，Facebook，Twitter等)怎么样？我假设爬虫会等到HTML流结束时，这个假设安全吗？
浏览 0提问于2021-07-27得票数 7
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号