回答情况：
提问时间：
问题标签：
我试图在Laravel5.4中使用cuab的PHPCrawl，并通过composer使用这个软件包：将它包括进来。
浏览 4修改于2017-03-16得票数 1
回答已采纳
我试图使用PHPCrawl来抓取和收集URL，然后输入到simplehtmldom，从html中提取所需的数据，并存储在mysql数据库中。现在我得到了错误set_time_limit(1000000);
// Inculde the phpcrawl-m
浏览 3提问于2013-12-19得票数 2
回答已采纳
我使用类来爬行网站并构建一个链接列表。这一切都运行得很好，但速度很慢，然后我会使用这些链接来执行其他任务。我起初以为这是网络或工作站问题，但在使用不同ISP的不同位置的不同计算机上也出现了相同的问题。
浏览 1修改于2014-04-15得票数 0
回答已采纳
我正在使用这个WebCrawler类。有一个名为"setTmpFile()“的方法。我想知道如何使用这种方法？请给我推荐一些好的例子。
浏览 2提问于2012-03-28得票数 1
回答已采纳
我正在使用PHPCrawl，我想知道是否有人知道是否可以从抓取所有带参数的URLS (无论是.html还是.php)中排除，例如
domain.com/article.html?
浏览 0提问于2011-05-13得票数 1
回答已采纳
我正在尝试在Symfony2中使用PHPCrawl。我首先使用composer安装了PHPCrawl库，然后在捆绑包中创建了一个文件夹"DependencyInjection“，其中放置了扩展PHPCrawler的类"MyCrawler”。<br/>';
}}
我也在sourceforge PHPCrawl论坛上搜索过帮助，但到目前为止还没有成功……我应该补充说，我在这里使用的是<em
浏览 1修改于2015-03-18得票数 0
我正在尝试使用PHPCrawl作为我的网站的网站地图。但是，我在尝试将其输出到服务器上的xml站点地图时遇到了问题。有什么帮助吗？
浏览 0提问于2012-10-17得票数 0
有没有办法将crawler的会话保存在mysql数据库中或以任何方式保存，并使用PHP恢复此会话？
浏览 0提问于2012-04-04得票数 0
回答已采纳
如果没有，我如何使用PHPCrawl?？需要能够从变量(可以是指定要目标的元素的数组)中读取数据存储规则。
浏览 4修改于2015-02-04得票数 2
回答已采纳
通常，我希望看到生成的captcha图像和其他随机条目，但今天我看到了该站点的几个页面，其中的“/”附在末尾，所有的页面都以"PHPCrawl“作为用户代理。
浏览 0提问于2013-09-23得票数 2
在每个循环中，我使用PHPCrawl和下一个种子url实例化了一个爬虫。它在第一次循环中运行得很好，但在爬行之前第二次抛出了以下错误：/data/utilities/PHPCrawl_070/classes/phpcrawler.class.php on line 201"
我没有以任何方式修改原始的PHPCrawl V0.70类。我只扩展了PHPCrawler类，
浏览 3修改于2012-01-14得票数 0
回答已采纳
我使用抓取网站，但现在我想添加一个cookie到特定的域，因为此域有身份验证，我想获得授权页面中的信息。
浏览 1提问于2012-05-28得票数 0
回答已采纳
我得到了一个爬虫PHPCrawl。我不确定它是否只是一个爬虫，或者它也会提供抓取功能。如果它可以用于抓取-它将支持XPath或正则表达式。
它怎么能和Python上的Scrapy相比呢？
浏览 0提问于2012-11-22得票数 0
回答已采纳
我正在开始一个新的项目，其中涉及抓取网站，所以我计划使用PHPCrawl ，因为它看起来是最好的基于PHP的解决方案(除非有人有任何其他建议)，但遇到了一个问题，我不太能得到我的头。因此，我使用以下命令导入PHPCrawl类然后在下面扩展<
浏览 4提问于2013-10-20得票数 0
set_time_limit(10000);
include_once('../PHPCrawl_083/PHPCrawl_083/libs/PHPCrawler.class.php'); // Extend the class
浏览 3修改于2015-08-05得票数 0
我正在使用PHPCRAWL和SIMPLEHTMLDOMPARSER从一个公共网站获取一些数据。我花了很长时间才弄明白这一点，但现在我有另一个问题让我迷失了方向。
浏览 2修改于2012-09-01得票数 0
回答已采纳
curl_setopt($ch,CURLOPT_POSTFIELDS,$data); curl_setopt($ch, CURLOPT_COOKIEFILE, "/public_html/phpcrawl/cookies.txt");
浏览 2提问于2010-11-23得票数 0
回答已采纳
/PHPCrawl_083/PHPCrawl_083/libs/PHPCrawler.class.php');
class MyCrawler extends PHPCrawler
浏览 1提问于2015-06-13得票数 0
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号