casperjs/slimerjs:获取请求头部

文章/答案/技术大牛

发布

1回答

http-headers、web-crawler、casperjs、slimerjs

我正在试着用casperjs做一个爬虫。一些请求需要原始的头文件编辑:我必须获得原始的post数据，cookie等，一旦我得到它们，我想修改它们(仍然是原始的)，并用这些修改后的头文件做另一个请求。我已经找到了如何使用Phantomjs检索cookie，但是我在casperjs/slimerjs文档中没有找到任何东西。谢谢你的帮助

浏览 8提问于2016-09-22得票数 0

3回答

使用scrapy抓取基于AngularJS的网站

scrapy、web-crawler

我能够抓取一些页面，但一些页面需要时间来加载，因为DOM没有完全呈现，所以我无法抓取它。有人能解决这个问题吗？

浏览 8提问于2017-05-02得票数 1

2回答

如何在CasperJS中禁用css？

casperjs

我知道如何禁用图像和插件，但在CasperJS中似乎没有明显的禁用css的选项。有人知道这是怎么回事吗？

浏览 1提问于2013-12-28得票数 6

回答已采纳

1回答

如何在CasperJS中防止重定向？

javascript、http、phantomjs、casperjs

我使用的是CapserJS 1.1.0-beta3和PhantomJS 1.8.2。重定向的调试输出如下所示：如何将PhantomJS/CapserJS配置为不遵循重定向？

浏览 4提问于2014-11-19得票数 6

回答已采纳

1回答

如何使用CasperJS的下载功能发送帖子标题？

javascript、post、phantomjs、casperjs

我在尝试通过CasperJS 函数发布带有标题的数据时遇到了问题。我可以让它在没有标题的情况下发布，只是当我添加标题时，似乎那些永远不会发送的标题。

浏览 1提问于2014-04-28得票数 2

2回答

将casperjs的默认浏览器更改为chrome (更改用户代理字符串)

javascript、casperjs

我发现casperjs的默认浏览器是safari，因为当我尝试使用casper访问这个站点时，创建了一个屏幕快照。如何将默认浏览器更改为chrome？

浏览 4提问于2014-09-18得票数 5

回答已采纳

2回答

如何运行CasperJS脚本而不使用PHP或shell_exec

javascript、php、shell、casperjs

我有一个CasperJS脚本，它的结果需要在PHP中捕获。为此，我必须使用PHP的exec()或shell_exec()函数。但最近我了解到，在服务器上启用命令行执行是有风险的，而且不安全。那么，我应该如何在不使用CasperJS中的任何一个函数的情况下运行脚本呢？PS__：更准确地说，如何在web浏览器上使用CasperJS，就像用PHP处理web表单一样，并返回从CasperJS派生出来的输出，而不碰exec或shell_exec来执行它。

浏览 2提问于2015-08-06得票数 1

2回答

用PhantomJS进行性能测试

node.js、load-testing、phantomjs

我正在使用谷歌大豆模板，并开发了服务器端和客户端渲染解决方案。我想使用性能测试对它们进行基准测试。在对客户端部分进行基准测试时，我希望等到执行所有javascript操作才能计算实际响应时间。

浏览 5提问于2013-05-07得票数 8

1回答

实时聊天抓取(Youtube)与卡斯珀。关于聚合物元件选择的问题

javascript、youtube、polymer、casperjs

我正试着用casper从youtube上的实时聊天源中抓取文本。我在选择正确的选择器时遇到了问题。对于每个被推送出去的新消息，有许多嵌套元素和动态生成的元素。如何才能持续地拉起嵌套的当他们出现的时候？我现在连一个都抓不到！下面是我的测试代码:注意:您可以替换任何有实时聊天提要的youtube url。 viewportSize: {

浏览 1提问于2017-05-24得票数 8

回答已采纳

1回答