如何等待所有Javascript加载完成后才卷曲网站?我试图从我的一个页面下载超文本标记语言,但它异步获取信息,因此cURL获取了一个加载了一半的页面。有没有办法让cURL获取一个完全加载的页面?
发布于 2012-07-04 01:06:09
您需要使用无头浏览器引擎来执行此操作。cURL和wget都是超文本传输协议库;它们使用超文本传输协议并以文本形式下载文档。他们没有DOM或JavaScript引擎的概念来帮助他们理解页面正在执行AJAX。因此,要下载HTML,您需要某种更像浏览器的东西,通过解析DOM并执行JS。我推荐使用Mozilla引擎的Crowbar。
https://stackoverflow.com/questions/11315676
复制相似问题