我试图刮网页上的视频链接,https://www.tokopedia.com/chocoapple/ready-stock-bnib-iphone-128gb-7-plus-jet-black-garansi-apple-1-tahun-10?src=topads有链接,这是通过“网页剪辑”服务,加载页面后加载数据产生的链接。我想在加载完所有的JavaScripts和AJAX之后更新页面的HTML源(类似于我们在浏览器上“检查元素”的时候)。如何通过chromedp包(https://github.com/knq/chromedp)做到这一点。它是一个用于GoLang的无头浏览器。请帮帮忙。我是一个网络抓取的新手。
编辑:与链接中提到的另一个问题不同。因为这是特定于chromedp包的。评论中的问题是如何/用什么来抓取动态内容。
发布于 2017-09-22 06:12:20
经过多次尝试,我终于找到了方法并解决了我的问题。您可以在我的GitHub存储库中查看此查询。谢谢。
https://stackoverflow.com/questions/45938288
复制相似问题