嗨,我正在尝试写一个PHP脚本,从子subreddit下载所有的图像和视频,并将它们存储在本地。
我的计划是从一个URL获取所有链接,然后处理以确定它是图像还是视频,然后下载它。
如果有人能指导我或给我一个如何进行的想法,将不胜感激。
发布于 2017-05-15 06:00:49
我的想法是卷曲下载网站的链接,这样你就可以得到它的html版本,然后看看this主题。有了这个,您就可以提取所有需要的标签,例如"img“标签和它们的href。
而不是将它们加载到数组中,然后迭代curl来下载它们并将它们存储在本地。
另一种方法是下载html并基于过滤器加载所有链接(例如,使用"\"http://“并以引号结尾(如果html中有单引号,也可以对单引号做另一个过滤)。只需迭代所有链接并根据扩展名将它们列入白名单,如果这是你感兴趣的文件。然后curl下载并存储它们。
编辑:我忘记了-也不要忘记修复.html、.css和.js (可能还有更多)文件中的链接。另外,注意图片中含有php的图片。
https://stackoverflow.com/questions/43968792
复制相似问题