我正在尝试从亚马逊中提取价格和供应商等信息。
我现在这样做的方式是找到价格等关键字,然后找到我想要的信息。
问题是,如果像亚马逊这样的网站稍微改变一下框架,代码可能就不再起作用了。
我想知道是否有更好的方法/算法来做类似的事情。
谢谢!
发布于 2013-11-10 13:27:02
您想要从网站访问数据。您建议的是一个手工制作的API,或应用程序编程接口。
手工制作的API的主要缺陷之一就是您所提到的,或者网页的供应商可能会做一些小的更改,从而使您的API不可用。
通常,使用能够直接访问属于网站所有者的数据的API是更好的主意。这些API是由网站所有者自己创建的,因此他们可以直接访问数据,并且当您使用HTML抓取时,它们可以绕过您和您想要的数据之间的所有混乱格式。
具体地说,亚马逊的价格API位于here。
重要信息:
如here所述,请阅读许可协议的第4b节:
(b)您将仅(i)以合法方式使用产品广告内容;(ii)按照本许可协议的条款并在第6节授予的许可的明确范围内使用;以及(iii)将最终用户发送到Amazon网站并在其上促进销售。您不得将产品广告应用编程接口、数据馈送或产品广告内容与任何网站或应用程序一起使用,或以任何其他方式使用,这些网站或应用程序的主要目的不是在亚马逊网站上进行广告和营销以及推动产品和服务在亚马逊网站上的销售。
https://stackoverflow.com/questions/19886561
复制相似问题