web数据抽取

Question

作为我工作的一部分，我计划从网络资源(网络抓取)中提取数据。我想从我公司的10公里半径附近提取信息。

我想提取信息，如共管公寓，它的地址，单位数量和价格每平方英尺。其他的事情，如该地区的学校、幼儿园和酒店的数量。

我知道我需要从几个来源/网页中提取。我还将使用Python。

我想知道我应该使用哪个图书馆。网络抓取是唯一的方法吗？我们能从谷歌地图中提取信息吗？

此外，如果有人有任何经验，我将非常感谢你能在这方面指导我。

非常感谢，伙计们。

Answer 1

对于Google，请尝试API。使用web抓取工具进行地图数据提取是Google非常不鼓励的。

如果您正在使用Python，它有非常好的库BeautifulSoup和Scrapy用于此目的。

其他方法？您可以从OSM数据中提取POI，尝试开源工具。财产信息？也许你的县/州可以从政府办公室得到，试试看。