大学数据聚合

Question

我有一个客户想要建立一个针对大学生的网络应用程序。他们希望学生能够从有效的班级和教师名单中选择他们所在的班级。像库弗斯、施密特和非瓦普这样的网站都有来自许多大学的准确列表，而且年复一年都是准确的。

这些公司是如何汇总这些数据的？这些大学是否有特定用途的api？或者，这些公司每年都会付钱给这些大学的学生输入这些数据吗？

Answer 1

我们已经为客户端完成了其中的一些工作，在每一种情况下，我们都必须对数据进行抓取。如果你能得到一个API肯定使用它，但我的猜测是，绝大多数将需要刮。

Answer 2

我猜想这些公司有某种协议，并使用API进行数据交换。但是，如果您没有访问该API的权限，您仍然可以构建一个简单的webscraper，它可以为您提取数据。