创建一个查找和处理用户输入的网页爬虫

Question

我制作了一个有很多页的网站，每一页上都是一篇文章样本。主页是一个带有搜索字段的页面。我试图设计一个系统，用户可以输入一个单词，当他们单击“search”时，多个包含搜索词的副词连同一个样本文章被加载到页面上。

我今年14岁，已经编程两年了，能不能请任何人向我解释一下我完成这个任务所需要的编程语言/技术，并给出我如何完成任务的建议。

到目前为止，我所拥有的只是带有文章的网页和我用PHP创建的自定义搜索页面。有什么建议吗？

Answer 1

编程语言与解决这个问题的方法无关。你可以用你熟悉的语言来实现它。

解决这一问题的基本方法有两种：

1. 使用爬虫创建在不同页面上找到的单词索引，使用该索引查找搜索的单词。

或

1. 当用户输入搜索表达式后，开始爬行页面并查看是否找到搜索表达式。

当然，这两种解决方案都有不同的(Dis)优势。

例如:在1)中，您需要做一个inital爬行(并在以后页面更改时执行它)。

在1)您需要将爬行结果存储在某种数据库中。

1)您将收到即时搜索结果。

2)不需要数据库/数据存储

在显示最终结果列表之前，必须等待搜索所有页面。