这是一个奇怪的问题,我甚至不知道我问得对不对,但我正在编写一个Java程序来从这个网站( http://www.mangareader.net/popular )中提取流行漫画的名字。每个页面只显示30个mangas,这个网站上有3950个mangas,所以我想知道是否可以编辑这个网页,这样每个页面就可以显示更多的漫画(这样我就不必一次又一次地加载新的页面了)。我还注意到了网页的网址:如果你去http://www.mangareader.net/popular/1,它将显示漫画2-31,如果你去http://www.mangareader.net/popular/2,它将显示漫画3-32。您可以继续以这种方式更改URL,以显示不同范围的漫画。也许这是什么?
发布于 2015-07-08 20:28:12
无论如何,你必须一个一个地爬行所有的页面。即使存在一个URL来增加每个页面的结果编号,该URL也只有创建此网站的web开发人员才知道。
发布于 2015-07-08 20:14:07
它使用分页。你有正确的想法,只要继续循环通过网页,直到你得到一个没有结果的网页,然后你知道你到达终点。
https://stackoverflow.com/questions/31302759
复制相似问题