Java8并行HTTP调用

Question

首先，这个问题是针对Java8的。

话虽如此，我们还是来谈谈眼前的问题吧。

• 我必须使用不同的参数进行2000次http调用。下面是URL https://stat.ripe.net/data/looking-glass/data.json?resource=IP-PREFIX
• API限制最多为8个并发调用。
• 稍后我需要处理每个HTTP调用的响应。

我对java很陌生，似乎有很多不同的方法来实现这一点。然而，我不知道哪一个是正确的。此外，并发调用的限制也使我难以解决。

能给我指点一下我需要学习的Java主题吗？

耽误您时间，实在对不起。我真的很感激你的帮助。

Answer 1

在我头上

• Apache HttpClient
• Spring@异步，threadPoolTaskExecutor限制为maxPoolSize =8

这样就行了。

编辑的如果您不想使用Spring，您可以只在流中使用ForkJoinPool。看看这个-> https://www.baeldung.com/java-8-parallel-streams-custom-threadpool

Answer 2

IMO，如果您的项目是使用Spring框架开发的，那么我建议您使用WebFlux。它是RxJava (一种反应规划方法)的实现。文档链接是这里。它包括一个HTTP，它支持非阻塞，称为WebClient，您可以用它进行HTTP调用。

否则，CompletableFuture与ExecutorService将根据您的API并发性进行定制的线程池配置。这将是很好的选择。