Hadoop组件有兼容性矩阵吗？

Question

我想知道生态系统的各个Hadoop组件是否有一个兼容性矩阵？

每次Hadoop升级都有很大的兼容性影响，例如：

• ApacheSpark2.4不支持Hadoop v3，
• Hadoop不支持Java 9和10，
• 等等..。

我知道像Hortonworks这样的供应商会发布每个版本的组件列表，但这并不是针对广大公众的，因为这包括了修补的组件。

我们是否需要查看Jira的所有bug跟踪器，才能找到兼容性问题？

Answer 1

Cloudera/Hortonworks这样的公司所做的关键事情之一是，将组成Hadoop的所有开源项目，并确保它们很好地协同工作。无论是从功能的角度还是从安全性的角度来看，都进行了大量的测试和调整，以确保所有东西一起形成一个适当的版本。

现在您已经了解到在发布一个发行版(相对关注最近的版本)方面付出了多大的努力，您可能会理解，除了这些发行版之外，还没有关于“所有东西是如何工作的”的总体概述。

充分披露:我是Cloudera的雇员，但即使没有这一点，我仍然建议您尽可能使用发行版。