无法加载PiplineModel/LogisticRegressionModel mlib spark

Question

我在加载包含LogisticRegressionModel stage的序列化PiplineModel时遇到了问题。我得到了：

java.lang.IllegalArgumentException: Field "coefficients" does not exist.

我尝试了加载完整的管道和逻辑阶段，但得到了相同的错误。此外，在保存模型之前，我检查了coeficients()是否返回值，它确实返回值。

你知道可能会发生什么吗？

Answer 1

我在几天前遇到了同样的问题，最后，我发现这是由于Spark用于保存和加载模型的不兼容版本造成的，例如，使用Spark 2.1.x训练和保存模型，然后使用Spark 2.0.x加载此模型。

有关更多详细信息，请参阅此JIRA问题https://issues.apache.org/jira/browse/SPARK-17163。