文章/答案/技术大牛

发布

社区首页 >问答首页 >JSON4S是否与spark 2.4.0和EMR 5.26.0兼容

问JSON4S是否与spark 2.4.0和EMR 5.26.0兼容
EN

Stack Overflow用户

提问于 2019-08-26 23:11:56

回答 1查看 1.3K关注 0票数 2

Spark json4s[java.lang.NoSuchMethodError: 
org.json4s.jackson.JsonMethods$.parse(Lorg/json4s/Js]

在aws emr上运行spark scala结构化流应用程序时，解析复杂json时出现上述错误。

发布于 2019-08-27 02:34:42

它看起来像是一个二进制兼容性错误...您可以检查依赖关系树中是否有不兼容版本的json4s工件吗？

如果你不能将它们升级到使用相同的版本，那么你可以通过使用像these这样的规则用sbt-assembly插件对其中的一些进行着色来解决这个问题。

在任何情况下，我都建议使用更安全、更高效的解析器，比如jsoniter-scala (或基于它的dijon )。

票数 0

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://stackoverflow.com/questions/57660602

复制

相似问题

问JSON4S是否与spark 2.4.0和EMR 5.26.0兼容EN