基本上,我希望将Flink自定义JAR文件部署到新的AWS EMR集群中。这是我所做的事情的总结。我创建了一个新的AWS EMR集群。一旦集群创建就绪,我就会SSHed到EC2机器,并尝试部署自定义jar文件。下面是我每次尝试通过CLI部署它时遇到的不同错误。Using the location of class org.apache.flink.yarn.YarnClusterDescriptor to locate the jar
2018-10-09(Standa
我可以将流部署到Apache的独立安装(使用一个JobManager和多个TaskManagers),没有问题: at org.apache.flink.client.CliFrontend.executeProgramDetached(CliFrontend.java:844)
at org.apache.flink.client.CliFront
在本地环境中,它工作正常,但是当我在EMR集群上部署这个Flink应用程序时,它会抛出一个与兼容性问题相关的异常。at org.apache.flink.api.java.typeutils.TypeExtractor.createHadoopWritableTypeInfo(TypeExtractor.java:2025) at org.apache.flink.api.java.typeutils.TypeExtractor.privateGetForClass(Ty