我正在运行一个带有fat阴影jar的EMR步骤(星火提交),但是从EMR获取的旧版本库会导致NoSuchMethod异常。
我试过遮阳罐,并设置在下面,但似乎没有任何工作。EMR上的旧版本首先加载。
spark.driver.userClassPathFirst & spark.executor.userClassPathFirst
如何确保app jar中的类优先于EMR库
发布于 2022-07-18 19:28:43
使用以下吐露:
spark.driver.userClassPathFirst / spark.executor.userClassPathFirsthttps://stackoverflow.com/questions/67592029
复制相似问题