我正在学习火花,我想使用一个avro数据文件,因为avro是外部火花。我下载了这个罐子。但我的问题是如何把它复制到那个特定的地方“罐子”到我的容器里?

我在这里读过相关文章,但我不明白。
我也看到了这个命令从火花主网站,但我认为我需要复制的jar文件,然后运行它。
./bin/spark-shell --packages org.apache.spark:spark-avro_2.XX:X.X.X ...我试过的是
docker cp /Users/username/Downloads/spark-avro_2.11-2.4.5.jar docker-spark_master_1:/jars但这不管用。提前感谢
注:我运行的火花2.4容器与工人和主人。
发布于 2020-04-17 23:28:27
docker cp SRC_PATH CONTAINER:DEST_PATH
如果SRC_PATH指定文件而DEST_PATH不存在,则将该文件保存到在DEST_PATH创建的文件中。
从你试过的命令,
容器中不存在目标路径/jars,因为实际目的地应该是/usr/spark-2.4.1/jars/。因此,jar被复制到根(/)目录下名为/的容器中。
尝试使用以下命令来添加jar以触发jar,
docker cp /Users/username/Downloads/spark-avro_2.11-2.4.5.jar docker-spark_master_1:/usr/spark-2.4.1/jars/https://stackoverflow.com/questions/61282034
复制相似问题