Zstd胸板减压

Question

我有用zstd压缩的拼花文件。有可能以某种方式来解压吗？我尝试使用zstd命令，但没有任何结果：

[x@xyz tmp]# zstd -d part-00016-303a375a-e443-4f86-a59e-b5d82d15bd26.c000.zstd.parquet -o test.parquet
zstd: part-00016-303a375a-e443-4f86-a59e-b5d82d15bd26.c000.zstd.parquet: unsupported format

Answer 1

这是可能的通过火花壳在机器上的zstd地板读数是支持的。

spark.read.option("compression", "zstd").parquet("/tmp/parquet-folder").write.option("compression", "none").mode("overwrite").parquet("/tmp/parquet-folder-no-compression")