具有多个模式的Parquet文件

Question

我习惯于用一个模式来分割文件。我遇到了一个文件，它似乎有一个以上的模式。我用熊猫把它转换成CSV文件。这样做的结果是：

table-1,table-2,table-3
0, {data for table-1} {dat for table-2} {data for table-3}

我读取了拼花文件的格式，它看起来就像一个单一的拼花文件有一个模式。

一个文件中是否支持多个模式？

Answer 1

不，Parquet格式只支持每个文件的一个模式。此架构被写入文件的页脚，并占文件的所有部分。您可能会将CSV文件重新读取到pandas中，并将其保存为Parquet文件，但如果将每个表保存为单独的文件，最终效果会更好。后者也应该更具表现力和空间效率。