火花系列化:钨和克瑞欧是如何一起工作的？

Question

我读到了关于星火优化的文章，我不清楚、钨、和序列化(比如Kryo )是如何一起工作的。

我读到的一些资料使我想到了这个问题：

• “Tungsten的表示比使用Java甚至Kryo序列化器序列化的对象要小得多。”资料来源-hortonworks。
• “通过代码生成，我们可以提高序列化的吞吐量，进而提高洗牌网络的吞吐量。”来源-数据库。

Answer 1

但不包括一些边境案件，比如Encoders.kryo。

钨使用它自己的二进制存储格式和相应的服务器工具(Encoders)。这就是为什么在标准操作模式下，它可以更快、更有效地内存。