Hadoop自己的序列化及其与AVRO序列化的关系？
Hadoop自己的序列化及其与AVRO序列化的关系？
提问于 2018-04-09 10:43:45
我试图理解Avro，并逐渐认识到它是Hadoop使用的数据序列化框架之一。
在学习Hadoop的过程中，我了解到Hadoop使用的是自己的服务器化框架，而不是Java的序列化，所以我可以在Hadoop中看到Writable、WritableComparable。
现在，在浏览了AVRO之后，它说Avro被用作Serlization框架。
我为此感到有点困惑。所以，当我们说hadoop自己的序列化框架时，我们指的是Avro还是其他东西(它是在"hadoop“本身中构建的)。
有人能帮我理解这个吗？
回答 1
Stack Overflow用户
回答已采纳
发布于 2018-04-09 13:12:40
Hadoop不是Avro，而是“其他东西”
Avro是一个单独的项目，它的模式模型允许嵌套结构和演化。据我所知，Hadoop序列化没有概念模式演变。
节俭是另一种面向行的序列化格式，通常出现在Hadoop项目中。
其他(柱状)数据存储格式包括Parquet和ORC
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/49731095
复制相关文章
相似问题
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号