首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >在AWS中,具有HDFS或S3的数据池之间有什么区别?

在AWS中,具有HDFS或S3的数据池之间有什么区别?
EN

Stack Overflow用户
提问于 2019-07-11 08:31:27
回答 1查看 1.6K关注 0票数 1

我需要在AWS上构建一个数据湖,但是我不知道S3和HDFS到底有什么不同。我在网上找到了一些答案,但我仍然不明白真正的区别。

我还需要知道是否有人在AWS中拥有HDFS和S3的数据湖架构。

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2019-07-12 04:01:18

HDFS只对其存在的Hadoop集群可访问。如果群集关闭或终止,HDFS中的数据将消失。

亚马逊的数据S3:

  • 始终可用(不能“关闭”)
  • 多集群访问的
  • 对其他AWS服务是可访问的,例如Amazon (它是“Presto”,所以您甚至可能不需要Hadoop集群)
  • 具有多存储类,例如以较低的成本存储访问频率较低的数据。
  • 没有存储限制,(而HDFS仅限于Hadoop集群中可用的存储)
票数 4
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/56984858

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档