首页
学习
活动
专区
圈层
工具
发布
社区首页 >专栏 >hive原理分析

hive原理分析

作者头像
shengjk1
发布2018-10-24 15:26:40
发布2018-10-24 15:26:40
1.2K0
举报
文章被收录于专栏:码字搬砖码字搬砖

基于hive1.1(从hive2.0开始,hive开始基于内存了,底层的实现框架不在基于MR)

1.

代码语言:javascript
复制
   由客户端提供查询语句,提交给Hive,Hive再交给Driver处理(1,Compiler先编译,编译时要从Metastore中获取元数据信息,生成逻辑计划;2,生成物理计划;3,由Driver进行优化;4,Executor执行时对物理计划再进行分解成Job,并将这些Job提交给MR的JobTracker运行,提交Job的同时,还需要提取元数据信息关联具体的数据,这些元数据信息送到NN),JT拆分成各个Task进行计算,并将结果返回或写入HDFS。

2.CDH中hive与其他组件如imapla的关系

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2016年11月09日,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档