- 综合排序
- 最热优先
- 最新优先
- 来自专栏腾讯云开发者社区推荐
存算分离下写性能提升10倍以上，EMR Spark引擎是如何做到的？
我们通过 spark-ui 观察 Thread dump (这里通过手动刷新 spark-ui 或者登录 driver 节点使用 jstack 命令查看线程堆栈信息)，发现这三个阶段都比较慢， 下面我们来分析这三部分的源码
983108发布于 2020-11-02 - 来自专栏公有云大数据平台弹性 MapReduce
存算分离下写性能提升10倍以上，EMR Spark引擎是如何做到的？
我们通过 spark-ui 观察 Thread dump (这里通过手动刷新 spark-ui 或者登录 driver 节点使用 jstack 命令查看线程堆栈信息)，发现这三个阶段都比较慢， 下面我们来分析这三部分的源码
1.9K41发布于 2021-01-08 - 来自专栏腾讯云大数据
存算分离下写性能提升10倍以上，EMR Spark引擎是如何做到的？
我们通过 spark-ui 观察 Thread dump (这里通过手动刷新 spark-ui 或者登录 driver 节点使用 jstack 命令查看线程堆栈信息)，发现这三个阶段都比较慢， 下面我们来分析这三部分的源码
1.7K20发布于 2020-10-16 - 来自专栏祝威廉
使用Spark SQL构建交互式查询引擎
streaming.job.file.path file:///tmp/test.json \ -streaming.driver.port 9004 \ -streaming.spark.service true 接着进入spark-ui
2.5K11发布于 2018-08-27 - 来自专栏LhWorld哥陪你聊算法
【Spark篇】---Spark中Master-HA和historyServer的搭建和应用
Spark-UI 的使用介绍，可以更好的监控Spark应用程序的执行。
1.3K10发布于 2018-09-13 - 来自专栏祝威廉
Spark ListenerBus 和 MetricsSystem 体系分析
如果你的程序设置做了上面的设置，把你的spark-ui的路径换成/metrics/json，就能看到jvm源的一些信息了。
85730发布于 2018-08-27
时间不限
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号