首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >我们的职务历史服务器是否不会显示与MR应用程序相关的信息?

我们的职务历史服务器是否不会显示与MR应用程序相关的信息?
EN

Stack Overflow用户
提问于 2022-09-15 14:40:54
回答 1查看 22关注 0票数 -1

我尝试了spark.eventlog.dir=false,然后火花历史服务器没有显示与此相关的任何信息。

当spark.eventlog.dir设置为false时,作业历史服务器是否有类似于Spark的应用程序相关信息显示的类似方式?

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2022-10-13 08:00:26

如果我们将下面突出显示的属性设置为mapred-site.xml中的默认位置以外的任何位置,则可以这样做。

纱线jar /usr/lib/hadoop-mapreduce/hadoop-mapreduce-examples.jar pi -D mapreduce.map.memory.mb=512 -D mapreduce.reduce.memory.mb=512 mapreduce.reduce.memory.mb=512 2 10

完成此操作后,作业历史服务器将无法将日志从中间done移动到dir。因为它从mapred-site.xml中配置的位置读取

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/73733152

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档