我在为我们的星火建立一个监控系统。我用火花的石墨水槽发送了测量表。我希望能够动态地停止所有指标。所以这意味着我需要用sc.set来设置它。
我如何才能禁用火花配置中的所有指标?因为我找不到类似spark.metrics.enable属性的东西。
发布于 2022-10-18 09:19:45
我找不到禁用它的方法。我所做的只是当我想要监视(每个应用程序)时才设置它。
sc.set("spark.metrics.conf.*.sink.graphite.class", "org.apache.spark.metrics.sink.GraphiteSink")https://stackoverflow.com/questions/73308024
复制相似问题