首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >Logstash和Kafka中的优先消息

问Logstash和Kafka中的优先消息
EN

Stack Overflow用户
提问于 2016-07-08 02:06:09
回答 1查看 132关注 0票数 1

我们将从logstash向kafka提供来自不同来源的不同日志。将会有一些特定的集合(或某种格式)消息,kafka的消费者会比其他消息更感兴趣。我们如何确定消息的优先级?

一种想法是在kafka中创建两个主题- 1) high_priority_topic 2) low_priority_topic,然后使用logstash中的filter将感兴趣的消息推送到high_priority_topic,并将其余消息推送给其他人。这个是可能的吗?

对此有什么推荐的方法吗?

EN

回答 1

Stack Overflow用户

发布于 2016-07-08 05:03:53

使用标签或键入logstash来区分high_priority和low_priority,然后有两个kafka输出。

代码语言:javascript
复制
if CONDITIONAL {
  kafka {
    topic => "high_priority_topic"
    ...
  }
}
else {
  kafka {
    topic => "low_priority_topic"
    ...
  }
}

使用type时,条件如下所示

代码语言:javascript
复制
[type] == "high_priority"

使用标记,它将如下所示

代码语言:javascript
复制
"high_priority" in [tags]
票数 2
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/38252392

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档