首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >Flume忽略了flume conf中的过滤关键字

Flume忽略了flume conf中的过滤关键字
EN

Stack Overflow用户
提问于 2014-06-16 14:20:34
回答 1查看 660关注 0票数 2

我正在使用flume导入TWITTER数据。

我在我的flume conf中添加了以下一行:

TwitterAgent.sources.Twitter.keywords = hadoop, big data, analytics, bigdata, cloudera, data science, data scientiest, business intelligence, mapreduce, data warehouse, data warehousing, mahout, hbase, nosql, newsql, businessintelligence, cloudcomputing

但是flume忽略了这一行!

Flume总是从twitter导入所有数据,而不是通过关键字指定和过滤。

我怎样才能让过滤开始工作?

EN

回答 1

Stack Overflow用户

发布于 2014-06-17 05:54:33

遵循以下链接:https://github.com/cloudera/cdh-twitter-example/tree/master/flume-sources

使用这个类:

com.cloudera.flume.source.TwitterSource

顺便说一下,重新编译JAR,不要使用预构建的版本:)

编辑:要重新编译,请按照链接的第1节:

要从git存储库的根构建:

代码语言:javascript
复制
 cd flume-sources  
 mvn package
 cd ..  

这将在目标目录中生成一个名为Flume-Source-1.0SNAPSHOT.jar的文件。

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/24245867

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档