首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >不使用本机WatchService API,而是对新文件进行Flume-ng Spool目录源文件轮询目录。

不使用本机WatchService API,而是对新文件进行Flume-ng Spool目录源文件轮询目录。
EN

Stack Overflow用户
提问于 2014-01-03 16:18:28
回答 1查看 412关注 0票数 0

我深入研究了Flume的SpoolingDirectorySource src,发现它在指定的POLL_DELAY_MS参数之后轮询假脱机目录以生成新事件。然后,这些事件由ReliableSpoolingFileEventReader在单独的线程中处理。

我想知道为什么ReliableSpoolingFileEventReader不使用WatchService API,这是相当低的级别,也是线程安全的。是否有任何特定的设计约束有利于轮询而不是观察者?\

谢谢。

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2014-01-04 04:11:17

一般来说,水槽在成批的事件中效果更好。这是因为每个批处理的文件通道都是fsync。因此,等待一段时间是收集一批事件的一个很好的权衡。

票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/20908050

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档