在循环中获取“检查flume.conf中的更改”

Question

我使用ApacheFlum1.4.0收集日志文件(auth.log)并存储在HDFS (Hadoop2.6.0)中。使用的命令是：

 bin/flume-ng agent --conf ./conf/ -f flume.conf -Dflume.root.logger=DEBUG,console -n agent

flume.conf文件包含以下内容：

agent.channels.memory-channel.type = memory

agent.sources.tail-source.type = exec
agent.sources.tail-source.command = tail -F /var/log/auth.log
agent.sources.tail-source.channels = memory-channel

agent.sinks.log-sink.channel = memory-channel
agent.sinks.log-sink.type = logger
agent.sinks.hdfs-sink.channel = memory-channel
agent.sinks.hdfs-sink.type = hdfs
agent.sinks.hdfs-sink.hdfs.path = hdfs://localhost:54310/usr/auth.log
agent.sinks.hdfs-sink.hdfs.fileType = DataStream

agent.channels = memory-channel
agent.sources = tail-source
agent.sinks = log-sink hdfs-sink

运行该命令后，以下消息在循环中不断重复：

(conf-file-poller-0) [DEBUG - org.apache.flume.node.PollingPropertiesFileConfigurationProvider$FileWatcherRunnable.run(PollingPropertiesFileConfigurationProvider.java:126)] Checking file:flume.conf for changes

可能是什么原因？

Answer 1

默认情况下，Flume设计为每30秒检查一次(这是硬编码)，以查找更改的配置文件。然后重新创建受影响的组件(源、接收器或通道)，以便应用新的配置。如果要禁用此行为，只需使用--no-reload-conf选项启动代理即可。