在Kafka中,是否可以每天将数据归档到某个目录?
同时让我知道是否有可能在每日基础上创建一个分区。
发布于 2018-04-29 08:31:12
您可以使用Kafka Connect和Confluent连接器中的DailyPartitioner类将主题数据备份到HDFS或S3
DailyPartitioner
Kafka也有用于本地磁盘的FileSink连接器,但您可能需要自己实现分区程序
https://stackoverflow.com/questions/50060641
相似问题