首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >KSQL :在KSQL服务器重新启动后丢失Kstream数据

KSQL :在KSQL服务器重新启动后丢失Kstream数据
EN

Stack Overflow用户
提问于 2020-02-24 02:33:11
回答 1查看 270关注 0票数 0

我使用查询"Create base_stream with“(kafka-topic ="myTopic",format="avro")创建了一个流,这个主题拥有超过800 of的数据并在不断增长。

问题:

  1. 是否复制了新流中底层主题中的数据?或者是相同的数据?当KSQL服务器重新启动时,
  2. base_stream丢失了其数据。有任何方法来持久化这些数据吗?因为,如果每次KSQL server重新启动时都必须重新同步/重新创建base_stream,这可能需要许多小时!
  3. 我知道可以从"base_stream“创建持久流,但是,我们将在2 streams

中复制数据。

感谢您的回复,谢谢!

EN

回答 1

Stack Overflow用户

发布于 2020-02-24 03:53:14

我知道可以从"base_stream“创建持久流,但是,我们将在两个流中复制数据

仓库很便宜。我见过很多结核病大的话题。如果您能够随着时间的推移发出聚合窗口以减少大小,则可以启用有关该主题的压缩策略和保留策略

当KSQL服务器重新启动时,

base_stream丢失了它的数据。有任何方法来持久化这些数据吗?

您在现有主题的基础上创建了流。没有一个流认为需要恢复或丢失的真实数据,这回答了问题1

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/60368841

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档