首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >刷新druid中的数据

刷新druid中的数据
EN

Stack Overflow用户
提问于 2020-09-03 14:53:16
回答 1查看 219关注 0票数 1

我正在使用index_parallel原生批处理方法从s3向Druid摄取数据。我已经使用druid UI中的Tasks选项卡完成了初始摄取。我想每天安排另一个任务来进行增量摄取。

我已经看了很多文档,但我没有找到任何与在druid上调度任务相关的东西。

有人能帮我吗?我们可以通过哪些方法来安排一个本地批处理摄取任务?

EN

回答 1

Stack Overflow用户

发布于 2020-09-24 20:16:38

通常情况下,你会使用像Airflow这样的东西来安排常规的摄取,例如,请参阅这篇很酷的博客文章:

https://www.linkedin.com/pulse/open-source-data-warehousing-druid-apache-airflow-superset-sp%C3%A4ti/

哦,也来看看这个,确保你知道如何配置作业来添加数据:

https://druid.apache.org/docs/latest/ingestion/data-management.html#adding-new-data

票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/63718308

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档