首页
学习
活动
专区
圈层
工具
发布
社区首页 >专栏 >AllData通过开源项目DolphinScheduler完成物联网数据同步任务:TDengine同步到Doris 全流程

AllData通过开源项目DolphinScheduler完成物联网数据同步任务:TDengine同步到Doris 全流程

原创
作者头像
奥零数据科技
发布2026-03-11 13:36:28
发布2026-03-11 13:36:28
870
举报

【AIIData数据中台】集成开源项目DolphinScheduler构建离线开发平台,本文展示基于 DolphinScheduler 调度的离线数据同步能力,实现 TDengine 到 Doris 高效、稳定、可视化的数据流转,开箱即用。

✅ 可视化配置,零代码完成 TDengine → Doris 同步

✅ 内置连接器,无需手写复杂 SQL 与 Shell

✅ 依托 DolphinScheduler 强大调度,支持依赖、重试、告警

✅ 全流程可追踪、可监控、可运维,生产级稳定

从数据源配置、任务编排、调度执行,到最终 Doris 数据入库校验,一条链路闭环。既解决时序数据同步效率问题,又降低平台使用门槛。

  • TDengine-Enterprise trial 3.4.0.7
  • Doris 版本:doris-2.0.7
  • SeaTunnel 版本:2.3.12

1、查看TDengine 数据库表信息

2、创建Doris库表(无需操作,自动建表)

1、打开安全中心

2、在左侧菜单选择环境管理

3、创建环境

  • 配置 JDK
  • 配置 SeatunnelServer
  • 确定保存

1、打开项目管理

2、创建项目

3、点击项目名称

4、打开工作流定义

5、创建工作流(找到数据集成 SEATUNNEL,拖拽到画板)

  • 填写必填项
  • 页面下滑,找到脚本设置
  • 加入以下脚本内容

  • 点击确定保存

6、保存工作流

7、上线工作流

8、暂不配置定时任务,手动触发执行

9、运行工作流

10、打开工作流实例(查看工作流运行状态)

11、打开任务实例(可以看到任务执行完成)

1、同步数据前,查看Doris,没有数据库、表

2、同步数据后,查看Doris,自动创建mydb数据库,tdengine_result表

用一套可视化离线开发平台,把 TDengine 同步 Doris 这件事,做得简单、稳定、可规模化。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档