首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏最新最全的大数据技术体系

    助力工业物联网,工业大数据之服务域:AirFlow的架构组件【三十二】

    email 发送邮件的 其他 MySqlOperator PostgresOperator MsSqlOperator OracleOperator JdbcOperator DockerOperator

    1.3K30编辑于 2023-08-16
  • 来自专栏速入大数据

    Airflow 做 ETL,真不是“排个 DAG 就完事儿”:那些年我踩过的坑与悟出的道

    任务执行器”而不是“调度编排器”我见过不少项目把Airflow当成“万能胶”:数据清洗写在PythonOperator数据加工写在BashOperator数据入仓也写在PythonOperator拖个DockerOperator

    30500编辑于 2025-12-12
  • 来自专栏编程教程

    Airflow调度爬虫任务:从零搭建高效定时采集系统

    Operator类型选择PythonOperator:最常用,直接调用爬虫函数BashOperator:适合调用shell命令(如启动Scrapy)DockerOperator:当需要隔离环境时使用HttpOperator

    64710编辑于 2025-11-07
  • 来自专栏深度学习与python

    为什么数据科学家不需要了解 Kubernetes

    Airflow 中一个使用了 DockerOperator 的简单工作流。本示例来自 Airflow 存储库。 如果你的工作流程中存在两个不同步骤有不同的要求,理论上,你可以使用 Airflow 提供的 DockerOperator 创建不同的容器,但这并不容易。

    2K20发布于 2021-11-10
  • 来自专栏全栈程序员必看

    八种用Python实现定时执行任务的方案,一定有你用得到的!

    DockerOperator, HiveOperator,S3FileTransferOperator,PrestoToMysqlOperator, SlackOperator… 除了以上这些

    3.9K30编辑于 2022-09-07
  • 来自专栏用户6291251的专栏

    Python 实现定时任务的八种方案!

    DockerOperator, HiveOperator, S3FileTransferOperator, PrestoToMysqlOperator, SlackOperator… 除了以上这些 Operators

    1.5K20发布于 2021-10-20
  • 来自专栏CDA数据分析师

    Python 实现定时任务的八种方案!

    DockerOperator, HiveOperator, S3FileTransferOperator, PrestoToMysqlOperator, SlackOperator… 除了以上这些 Operators

    3.1K20发布于 2021-10-14
  • 来自专栏Python编程与实战

    Python 实现定时任务的八种方案!

    DockerOperator, HiveOperator, S3FileTransferOperator, PrestoToMysqlOperator, SlackOperator… 除了以上这些 Operators

    37K73发布于 2021-10-12
  • 来自专栏AI SPPECH

    77_自动化脚本:Makefile与Airflow

    DockerOperator:在Docker容器中执行命令。 KubernetesPodOperator:在Kubernetes中执行Pod。

    25610编辑于 2025-11-16
领券