回答情况：
提问时间：
问题标签：
我想知道是否有人将Camunda作为数据管道/ETL的调度器和调度器，并且可以分享他的经验。谢谢!
浏览 10提问于2022-05-12得票数 0
回答已采纳
我在gcp数据流vm中使用python中的apache beam编写了不同的ETL管道。现在，如果一个人依赖于其他人使用云功能和调度器/或气流，我们如何计划这些？
浏览 3提问于2021-02-12得票数 0
所以我有个程序：ASEXEC [dbo].[use__MasterLoad.Staging];EXEC [dbo].[use__MasterLoad.pdw.*];我的问题是，如果控制器上的业务规则失败了，我想停止这个过程-下面是执行dbo.使用__MasterApplyBRs中的内容
ALTER PROCEDUR
浏览 0提问于2017-03-15得票数 1
回答已采纳
我有一个ETL talend作业，它可以在手动运行按钮单击。我想每天在没有任何人际互动的情况下自动完成这项工作。ETL talend工具安装在windows 10机器上。
浏览 6提问于2017-11-13得票数 2
回答已采纳
我试图控制一个任务在哪个气流工作者上执行，但是DAG定义中的队列参数没有被调度程序捕获。我在subdag操作符中定义了一个队列： subdag = build_xdata_etl_dag(dag, 'xdata_run_etl'), dag = dag,
trigger_r
浏览 2提问于2020-04-03得票数 1
我正在尝试构建一个ETL，它将源表映射到一个维度的星型模式模型。构建一个直接使用Python ()处理kudu表的ETL。或
B-或在黑斑羚中创建UDF(等效于SQL中的存储过程)，执行插入/联接等操作，将源表映射到星型模式模型，并使用Nifi或任何调度程序(如气流等)对其进行调度。
浏览 10提问于2021-04-16得票数 0
回答已采纳
如何将其作为一个ETL部署在云服务器上，该ETL将链接到作业调度程序，从而不再需要人工操作？
我担心的是，Xlwing需要Excel许可证(和GUI?)，这在生产服务器中通常是不可用的。
浏览 5修改于2022-05-27得票数 5
回答已采纳
我想把这个可执行文件放在Windows任务调度程序上。专用
用launch4j构建的Java可执行文件。带有schtasks /create /tn MyETL /sc hourly /mo 3 /tr C:\ETL\etl.exe的调度器集
浏览 1修改于2017-08-19得票数 0
回答已采纳
我用Python编写了一个ETL作业。今天我使用ap调度器。我的密码里有这样的东西：
sched.add_job(etl_job,'interval',minutes=7)现在有人知道要解决这个问题了吗
浏览 4提问于2020-09-29得票数 0
回答已采纳
我想了解像Hadoop MapReduce作业/火花作业/Hive脚本/Pig脚本这样的ETL作业通常是如何部署在on premises生产/开发环境中的。它们是否总是使用像Apache气流或Apache这样的调度器来部署和运行？
我假设这些作业几乎从不独立运行，而且总是使用调度程序运行，即使它是一个简单的调度bash脚本。这个准确吗？
浏览 0提问于2021-10-29得票数 1
2回答
我被要求制作一个ETL风格的应用程序，将信息从一个数据源传输到另一个数据源。目前，我已经决定使用三层体系结构，但我想了解更多关于最佳实践以及这个wikipedia页面描述的生命周期的信息：
Functional层：核心功能的ETL处理(提取、转换和load).Operational管理层：作业流定义和管理、参数、调度、监视、通信和alerting.Audit，平衡和控制层：作业执行统计、平衡和控制、拒绝和错误处理、代码management.Utility真实ETL循环
典型
浏览 2修改于2018-04-07得票数 2
回答已采纳
我们有大量的测试用例(数百个)存储在.sql文件中，用于验证来自ETL过程的数据可交付内容。我们想要自动化这些的执行。如果不是自动运行，则通过调度程序批量运行它们。它们需要在ETL包之外完成，因为它们属于SQA而不是开发人员。我们可能也会将结果记录到DB表中，但还没有解决这个问题。欢迎任何关于这两个主题的提示/建议。
浏览 10修改于2019-01-08得票数 1
我正在尝试使用Glue ETL作为Python脚本的作业调度程序，该脚本还引用了JSON配置文件。我在这里做错什么了？
浏览 1提问于2021-08-05得票数 1
回答已采纳
两个问题：
可以作为工作流调度器在更高级别上使用，以执行更通用的任务(即ETL)，其结果可能在以下ML任务中有用？可以使用KF中argo的所有功能。通用工作流调度器(如气流、Argo等)。
浏览 3修改于2022-01-11得票数 0
回答已采纳
3回答
我试着让气流更好地协调etl过程。当我更改dags文件夹中的dag时，我通常必须用在UI中可见更改之前。我想将调度程序作为守护进程运行但我们试着这么做，我收到一条消息说我认为这个错误会弹出，因为调度程序已经作为守护进程运行了。但是，当我试图找出调度程序在哪里运行时我没有得到任何结果。问
浏览 0提问于2018-10-17得票数 7
回答已采纳
我收到这样的信息：
任务调度程序成功地完成了任务"\CustomerDataSourceETL“，实例"{a574f6b4-2614-413c-8661-bc35eaeba7cd}”，动作"E:\applications\CCDB-ETL\CustomerDataSourceETLConsole.exe“，返回代码214794259。如何让任务调度程序检测返回代码>0并失败？
浏览 0修改于2011-01-14得票数 2
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号