腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
搜索
关闭
文章
问答
(81)
视频
开发者手册
清单
用户
专栏
沙龙
全部问答
原创问答
Stack Exchange问答
更多筛选
回答情况:
全部
有回答
回答已采纳
提问时间:
不限
一周内
一月内
三月内
一年内
问题标签:
未找到与 相关的标签
筛选
重置
1
回答
气流
DockerOperator
容积和安装
这导致使用
DockerOperator
的DAG出现错误:**kwargs: {'volumes':t_docker =
DockerOpe
浏览 5
提问于2021-09-10
得票数 1
回答已采纳
1
回答
DockerOperator
存取气流变量
我正在尝试创建一个使用
DockerOperator
执行某些脚本的DAG。在我的
DockerOperator
中,脚本试图读取气流变量并使用BaseHook获取连接。但是,我的
DockerOperator
中的脚本似乎连接到(空的) sqlalchemy数据库,而不是通过UI设置填充连接和变量的初始化postgres数据库。是否有一种方法可以将
DockerOperator
上下文提供给包含通过UI设置的连接和变量的气流数据库?# mask_secret_task = mask_secret() get_params_tas
浏览 6
修改于2022-06-08
得票数 1
回答已采纳
1
回答
如何显示
DockerOperator
的日志记录输出?
我有一个可以工作的
DockerOperator
,但是airflow没有显示我的
DockerOperator
的任何日志记录语句,当我使用"airflow test“运行它时,它对PythonOperator
浏览 1
修改于2018-09-14
得票数 15
1
回答
使用
DockerOperator
暴露端口
我正在使用运行一个容器。但我没有看到任何相关选项来发布所需的端口。当任务被触发时,我需要发布一个when服务器端口。任何帮助或指南都将是有帮助的。谢谢!
浏览 4
修改于2021-04-05
得票数 1
1
回答
如何在Windows上使用气流
DockerOperator
我尝试从Windows运行Apache气流
DockerOperator
,但是收到了错误 docker.errors.DockerException: Error while fetching server
浏览 7
提问于2022-06-17
得票数 0
1
回答
用于码头安装的气流
DockerOperator
解决方案
我使用Docker部署了气流(2.2.4),我希望在一些DAG任务中使用
DockerOperator
。我还想用这些
DockerOperator
任务挂载一个卷,但是似乎挂载功能对于
DockerOperator
设置是不可用的。到目前为止,我已经考虑使用带有SSH键的scp作为环境变量,并将其作为附加命令添加到
DockerOperator
中。我也看过XCom特性,但我认为它不符合这个目的。还有其他人有主意吗?样本任务:
浏览 5
提问于2022-03-15
得票数 1
2
回答
如何在气流上运行
DockerOperator
?
BashOperators和PythonOperator工作得很好,但是当我尝试使用
DockerOperator
时,我得到了名为“docker”的PythonOperator No模块。
浏览 5
修改于2019-05-11
得票数 2
1
回答
airflow
DockerOperator
中的超时
import datetime, timedeltafrom airflow.providers.docker.operators.docker import
DockerOperator
task_id='start_dag' task_id='end_dag' t1 =
DockerOperator
浏览 54
修改于2021-07-21
得票数 0
回答已采纳
2
回答
Airflow
DockerOperator
,如何向容器添加体积
https://github.com/apache/airflow/pull/15843 我的任务代码如下所示: from airflow.operators.docker_operator import
DockerOperator
target='/SRC', type='bind') task_nam
浏览 15
提问于2021-08-03
得票数 0
回答已采纳
1
回答
如何利用库伯奈特气流中的
DockerOperator
DockerOperator
有一个docker_url参数,它是“运行docker的主机的URL”。
浏览 2
提问于2018-05-30
得票数 0
回答已采纳
1
回答
如何使用Apache气流中的
DockerOperator
这个问题与理解有关
DockerOperator
和Apache气流的概念有关,所以我不确定这个站点是否是正确的位置。如果没有,请让我知道我可以在哪里张贴。由于使用PythonOperator调试非常困难,所以现在我想尝试一下
DockerOperator
。我一直在跟踪这个,它声称使用
DockerOperator
,您可以开发独立于操作系统的源代码--由于Docker的“构建一次,在任何地方运行”的概念,代码将在其上执行。我的问题是,我没有完全理解使用
DockerOperator
运行代码所需的所有必要步骤。在本教程中,我有以下关于
浏览 0
提问于2020-01-16
得票数 9
1
回答
使用Airflow
DockerOperator
时出现无效参数错误
从Airflow使用
DockerOperator
时出现错误: raise AirflowException(from airflow import DAG from airflow.operators.docker_operator import
DockerOperat
浏览 83
提问于2021-07-21
得票数 0
回答已采纳
1
回答
在气流中将环境变量从主机传递到
DockerOperator
environment:我想将cron作业迁移到AirFlow (使用中的停靠-组合文件运行),在这里我想使用
DockerOperator
这是我的DAG,它在运行时将KeyError抛到AirFlow日志中,试图获取不存在的env ( var来源于主机,通过回显确认):dag=dag, task_id='这可能会让人感到困惑,因为
DockerOperator
的卷参数将我的本地(Macbook)文件路径安装到容
浏览 4
提问于2022-08-08
得票数 1
回答已采纳
1
回答
如何从容器内部获取使用
DockerOperator
执行的日志?(Airflow)
我正面临着
DockerOperator
的日志问题。 我正在使用
DockerOperator
在docker容器中运行python脚本,我需要airflow从容器中运行的python脚本中输出日志。
浏览 28
提问于2020-05-01
得票数 2
1
回答
气流-在run_id中使用
DockerOperator
作为卷名
我用Apache气流写了一个
DockerOperator
,我想给它一个卷。到目前一切尚好。下面是一个示例: task_id='test', commandvolumes=["/mnt/interim/" + "{{ run_id }}" + ":/interim"] 然而,气流似乎并
浏览 1
修改于2021-10-30
得票数 1
回答已采纳
1
回答
使用
DockerOperator
执行python和bash命令
将多个命令(由bash和python组成)传递给
DockerOperator
中的命令参数的语法,例如,如果要在停靠容器内执行-> python test.py、mkdir -p /test等命令的混合
浏览 2
提问于2018-09-23
得票数 0
2
回答
需要访问气流中
DockerOperator
中的调度时间
例如task_id="task",image="test-runner:1.0", docker_url="xxx.xxx.xxx.xxx
浏览 0
修改于2018-07-31
得票数 0
回答已采纳
1
回答
Apache Airflow
DockerOperator
找不到docker模块
因此,我正在尝试使用
DockerOperator
运行一个简单的dag。ben.muller/airflow/dags/nba_dag.py", line 5, in <module> from airflow.operators.docker_operator import
DockerOperator
浏览 4
修改于2020-06-15
得票数 0
1
回答
如何在气流中使用"host_tmp_dir“在
DockerOperator
中?
在DAG中,我使用的是一个
DockerOperator
,在其中我需要挂载一个临时目录来存储一些数据。容器必须为这个临时目录在主机上使用特定的路径,所以我尝试使用
DockerOperator
的“
DockerOperator
”参数,但这是行不通的。考虑以下DAG示例:from airflow.providers.docker.operators.docker import
DockerOperator
DAG(dag_id="test_v1",
浏览 3
修改于2022-07-25
得票数 0
回答已采纳
1
回答
我可以使用airlfow中的
dockerOperator
每次从git中拉出docker相同的图像吗?
当我使用
dockeroperator
第二次拉取相同的docker图像时,它是从本地检索的,但我希望
dockeroperator
每次都从repo中拉取图像,这在airflow中可能吗?
浏览 16
提问于2021-09-06
得票数 0
回答已采纳
第 2 页
第 3 页
第 4 页
第 5 页
点击加载更多
领券