首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >Airflow - BashOperator -运行2个命令时出错

Airflow - BashOperator -运行2个命令时出错
EN

Stack Overflow用户
提问于 2021-03-29 16:25:34
回答 1查看 94关注 0票数 0

我使用的是Ubuntu 20.04和Airflow 2.0.1。

我在DAG中有一个BashOperator任务,如下所示:

代码语言:javascript
复制
proxy_update_getProxies = BashOperator(
    task_id='proxy_update_getProxies',
    bash_command="scripts/proxies-update-get.sh",
    dag=dag)

scripts文件夹在dag文件夹中,所以根据文档,应该可以像这样运行它。

proxies-update-get.sh脚本包含2行:

代码语言:javascript
复制
proxy-lists updateGeoIpData --license-key Y00qKC2A9ZoWVXJW
proxy-lists getProxies --protocols="https" --output-format="txt" --output-file="httpsproxies.txt"

proxy-lists是一个nmp包,可以从命令行界面运行这两个命令来更新和获取代理列表。脚本在任何文件夹中都工作得很好,所以$PATH应该不会有问题,但我得到了这个错误:

代码语言:javascript
复制
can't open file 'proxy-lists': [Errno 2] No such file or directory

我做错了什么?

EN

回答 1

Stack Overflow用户

发布于 2021-03-30 00:02:56

感谢@00@PeterRing

我只是在我的bash脚本中使用了节点CLI脚本的完整路径,它工作得很好:

代码语言:javascript
复制
/home/username/.nvm/versions/node/v14.16.0/lib/node_modules/proxy-lists/cli.js updateGeoIpData --license-key hshshhshshshsh
/home/username/.nvm/versions/node/v14.16.0/lib/node_modules/proxy-lists/cli.js getProxies --protocols="https" --output-format="txt" --output-file="/home/username/airflow/dags/scripts/httpsproxies.txt"
票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/66850898

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档