ValueError:不支持泡菜协议:5在气流中运行作业

Question

我们已经在Linux服务器中安装了Airflow 2.1.3版本，在同一台服务器上也可以使用worker，并且在我们试图运行作业时，它说

Error: ValueError: unsupported pickle protocol: 5

airflow.exceptions.AirflowException: Celery command failed on host ******

任务级日志：

*** Failed to fetch log file from worker. The request to ':///' is missing either

目前使用Python3.6.8版本。

有没有办法解决这个问题。

Answer 1

我正在使用k8s，我也遇到了同样的问题。在我的例子中，问题是因为python版本是3.7。因此，我将标记版本从2.2.3改为2.2.3-python3.8，它可以工作。