针对Apache Airflow / Docker用户的问题。我有一个Docker airflow镜像,我正在尝试使用一个简单的SequentialExecutor /SQLite元数据数据库,但我想在每次运行新容器时持久化元数据数据库。我想通过挂载到本地机器上的一个驱动器来实现这一点,这样initdb就可以在AIRFLOW_HOME以外的地方初始化数据库。这是可能的/可配置的吗?或者有人有更好的解决方案吗?
基本上,所需的状态是:
AIRFLOW_HOME: contains airflow.cfg, dags, scripts, logs whatever
some_other_dir: airflow.db我知道使用日志可以做到这一点,那么为什么不使用数据库呢?
谢谢!
发布于 2020-12-15 18:14:41
我认为最好的选择是使用docker-compose和一个容器作为元数据数据库,就像这样:https://github.com/apache/airflow/issues/8605#issuecomment-623182960
我使用这种方法,以及git分支,它工作得很好。除非使用make rm显式删除容器,否则数据将持续存在
https://stackoverflow.com/questions/65295301
复制相似问题