任务结果将自动保存在.prefect/results文件夹下,该文件夹会在任何时间内填充磁盘。我需要在全球范围内改变这个目录或者禁用自动保存。
我在环境变量下面设置,但它没有工作。
PREFECT__FLOWS__CHECKPOINTING=false发布于 2021-08-25 16:43:08
该环境变量由Prefect Cloud设置为True。每个任务都需要显式地执行
@task(checkpointing=False)但是,当重新启动失败的流运行时,这些文件很重要,因此禁用这些文件意味着在重新启动流时不能仅仅加载数据。一种方法是始终为结果提供相同的文件名,这样您就可以继续覆盖最新的结果。
https://stackoverflow.com/questions/68906265
复制相似问题