我已经将一组luigi任务打包到一个包中。目前,每个etl- luigi.cfg在同一目录下都有自己的任务,但是由于所有这些.cfg文件都是相同的,所以看起来不太理想。最重要的是,我更喜欢从不同的包/环境变量中编写S3凭据,而不是存储在git中的平面文件中。
从软件包中为luigi设置默认/常规配置的最佳方式是什么?
看起来luigi.Config和luigi.interface.core包很有前途,但我仍然不确定我需要在哪里执行/启动它们。
https://stackoverflow.com/questions/47660228
复制相似问题