支持自动调度的Java开源ETL框架

Question

我正在解析文件数据并加载到数据库中，这个解析应该每5分钟重复一次。有没有支持自动作业调度的Java ETL框架？

我接触过Talend。但是没有自动的作业调度。我的目的是计划每5分钟解析一次jar文件。我不能依赖crontab或Windows调度程序。有没有人建议我，有没有开放源码的Java ETL框架，有自动作业调度功能。

谢谢和问候，Gopal

Answer 1

使用Jenkins。大多数人使用它进行部署和软件构建，但老实说，它真的是一个超级cron。它是定期作业的完美选择。对于ETL，使用你认为最好的: Talend，Clover，Pentaho，scripting language等。只要确保你打包的任何东西都可以通过命令行运行，这样你就可以使用Jenkins了。

Answer 2

Jaspersoft ETL提供作业调度。既然它是基于Talend的，那么绕过它对你来说应该不是一个困难。

Answer 3

带有服务器的CloverETL也有一些作业调度。

也许你可以使用Jenkins来调度Talend作业。(听起来很疯狂，但我最近读到了一些关于使用Jenkins作为日程安排工具的文章；)