具有自动调度功能的 Java 开源 ETL 框架答案

【问题标题】：Java Opensource ETL framework with automatic scheduling具有自动调度功能的 Java 开源 ETL 框架
【发布时间】：2012-02-01 05:53:42
【问题描述】：

我正在解析文件数据并加载到数据库中，这个解析应该每 5 分钟重复一次。有没有支持自动作业调度的JavaETL框架。

我已经接触过Talend。但是没有自动作业调度。我的目的是安排每 5 分钟解析一次 jar 文件。我不能依赖 crontab 或 Windows 调度程序。任何人都可以建议我是否有任何具有自动作业调度功能的开源 Java ETL 框架。

感谢和问候，戈帕尔

【问题讨论】：

【解决方案1】：

使用詹金斯。大多数人将它用于部署和软件构建，但老实说，它确实是一个超级 cron。它非常适合定期工作。对于 ETL，请使用您认为最好的：Talend、Clover、Pentaho、脚本语言等。只要确保您打包的任何内容都可以通过命令行运行，这样您就可以使用 Jenkins。

【讨论】：

【解决方案2】：

Jaspersoft ETL 提供作业调度。由于它基于 Talend，因此您应该不难绕过它。

【讨论】：

【解决方案3】：

CloverETL with Server 也有一些作业调度。

也许您可以使用 Jenkins 来安排 Talend 作业。（听起来很疯狂，但我最近读了一些关于使用 Jenkins 作为调度工具的文章；））

【讨论】：

【解决方案4】：

疯狂而且可能太复杂 = 烟雾 + 石英

【讨论】：