驱动Hive查询的工作流程

Question

是否有一个好的框架可以作为驱动Hive查询的工作流？ 我看了Hamake，Oozie，Azkaban和Cascading，但似乎它们不适合这个目的。 我目前正在使用Shell脚本来执行此操作，但是随着我们发展业务流程，它变得越来越混乱。

Answer 1

我并没有对很多工作流引擎给予太多关注，但是许多人（包括我自己）都使用Hive客户端（ https://cwiki.apache.org/Hive/hiveclient.html ）从他们选择的语言发出Hive查询。

Answer 2

如果要在输入数据到达或修改时运行配置单元查询，则Hamake很好。 如果您想按给定的时间表运行配置单元查询，Oozie很好。