hadoop - Spark 中的任何 Oozie 等效功能

标签 hadoop apache-spark

是否有任何类似于 Spark 中的 Oozie 用于工作流设计。我有一个用例,我必须每隔 5 分钟查询一次配置单元。

谢谢

最佳答案

Oozie 正在使用 this Jira 获得原生 Spark 操作因此,如果您准备等待下一个版本或运行 Oozie trunk,那么这可能是一个选择。

关于hadoop - Spark 中的任何 Oozie 等效功能,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/29092679/

相关文章:

scala - 如何从字符串列中提取数字?

client - Hadoop:提交作业后客户端的高 CPU 负载

java - 将 hive 函数转换为 java - 翻译和 regexp_replace

scala - 为什么persist()在Spark中被惰性求值

java - 从插入的 DataSet 获取主键以链接到其他插入

apache-spark - pyspark:CrossValidator 不起作用

hadoop - 当tez.lib.uris == tez.tar.gz时,TEZ不起作用

mysql - Sqoop导入 “--where”标志

hadoop - 通过 Oozie 进行 Map-Reduce

java - Spark : Serialization not working with Aggregate