hadoop - Oozie从文件获取变量

标签 hadoop hive oozie hue

作为工作流中的一项操作,我将Hive SELECT COUNT命令的输出写入到我们的hdfs中的文本文件中。

之后,我需要根据输出中的值在工作流程中做出决定。

我正在使用HUE构建此工作流程。

我需要知道的是:

  • 如何获取此值作为变量,最好不要在工作流开始时获取,因为它将由初始操作生成。
  • oozie决策中此变量的语法。

  • 我已尽力将其他类似问题的答案拼凑在一起,但我希望填补一些空白。

    我将非常感谢您的指导!谢谢!

    最佳答案

    我会选择Java路径和capture-output。 Oozie支持使用凭据(https://oozie.apache.org/docs/4.2.0/DG_ActionAuthentication.html)进行Kerberos委派,因此您无需在Java中进行身份验证;只需使用标准的JDBC连接

    关于hadoop - Oozie从文件获取变量,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/49776540/

    相关文章:

    windows - Windows : ERROR crawl. 喷油器上的 Nutch

    mysql - 在查询另一个表时将数据导出到配置单元表

    hadoop - 使用 oozie 运行多个 mapreduce 作业?

    hadoop - 无法运行象夫 jar

    hadoop - Hadoop与Cassandra:在以下情况下哪个更好?

    azure - HDInsight 和 Talend Open Studio for Big Data

    hadoop - Oozie发行版创作失败

    hadoop - 我可以提交包含多个配置文件的 oozie 作业吗?

    json - 如何使用 blueprint.json 文件重新配置 Ambari 服务值

    hadoop - 从 Hive 中的多个表中选择数据