hadoop - Nifi消耗卡夫卡不接受上游连接

标签 hadoop apache-kafka hdfs apache-nifi

我正在每隔500到10000条记录处理一次consumpkafka民意调查消息,而每30秒一次进行一次nifi迭代。我想在所有工作完成后查询下一次迭代时使用kafkafka。但是消耗卡处理器不支持上游连接。

一旦puthdfs成功,我需要在这里使用下一个迭代,我提到了nifi工作流程。

工作流程:

Consumerkafka-> mergecontent-> convertRecord-> updateattribute-> puthdfs

最佳答案

关于hadoop - Nifi消耗卡夫卡不接受上游连接,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/61061171/

相关文章:

hadoop - FairScheduler是否适用于单节点集群?

apache-kafka - 使用选择键和转换在 DSL 拓扑上进行流重新分区

java - 定义 SpoutConfig 参数

python - 使用pyarrow时无法加载libhdfs

hadoop - 在 PIG UDF 中调试

hadoop - Hive 查询以获取任何列为空的行

scala - 连接 hive 和spark时发生异常HDFS上的根暂存目录:/tmp/hive应该是可写的。当前权限是:rwxrwxr-x

java - 使用java读取hdfs blk_.meta文件

apache-kafka - kafka-topics.sh ---delete --topic '' testTopic'' 不适用于 kafka V 0.10.1

hadoop - MAX 中的 NULL,HIVE 中的 MIN 函数