hadoop - 我可以将API与STORM或KAFKA连接

标签 hadoop apache-kafka apache-storm

我正在做一个具有深度学习的汽车股票交易系统项目
我有股票市场的API,想与Hadoop集群连接
如何将API与KAFKA或STORM连接?

最佳答案

希望您像下面这样连接:
API <-卡夫卡<-HADOOP
如果是,则可以将Kafka连接到hadoop,然后可以从您的API连接到Kafka。
但是要连接到Kafka,您需要通过Zookeeper。在任何阶段都没有理由避免动物园管理员。您也可以在没有Zookeeper的情况下进行连接,但是如果它是沙盒,则必须进行一些修改。由于您应该在prod env中运行它,因此除非组织决定这样做,否则您不能跳过zookeeper。

关于hadoop - 我可以将API与STORM或KAFKA连接,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/63463636/

相关文章:

sql - 配置单元查询结果到新表

hadoop - 在MapReduce中使用HBase代替HDFS

apache-spark - 如何在 Kafka 主题中流式传输 100GB 的数据?

networking - Kafka Docker network_mode

java - Apache Samza 不运行

parallel-processing - Storm并行性中的 "task"是什么

apache-spark - Apache Storm 与 A​​pache Samza 与 Apache Spark

redis - 我如何使用三叉戟拓扑将元组写入redis和cassandra

scala - 当我尝试通过 Cloudera VM 在 spark 中运行 scala 命令时,topology.py 出现语法错误

hadoop - hadoop HDFS中有没有ln