对于流式应用程序,选择 Flink 而不是新的 Spark 2.3 有什么好处,现在 Spark 2.3 带来了延迟为 1 毫秒的“连续处理”?
最佳答案
我选择 Flink 的原因之一是 Spark Structured Streaming 2.3 仍然没有与 AWS Kinesis 的连接器。 此外,新的“连续处理”模式非常新,仍然不支持聚合,如图所示 here .我们预计可能会在 6-12 个月内获得支持。 最后,Flink 是从头开始构建的,在 Spark 被改编的同时进行流式处理。所以 Flink 仍然具有更低的延迟和更丰富的 API。
关于apache-spark - 有什么理由选择 Flink 而不是 Spark 2.3 Structured Streaming?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/50807224/