java - 从 kafka 消费者向服务发出 100 万个单独的 http 请求是个好主意吗?

标签 java http httprequest scalability distributed-system

假设我有一个 kakfa 消费者,它每秒可以消耗大量消息。每条消息都需要通过 http 请求发布到另一个服务。为每条消息发出单独的 http 请求是个好主意吗?大约 100 万条消息 = 100 万个 http 请求

最佳答案

这很大程度上取决于您的用例。显然,批处理它们会更有效。然而,我认为最重要的是要记住什么时候提交这些消息。每当您决定进行 http 调用时,我建议在 http 调用成功之前不要提交消息。当然,这意味着您的 http 调用是幂等的,因为如果您的应用程序在 http 请求期间崩溃,您将再次使用该消息。

关于java - 从 kafka 消费者向服务发出 100 万个单独的 http 请求是个好主意吗?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/56031087/

相关文章:

java - Android到电脑FTP断点上传奇怪现象

java - 程序找不到文件

php - 是否应该对 PHP header 位置进行编码?

api - 基于 XML API 调用创建 Guzzle 服务定义

javascript - 强制 HTTP 请求在浏览器中失败

jquery - 如何在 jQuery 中发送 PUT/DELETE 请求?

java - 如何让java反射也采用依赖类?

javascript - 有没有办法创建与 JSON.stringify(jsObject) 创建的 Java <-> JSON 映射对象完全相同的字符串?

javascript - Node.js HTTP 请求返回 2 个 block (数据体)

javascript - 弹性转码器 AWS 从 Parse.com CloudCode Javascript http 请求创建作业